Python readlines số dòng

ví dụ 1. Sử dụng vòng lặp for

Nội dung của tệp

fp.close()
2 là

honda 1948
mercedes 1926
ford 1903

Mã nguồn

def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))

đầu ra

3

Sử dụng vòng lặp for, có thể đếm được số dòng của tệp

  • Mở tệp ở chế độ chỉ đọc
  • Sử dụng vòng lặp for, lặp qua đối tượng
    fp.close()
    
    3
  • Trong mỗi lần lặp, một dòng được đọc;

ví dụ 2. Sử dụng hiểu danh sách

num_of_lines = sum(1 for l in open('my_file.txt'))

print(num_of_lines)

đầu ra

3
  • Mở tệp ở chế độ chỉ đọc
  • Sử dụng vòng lặp for, lặp qua
    fp.close()
    
    4
  • Sau mỗi lần lặp, trả về 1
  • Tìm tổng của các giá trị trả về

Một nhiệm vụ phổ biến trong lập trình là mở một tệp và phân tích nội dung của nó. Bạn sẽ làm gì khi tệp bạn đang cố xử lý khá lớn, chẳng hạn như vài GB dữ liệu hoặc lớn hơn? . Mặc dù tùy thuộc vào bạn để xác định kích thước phù hợp cho các khối dữ liệu bạn đang xử lý, nhưng đối với nhiều ứng dụng, việc xử lý một tệp tại một thời điểm là phù hợp

Trong suốt bài viết này, chúng tôi sẽ đề cập đến một số ví dụ mã minh họa cách đọc tệp theo từng dòng. Trong trường hợp bạn muốn tự mình thử một số ví dụ này, bạn có thể tìm thấy mã được sử dụng trong bài viết này tại repo GitHub sau

Tệp IO cơ bản trong Python

Python là một ngôn ngữ lập trình có mục đích chung tuyệt vời và nó có một số chức năng IO tệp rất hữu ích trong thư viện tiêu chuẩn gồm các hàm và mô-đun tích hợp sẵn

Hàm

fp.close()
1 tích hợp sẵn là thứ bạn sử dụng để mở một đối tượng tệp cho mục đích đọc hoặc ghi. Đây là cách bạn có thể sử dụng nó để mở một tập tin

fp = open('path/to/file.txt', 'r')

Như đã trình bày ở trên, hàm

fp.close()
1 nhận nhiều đối số. Chúng tôi sẽ tập trung vào hai đối số, với đối số đầu tiên là tham số chuỗi vị trí biểu thị đường dẫn đến tệp bạn muốn mở. Tham số thứ hai (tùy chọn) cũng là một chuỗi và nó chỉ định chế độ tương tác mà bạn định sử dụng trên đối tượng tệp được trả về bởi lệnh gọi hàm. Các chế độ phổ biến nhất được liệt kê trong bảng bên dưới, với chế độ mặc định là 'r' để đọc

Chế độ Mô tả
fp.close()
3Mở để đọc văn bản thuần túy
fp.close()
4Mở để viết văn bản thuần túy
fp.close()
5Mở tệp hiện có để nối thêm văn bản thuần túy
fp.close()
6Mở để đọc dữ liệu nhị phân
fp.close()
7Mở để ghi dữ liệu nhị phân

Khi bạn đã viết hoặc đọc tất cả dữ liệu mong muốn trong một đối tượng tệp, bạn cần đóng tệp để tài nguyên có thể được phân bổ lại trên hệ điều hành mà mã đang chạy trên đó

fp.close()

Python readlines số dòng

Ghi chú. Việc đóng tài nguyên đối tượng tệp luôn là một phương pháp hay, nhưng đó là một nhiệm vụ rất dễ quên

Mặc dù bạn luôn có thể nhớ gọi

fp.close()
8 trên một đối tượng tệp, nhưng có một cách thay thế và thanh lịch hơn để mở một đối tượng tệp và đảm bảo rằng trình thông dịch Python sẽ dọn sạch sau khi sử dụng

Chỉ cần sử dụng từ khóa

fp.close()
9 (được giới thiệu trong Python 2. 5) đối với mã chúng tôi sử dụng để mở một đối tượng tệp, Python sẽ làm điều gì đó tương tự như mã sau. Điều này đảm bảo rằng bất kể đối tượng tệp nào được đóng sau khi sử dụng

Một trong hai phương pháp này đều phù hợp, với ví dụ đầu tiên là Pythonic hơn

Đối tượng tệp được trả về từ hàm

fp.close()
1 có ba phương thức rõ ràng phổ biến (
def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
71,
def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
72 và
def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
73) để đọc dữ liệu. Phương thức
def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
71 đọc tất cả dữ liệu thành một chuỗi. Điều này hữu ích cho các tệp nhỏ hơn mà bạn muốn thực hiện thao tác văn bản trên toàn bộ tệp. Sau đó, có
def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
72, đây là một cách hữu ích để chỉ đọc từng dòng riêng lẻ, với số lượng tăng dần tại một thời điểm và trả về chúng dưới dạng chuỗi. Phương thức rõ ràng cuối cùng,
def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
73, sẽ đọc tất cả các dòng của tệp và trả về chúng dưới dạng danh sách các chuỗi

Ghi chú. Trong phần còn lại của bài viết này, chúng ta sẽ làm việc với văn bản của cuốn sách "Iliad of Homer", có thể tìm thấy tại gutenberg. org, cũng như trong repo GitHub chứa mã cho bài viết này

Đọc từng dòng tệp trong Python với readline()

Hãy bắt đầu với phương thức

def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
72, phương thức đọc một dòng, phương thức này sẽ yêu cầu chúng ta sử dụng bộ đếm và tăng nó

def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
7

Đoạn mã này mở một đối tượng tệp có tham chiếu được lưu trữ trong

def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
78, sau đó đọc từng dòng một bằng cách gọi
def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
72 trên đối tượng tệp đó lặp đi lặp lại trong một vòng lặp
3
70. Sau đó, nó chỉ cần in dòng ra bàn điều khiển

Chạy mã này, bạn sẽ thấy một cái gì đó như sau

3
7

Mặc dù, cách tiếp cận này là thô và rõ ràng. Chắc chắn không phải là rất Pythonic. Chúng ta có thể sử dụng phương pháp

def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
73 để làm cho mã này ngắn gọn hơn nhiều

Đọc từng dòng tệp với readlines()

Phương thức

def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
73 đọc tất cả các dòng và lưu trữ chúng vào một
3
73. Sau đó, chúng tôi có thể lặp lại danh sách đó và sử dụng
3
74, tạo chỉ mục cho từng dòng để thuận tiện cho chúng tôi

num_of_lines = sum(1 for l in open('my_file.txt'))

print(num_of_lines)
3

Hãy xem hướng dẫn thực hành, thực tế của chúng tôi để học Git, với các phương pháp hay nhất, tiêu chuẩn được ngành chấp nhận và bao gồm bảng gian lận. Dừng các lệnh Git trên Google và thực sự tìm hiểu nó

Kết quả này trong

num_of_lines = sum(1 for l in open('my_file.txt'))

print(num_of_lines)
4

Bây giờ, mặc dù tốt hơn nhiều, chúng ta thậm chí không cần gọi phương thức

def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
73 để đạt được chức năng tương tự. Đây là cách truyền thống để đọc từng dòng một tệp, nhưng có một cách hiện đại hơn, ngắn hơn

Đọc từng dòng tệp bằng vòng lặp for - Cách tiếp cận Pythonic nhất

Bản thân

3
76 được trả về là một lần lặp. Chúng tôi hoàn toàn không cần trích xuất các dòng qua
def file_len(fname):
    with open(fname) as f:
        for i, l in enumerate(f):
            pass
    return i + 1

print(file_len("my_file.txt"))
73 - chúng tôi có thể tự lặp lại đối tượng được trả về. Điều này cũng làm cho nó dễ dàng để viết số dòng trong mỗi câu lệnh
3
79

Đây là cách tiếp cận ngắn nhất, Pythonic nhất để giải quyết vấn đề và cách tiếp cận được hầu hết mọi người ưa chuộng.

3
0

Kết quả này trong

3
1

Ở đây, chúng ta đang tận dụng các chức năng tích hợp sẵn của Python cho phép chúng ta lặp lại dễ dàng trên một đối tượng có thể lặp lại, chỉ cần sử dụng vòng lặp

num_of_lines = sum(1 for l in open('my_file.txt'))

print(num_of_lines)
30. Nếu bạn muốn đọc thêm về các chức năng tích hợp sẵn của Python trên các đối tượng lặp, chúng tôi đã giới thiệu cho bạn

Làm thế nào bạn có thể sử dụng điều này thực tế? . Hầu hết thời gian, sẽ không khôn ngoan nếu đọc toàn bộ kho ngữ liệu vào bộ nhớ. Mặc dù thô sơ, bạn có thể viết một giải pháp từ đầu để đếm tần suất của một số từ nhất định mà không cần sử dụng bất kỳ thư viện bên ngoài nào. Hãy viết một tập lệnh đơn giản tải vào một tệp, đọc từng dòng một và đếm tần suất xuất hiện của các từ, in ra 10 từ thường xuyên nhất và số lần xuất hiện của chúng

3
3

Tập lệnh sử dụng mô-đun

num_of_lines = sum(1 for l in open('my_file.txt'))

print(num_of_lines)
31 để đảm bảo rằng tệp chúng tôi đang cố đọc thực sự tồn tại. Nếu vậy, nó sẽ đọc từng dòng và mỗi dòng được chuyển vào hàm
num_of_lines = sum(1 for l in open('my_file.txt'))

print(num_of_lines)
32. Nó phân định khoảng trắng giữa các từ và thêm từ đó vào từ điển -
num_of_lines = sum(1 for l in open('my_file.txt'))

print(num_of_lines)
33. Khi tất cả các dòng được ghi vào từ điển, chúng tôi sắp xếp nó qua
num_of_lines = sum(1 for l in open('my_file.txt'))

print(num_of_lines)
34 trả về danh sách các bộ ở định dạng
num_of_lines = sum(1 for l in open('my_file.txt'))

print(num_of_lines)
35, được sắp xếp theo số lượng từ

Cuối cùng, chúng tôi in mười từ phổ biến nhất

Thông thường, đối với điều này, bạn sẽ tạo Mô hình Túi từ, sử dụng các thư viện như NLTK, tuy nhiên, việc triển khai này sẽ đủ. Hãy chạy tập lệnh và cung cấp

num_of_lines = sum(1 for l in open('my_file.txt'))

print(num_of_lines)
36 của chúng tôi cho nó

fp.close()
0

Kết quả này trong

fp.close()
0

Sự kết luận

Trong bài viết này, chúng ta đã khám phá nhiều cách để đọc từng dòng một tệp trong Python, cũng như tạo mô hình Túi từ thô sơ để tính toán tần suất của các từ trong một tệp nhất định