python 获取txt格式超大文件的行数

如果你的 txt 文件非常大，逐行读取文件可能会非常慢。在这种情况下，你可以使用一种更高效的方法来获取文件的行数，也就是二分查找法。

具体来说，你可以利用文件指针来跳转到文件的中间位置，然后向后扫描，计算出当前位置前面的行数。然后，你可以根据当前位置前面的行数来判断应该向前还是向后跳转，直到找到文件的末尾。这个方法的时间复杂度为 O(log n)，比逐行读取文件的时间复杂度 O(n) 要快得多。

下面是一个使用二分查找法来获取文件行数的 Python 代码示例：

def count_lines(filename):
    with open(filename, "rb") as f:
        f.seek(0, 2)  # 将文件指针跳到文件末尾
        end = f.tell()
        start = 0
        while start < end:
            mid = (start + end) // 2  # 将文件指针跳转到中间位置
            f.seek(mid)
            if f.read(1) == b'\n':  # 如果中间位置是一个换行符，则向前移动一个位置
                mid -= 1
                f.seek(mid)
            # 向后扫描，计算中间位置前面的行数
            while f.read(1) != b'\n' and mid > start:
                mid -= 1
                f.seek(mid)
            if mid == start:
                return mid
            end = mid
    return end

这个函数会打开指定的文件，并使用二分查找法来计算文件的行数。你可以调用这个函数来获取超大文件的行数，比如：

filename = "large_file.txt"
line_count = count_lines(filename)
print("Total number of lines:", line_count)

注意，这个方法假定文件中的行都是以换行符 \n 结尾的。如果你的文件使用不同的行分隔符，你需要相应地修改代码。