Function read_jsonl_chunk

tools/io_file.py:351–365

读取JSONL文件的某一块。 参数: - file_path (str): 文件路径。 - start_line (int): 起始行。 - end_line (int): 结束行。 - encoding (str): 文件编码格式，默认为 'utf-8'。 返回: - list: 该块读取的内容。

(file_path, start_line, end_line, encoding='utf-8')

def read_jsonl_chunk(file_path, start_line, end_line, encoding='utf-8'):
    """
    读取JSONL文件的某一块。

    参数:
    - file_path (str): 文件路径。
    - start_line (int): 起始行。
    - end_line (int): 结束行。
    - encoding (str): 文件编码格式，默认为 'utf-8'。

    返回:
    - list: 该块读取的内容。
    """
    with open(file_path, 'r', encoding=encoding) as f:
        return [json.loads(line) for _, line in zip(range(start_line), f)][start_line:end_line]


# 写入文件函数