例如,pandas的
Parquet格式将数据存储在块中,但没有记录的方法可以像
是否有一种方法可以分块读取parquet文件?
read_csv
具有一个chunk_size
参数,它允许read_csv
返回CSV文件上的迭代器,以便我们可以分块读取它。Parquet格式将数据存储在块中,但没有记录的方法可以像
read_csv
那样分块读取。是否有一种方法可以分块读取parquet文件?