Ошибка типа: невозможно преобразовать pyarrow.lib.ChunkedArray в pyarrow.lib.Array
Я конвертирую csv
подать в feather
введите код, как показано ниже,
import pandas as pd
import feather
df = pd.read_csv('myfile.csv')
feather.write_dataframe(df, 'myfile.feather')
myfile.csv
кончено 2G
и когда я запускаю код, я получаю сообщение об ошибке, как показано ниже:
File "table.pxi", line 705, in pyarrow.lib.RecordBatch.from_pandas
File "table.pxi", line 739, in pyarrow.lib.RecordBatch.from_arrays
TypeError: Cannot convert pyarrow.lib.ChunkedArray to pyarrow.lib.Array
Я посмотрел на подобные вопросы и обнаружил, что feather
недавно начал поддерживать большой файл более 2G. Но моя версия пера 0.4, поэтому я думаю, что моя уже поддерживает большой файл. Почему я получаю эту ошибку? Любые идеи будут оценены, спасибо.