Ошибка типа: невозможно преобразовать pyarrow.lib.ChunkedArray в pyarrow.lib.Array

Я конвертирую csv подать в feather введите код, как показано ниже,

import pandas as pd
import feather 
df = pd.read_csv('myfile.csv')
feather.write_dataframe(df, 'myfile.feather')

myfile.csv кончено 2G и когда я запускаю код, я получаю сообщение об ошибке, как показано ниже:

File "table.pxi", line 705, in pyarrow.lib.RecordBatch.from_pandas
File "table.pxi", line 739, in pyarrow.lib.RecordBatch.from_arrays
TypeError: Cannot convert pyarrow.lib.ChunkedArray to pyarrow.lib.Array

Я посмотрел на подобные вопросы и обнаружил, что feather недавно начал поддерживать большой файл более 2G. Но моя версия пера 0.4, поэтому я думаю, что моя уже поддерживает большой файл. Почему я получаю эту ошибку? Любые идеи будут оценены, спасибо.

0 ответов

Другие вопросы по тегам