Ошибка при сериализации (данные, узел $con): ошибка записи в соединение с фреймом диска

Question

Я пытаюсь выполнить группу на фрейме диска, и появляется эта ошибка

Ошибка при сериализации (данные, узел $con): ошибка записи в соединение с фреймом диска

Мне интересно, смогу ли я обойти это, изменив размеры кусков. Похоже, это указывает на то, что у меня есть слишком большие куски для обработки (в моем файле шестнадцать кусков). Я рассматриваю возможность воссоздать дисковые фреймы с 30 частями, каждый из которых намного меньше, а затем повторить попытку с моей агрегацией. В частности, агрегация выполняет n_distinct.

Это звучит примерно правильно?

Answer 1

Вы используете синтаксис data.table? Просто используйте вместо этого синтаксис dplyr. См. /questions/56413532/moya-gruppa-ne-rabotaet-s-diskovyimi-frejmami/56413540#56413540