apache beam textIO.write - перезаписать режим записи

Я использую версию Apache Beam 2.4.0. есть ли возможность записи в TextIO, чтобы перезаписать каталог назначения. В настоящее время перезаписываются только файлы деталей, если имена совпадают. это приводит к дублированию данных. есть ли подобная опция, как spark write_mode.overwrite целевой каталог?

0 ответов

Другие вопросы по тегам