Настроить Linux Distro на Google Dataflow Workers?

Question

Настроить Linux Distro на Google Dataflow Workers?

Конвейер My Beam/Dataflow включает некоторую обработку данных с использованием инструмента Linux CLI (в частности, osmium-toolversion> = 1.9.1), который доступен только для некоторых новых дистрибутивов Ubuntu ( cosmic или disco). Я не могу найти какую-либо документацию по спецификациям ОС для Dataflow Workers или по возможности настройки.

Любая помощь будет оценена, спасибо!

0

ubuntu google-cloud-dataflow apache-beam osmium

Источник

user10981911 10 окт '19 в 16:56

1 ответ

Решение

Другие вопросы по тегам ubuntu google-cloud-dataflow apache-beam osmium

user582333 10 окт '19 в 23:27 2019-10-10 23:27 · Accepted Answer · 2019-10-10 23:27

Одна из целей переносимости Beam - позволить такую настройку. Хотя на данный момент это все еще экспериментально, вы можете следовать инструкциям на https://beam.apache.org/documentation/runtime/environments/, чтобы полностью настроить среду, в которой работает ваш пользовательский код.