Детали конвейера потока данных для источника / приемников BigQuery не отображаются
Согласно этому объявлению команды Google Dataflow, мы сможем увидеть подробную информацию о наших источниках и приемниках BigQuery в консоли, если мы будем использовать 1.6 SDK.
Однако, хотя новые "Параметры конвейера" действительно отображаются, детали источника / приемников BigQuery не отображаются. Наш конвейер работает в пакетном режиме. Идентификатор задания для справки: 2016-06-23_04_38_00-7749718775594891108
Как мы можем получить подробную информацию об источнике / приемниках BigQuery?
1 ответ
Я один из разработчиков потока данных, который добавил эту функцию в интерфейс потока данных.
В настоящее время эти детали видны только при нажатии на расширенные шаги. Если щелкнуть значок стрелки, чтобы полностью развернуть источники / приемники и щелкнуть по шагам, отображаемым после его развертывания, вы сможете увидеть детали, которые были указаны для этого шага, такие как запрос BigQuery или информацию таблицы.
Есть ли какая-то конкретная деталь / параметр, который вы ищете и не видите для шага в вашем конвейере?