BigQuery View не работает, если я использовал плагин BigQuery

Question

Я использовал плагин bigquery в категории источников. Когда я использовал bigquery View, конвейер из-за ошибки не разрешал View. Кроме того, если я использовал постоянную таблицу, в которой существуют повторяющиеся столбцы, то это также из-за ошибки неподдерживаемого режима "повторяется" при получении его схемы. У кого-нибудь есть информация по этому поводу?

Answer 1

Источник BigQuery экспортирует данные из таблицы во временные сегменты GCS и затем читает их в конвейере. Поскольку представления BigQuery не могут быть экспортированы (см. Ограничения здесь - https://cloud.google.com/bigquery/docs/views), конвейер завершается ошибкой.

Также в настоящее время источник BigQuery не поддерживает повторяющиеся столбцы. Работа в настоящее время продолжается - https://issues.cask.co/browse/CDAP-15256. Это то, что вы ищите?