Есть ли способ отследить работу между службами в stackdrive?
Мы используем множество компонентов в Google Cloud, например, работа может начаться в App Engine, затем выполнить некоторую работу в Apache Airflow, а затем выполнить некоторую работу с Dataflow, которая запустит вставку BigQuery.
Есть ли способ, которым мы можем отслеживать состояние задания по всем компонентам, используя драйвер стека. Например, сообщите стекдрайверу свой идентификатор задания и запросите его.
1 ответ
Вы можете использовать расширенные фильтры журналов [1], чтобы включить записи журнала из различных продуктов. На странице входа в систему найдите свой идентификатор задания BigQuery. Нажмите на идентификатор задания и выберите показать соответствующие записи. Откроется текстовое поле расширенного фильтра с правильным синтаксисом. Затем вы можете добавить больше запросов с ИЛИ между ними.