Описание тега vertex-ai-pipeline
1
ответ
Мониторинг модели для данных изображения не работает в Vertex AI
Мой вариант использования связан с мультиклассовой классификацией изображений. Развернули модель CNN в производстве и включили мониторинг моделей только для обнаружения прогнозируемого дрейфа, который не требует обучающих данных. Он автоматически со…
01 дек '22 в 04:51
1
ответ
Kubeflow — как передать набор данных Tensorflow и тензоры из одного компонента в другой?
Я реализую конвейер Kubeflow в Vertex AI. В основном у меня есть два компонента: и : @component( packages_to_install = [ "pandas==1.3.4", "numpy==1.20.3", "unidecode", "nltk==3.6.5", "gcsfs==2023.1.0" ], ) def prepare_data(dataset:str, data_artifact…
26 фев '23 в 18:25
0
ответов
Как я могу заставить ImageDatasetImportDataOp обновлять метки?
В конвейере Vertex AI я обновляю набор данных изображения, таким образом: ds_op = gcc_aip.ImageDatasetImportDataOp( project=project, dataset=get_dataset_id_op.outputs['dataset'], gcs_source=DATASET_PATH, import_schema_uri=aiplatform.schema.dataset.i…
28 окт '22 в 15:38
0
ответов
Могу ли я загрузить несколько изображений для тестирования после развертывания модели обнаружения объектов в Vertex AI?
В разделе «РАЗВЕРТЫВАНИЕ И ТЕСТИРОВАНИЕ» вершины ai после обучения модели AutoML у меня есть возможность загружать только одно изображение за раз. У меня есть изображение, которое я разделил на несколько изображений, потому что хотел уменьшить разме…
20 фев '23 в 13:09
0
ответов
Можно ли добавить этап предварительной обработки в реестр модели Vertex AI?
Я пытаюсь импортировать пользовательскую модель (XGBoost) в реестр моделей в Vertex AI. У меня есть данные в BigQuery, но мне нужно выполнить некоторую предварительную обработку, прежде чем передавать их в модель.Как я могу импортировать модель, что…
29 ноя '22 в 13:22
1
ответ
Перенос компонентов образа докера kubeflow в конвейер VertexAI.
Я пытаюсь перенести пользовательский компонент, созданный в kubeflow, в VertexAI. В Kubeflow я создавал компоненты в виде образов контейнеров докеров, а затем загружал их в конвейер следующим образом: def my_custom_component_op(gcs_dataset_path: str…
31 янв '23 в 17:59
0
ответов
Конвейер Vertex AI (Kubeflow) не получает метрики из файла /mlpipeline-metrics.json
Я тестирую отображение метрик в Vertex (пользовательский интерфейс Kubeflow для конвейера, работающего на GCP. Я использую метод многократного использования компонента с компонентом, указанным в YAML, а не с компонентами на основе функций. Компонент…
04 ноя '22 в 15:20
0
ответов
Vertex AI не позволяет планировать через Executor
В документации по Google Cloud упоминается возможность планировать задания/блокноты с помощью кнопки «Исполнитель» в Vertex AI. Документ:https://cloud.google.com/blog/products/ai-machine-learning/schedule-and-execute-notebooks-with-vertex-ai-workben…
21 ноя '22 в 01:16
0
ответов
Сопоставьте отдельные записи во время пакетных прогнозов с конвейером VertexAI.
У меня есть пользовательская модель в Vertex AI и таблица, в которой хранятся функции модели вместе с record_id. Я создаю компонент конвейера для пакетного прогнозирования и сталкиваюсь с критической проблемой. Когда я отправляю batch_prediction, я …
12 янв '23 в 07:53
0
ответов
Настройте подсеть для компонента конвейера вершины ai
У меня есть компонент конвейера вершины ai, которому необходимо подключиться к базе данных. Эта база данных существует в сети VPC. В настоящее время мой компонент дает сбой, потому что он не может подключиться к базе данных, но я считаю, что смогу з…
02 фев '23 в 13:28
0
ответов
Связь с Firestore из задания конвейера Vertex AI
Я пытаюсь подключиться и обновить какое-то поле в Firestore из конвейера Vertex AI. Проект связан с Firebase. Но конвейер выходит из строя из-за: PermissionDenied: 403 Cloud Firestore API ранее не использовался в проекте [some-prj-number] или отключ…
26 фев '23 в 14:10
1
ответ
Вызов конечной точки Vertex AI с помощью Node.js — ошибка: 3 INVALID_ARGUMENT: не удалось проанализировать входные экземпляры
Я вызываю настроенную модель (две башни для получения) в конечной точке Vertex AI с помощью Node.js с помощью следующего кода: const axios = require('axios'); const { GoogleAuth } = require('google-auth-library'); const project = '1234567'; const en…
21 апр '23 в 18:47
1
ответ
Планирование конвейера Vertex AI — ошибка 503
Я успешно обучил и развернул конвейер в Vertex AI, используя Kubeflow для модели поиска. Теперь я хочу запланировать запуск этого конвейера каждые 8 минут. Вот мой код: from kfp.v2.google.client import AIPlatformClient api_client = AIPlatformClien…
11 май '23 в 12:13
1
ответ
почему kubeflow в конвейерах вершин ai не хранит метаданные для артефакта набора данных
Я пытаюсь передать метаданные между компонентами функции Python, прикрепив к ним выходной артефакт в конвейере vertex ai kubeflow, из документации это кажется простым, но как бы я ни старался, я не могу заставить его работать. Я пытаюсь прикрепить с…
17 мар '23 в 11:12
1
ответ
Как изменить CustomJob для определенного компонента в vertexAI
У меня возникли проблемы с изменением одного компонента в моем конвейере. Более подробно, компонент, который представляет собой компонент многократного использования, загружаемый через файл .yaml, должен работать в другой сети (VPC), чем сеть, назна…
22 мар '23 в 12:43
0
ответов
Как реализовать настраиваемые задания по оценке (с настраиваемыми метриками для настраиваемых задач обучения) в Vertex AI
Из того, что я вижу в официальных документах GCP:https://cloud.google.com/vertex-ai/docs/evaluation/introduction . Оценочное задание поставляется с предопределенными показателями для предопределенных задач. Если у меня есть задача обучения, которая …
18 май '23 в 14:16
0
ответов
Параметр Python StudySpec в пользовательском задании Vertex AI в Google Cloud
Мне нужно указать переменные настройки гиперпараметров в Python для пользовательского задания в Vertex AI в Google Cloud. https://cloud.google.com/vertex-ai/docs/training/using-hyperparameter-tuning?hl=en from google.cloud import aiplatform from goo…
27 апр '23 в 20:45
0
ответов
GCP Vertext AI Java API: возможно ли отслеживать ход долго выполняемого задания, например импорта данных или создания конвейера обучения?
Я пробую Java API Vertex AI. Для некоторых длительных задач, таких как импорт данных, обычно требуется около 30 минут. Можно ли в течение этого периода отслеживать прогресс, например процент импортированных данных? Мой код выглядит следующим образом…
05 июн '23 в 19:58
1
ответ
Запуск конвейера Vertex AI завершается сбоем после прохождения dsl.Condition==True
Я работаю с конвейерами Vertex AI уже 3 месяца. Я начал с миграции проектов из старой специализированной инфраструктуры Kubernetes в конвейеры на основе компонентов Vertex AI Python. Я создал конвейеры шаблонов, которые до прошлой недели работали но…
05 май '23 в 11:06
1
ответ
Конвейер ML для потока данных и поддержка DataflowPythonJobOp пользовательских контейнеров докеров?
Я использую клиентские Docker-контейнеры для запуска заданий потока данных. Я хочу связать это с моей работой по обучению tpu и т. д., поэтому я рассматриваю возможность запуска конвейера kubeflow на вершине ai. Это разумная идея? (Кажется, существу…
28 июн '23 в 19:37