Описание тега sagemaker

Вопросы с тегом
2 ответа

Правильные параметры для обучения AWS Sagemaker с несколькими классами на изображение

Я последовательно обнаружил, что с "multi_label" до "1" для заданий классификации изображений они вылетали со следующей ошибкой: Algorithm Error: Internal Server Error [15:56:08] /opt/brazil-pkg-cache/packages/MXNetECL/MXNetECL-master.657.0/AL2012/g…
10 фев '19 в 21:43
0 ответов

Автоматизируйте предварительную обработку данных в AWS sagemaker

Существует ли способ автоматизировать предварительную обработку данных на Sagemaker на еженедельной основе, предварительная обработка может включать в себя множество простых преобразований данных в мегабайтах из S3. Моя идея автоматизации похожа на …
26 ноя '18 в 18:09
2 ответа

Ограничительная рамка для нескольких объектов на изображении с помощью Sagemaker Ground True

Я создаю файлы аннотаций.json для использования в алгоритме обнаружения объектов AWS Sagemaker. Формат как ниже: { "file": "your_image_directory/sample_image1.jpg", "image_size": [ { "width": 500, "height": 400, "depth": 3 } ], "annotations": [ { "c…
19 дек '18 в 10:50
1 ответ

SageMaker: визуализация статистики тренировок

Если я отправлю учебное задание TensorFlow в экземпляр SageMaker, каков типичный способ просмотра прогресса обучения? Могу ли я получить доступ к TensorBoard для этого запущенного экземпляра EC2? Есть ли другая альтернатива? Что я ищу, так это такие…
07 ноя '18 в 01:18
2 ответа

Установка VIM (или другого плагина) в SageMaker Jupyter(Lab)

Можно ли установить плагины Jupyter/JupyterLab на SageMaker? Я не вижу никаких вариантов добавления плагинов ни в JupyterLab, ни в интерфейсе SageMaker. Хотелось бы установить хотя бы плагин VIM.
10 янв '19 в 18:24
2 ответа

Sagemaker - дополнительная конечная точка

Я создал свою собственную модель с Scikit Learn. Помимо стандартных конечных точек, '/ping' и '/ invocations', я добавил третью, '/ оценки' (она называет предсказание_probabilities()). Когда я запускаю локально контейнер, все конечные точки работают…
28 янв '19 в 13:41
1 ответ

Как определить, сколько стоит отдельная работа?

Есть ли способ узнать, сколько стоит индивидуальная учебная работа? Я вижу ежедневные / почасовые расходы на панели инструментов выставления счетов, которая является хорошим прокси. Я также посмотрел отчет об использовании, но не нашел способа добав…
30 янв '19 в 17:45
1 ответ

SageMaker удаляет модели и конфигурации конечных точек с помощью Python API

Я пытался удалить / воссоздать конечные точки с тем же именем и потратил много времени, прежде чем понял, что изменения не будут применены, если вы также не удалите соответствующую конфигурацию модели и конечной точки, чтобы можно было создавать нов…
21 фев '19 в 01:07
1 ответ

Утечка памяти у Sagemaker

Я развернул модель глубокого обучения в Sagemaker и создал конечную точку. К сожалению, я поместил его в изображение большого размера, после чего конечная точка выдает "RuntimeError: Ошибка CUDA: недостаточно памяти". Поэтому я хотел бы перезапустит…
28 сен '18 в 06:32
1 ответ

Заваривание пользовательских моделей ML на AWS SageMaker

Я новичок в SageMaker и пытаюсь использовать собственный алгоритм обучения по болезни. Для этого я использую Docker. Я пытаюсь выполнить ту же задачу, которая описана здесь в этом аккаунте github: https://github.com/awslabs/amazon-sagemaker-examples…
10 авг '18 в 16:37
1 ответ

Amazon SageMaker: ClientError: Ошибка загрузки данных:NoSuchKey (404): указанный ключ не существует

Я запускаю учебное задание SageMaker с пользовательским алгоритмом и входными данными из s3. Роль SagaMaker AIM ARN имеет политику чтения / ввода для указанной папки корзины S3, но при создании задания я получаю сообщение об ошибке клиента: ClientEr…
31 окт '18 в 16:16
4 ответа

AWS SageMaker - обработка данных в реальном времени

Моя компания проводит анализ поведения потребителей в Интернете, и мы делаем прогнозы в реальном времени, используя данные, которые мы собрали на различных веб-сайтах (с нашим встроенным сценарием Java). Мы использовали AWS ML для прогнозирования в …
05 ноя '18 в 12:34
3 ответа

Выдача сертификата Sagemaker у Kubernetes

Я создал Docker контейнер, который использует Sagemaker через Java SDK. Этот контейнер развернут в кластере k8s с несколькими репликами. Контейнер делает простые запросы к Sagemaker, чтобы перечислить некоторые модели, которые мы обучили и развернул…
03 дек '18 в 02:03
1 ответ

Предсказание обнаружения объекта Sagemaker

Я создал учебное задание по обнаружению объектов Sagemaker и последующую конечную точку. У меня всего два занятия. Однако, когда я пытаюсь использовать конечную точку для прогнозирования, я получаю несколько строк в ответе, например так: {"predictio…
08 янв '19 в 16:08
1 ответ

AWS Sagemaker init 1K+ моделирует "конечные точки"?

Исходя из предположения, что само обучение модели очень быстрое, мне интересно, как лучше всего быстро раскрутить конечные точки ~ 1K моделей. Спасибо за любой намек Кристиан
21 янв '19 в 11:20
4 ответа

Загрузить всю папку с AWS sagemaker на ноутбук

У меня есть папка с предсказанными масками на AWS Sagemaker. (Внутри него 4 папки и много файлов внутри этих папок.) Я хочу загрузить всю папку на свой ноутбук. Это может звучать так просто и легко, но я не мог найти способ сделать это. Ценю любую п…
28 фев '19 в 17:36
1 ответ

Развертывание модели XGBoost, созданной Amazon sagemaker, в среде R

Я пытаюсь развернуть XGBoost модель, которая обучается с помощью Amazon Sagemaker, в R среда. Модель, созданная Sagemaker, сохраняется как Python Рассол объекта С использованием {reticulate} пакет в R, я могу импортировать модель в R. Тем не менее, …
17 янв '19 в 03:50
1 ответ

AWS SageMaker: CapacityError: Невозможно предоставить запрошенную вычислительную мощность ML.

Мы запустили два экземпляра TrainingJob типа (1) ml.p3.8xlarge и (2) ml.p3.2xlarge. Каждое учебное задание выполняется по индивидуальному алгоритму с Tensorflow и бэкэндом Keras. Экземпляр (1) работает нормально, а экземпляр (2) после отчетного врем…
05 дек '18 в 16:23
1 ответ

Почему существует разница между предсказанием модели SVM для одних и тех же данных при локальном запуске на моей машине и в AWS sagemaker?

Я пытаюсь развернуть модель sklearn SVM в AWS SageMaker. Но при тестировании модели, я получаю разные результаты, даже если я использую тот же hyperparameters для алгоритма, те же данные обучения и тестирования. svm.SVC(kernel='rbf',gamma=1.0,C=10,p…
11 окт '18 в 12:51
1 ответ

Установка Torch на Amazon Linux

Мне понадобилось мучительно много времени, чтобы понять, поэтому я решил избавить людей от неприятностей. Попытка установить torch на экземпляр ec2 с Amazon Linux(redhat) не удалась с помощью следующей команды: git clone https://github.com/torch/dis…
23 окт '18 в 01:10