Описание тега aws-sagemaker

Вопросы с тегом
0 ответов

Как мне разрешить SQL ParseError в PySpark?

Я новичок в PySpark и AWS Sagemaker, использующих ноутбук Jupyter. Я знаю, как писать операторы SQL для ответа на мои вопросы. Предполагается, что этот фрагмент кода: 1. Извлеките доступные методы распоряжения о смерти в моем наборе данных (CDC Deat…
09 дек '18 в 18:03
1 ответ

AWS Sagemaker ClientError: невозможно инициализировать алгоритм

Невозможно запустить задания автонастройки с гиперпараметрами, используя алгоритм классификации изображений. Получение этого от информации о работе Sagemaker: Причина сбоя ClientError: Невозможно инициализировать алгоритм. Не удалось проверить конфи…
09 дек '18 в 23:04
2 ответа

Установка VIM (или другого плагина) в SageMaker Jupyter(Lab)

Можно ли установить плагины Jupyter/JupyterLab на SageMaker? Я не вижу никаких вариантов добавления плагинов ни в JupyterLab, ни в интерфейсе SageMaker. Хотелось бы установить хотя бы плагин VIM.
10 янв '19 в 18:24
0 ответов

write_spmatrix_to_sparse_tensor | Выпуск в письменной форме | KeyError: 1

Предположим, у меня есть Dataframe с двумя полями, такими как "Ticket" и "Category", оба были текстовым вводом, но я преобразовал "Category" в целое число. Теперь я хочу разделить его на тестовый и обучающий набор и загрузить в модель обучения Sagem…
29 авг '18 в 13:02
1 ответ

Как построить искровую тренировку изображения для мудреца

Как я могу построить trainingImage для собственного алгоритма искры в качестве kmeans trainingImage в amazon-sagemaker-examples/sagemaker-spark/pyspark_mnist/pyspark_mnist_custom_estimator.ipynb?
24 янв '19 в 07:36
0 ответов

PySpark на AWS Glue: код выхода контейнера 52 при записи вывода в csv

Я новичок в Spark/PySpark, и я пытаюсь использовать PySpark для автоматизации процесса ETL (в AWS) для производственной модели ML, для которой требуется серия шагов Bucketizer-OneHotEncoding-Vectorization перед сохранением выходного вектора объектов…
22 янв '19 в 20:48
1 ответ

Как Aws Sagemaker обеспечивает среду нескольких экземпляров и балансировку нагрузки для конечных точек

Я успешно развернул свой блокнот jupyter на AWS Sagemaker и создал конечную точку для алгоритма прогнозирования (вариант использования). Я хотел знать, как создать среду с несколькими экземплярами в AWS Sagemaker и распределить нагрузку для нескольк…
16 янв '19 в 12:05
0 ответов

AWS Sagemaker | Как отладить изображение докера | Какой параметр мы передаем

Мы хотим загрузить изображение Docker, которое имеет наш собственный код для tenorflow, теперь мы следуем этому стандартному коду https://github.com/awslabs/amazon-sagemaker-examples/blob/master/advanced_functionality/tensorflow_bring_your_own/tenso…
30 ноя '18 в 11:22
1 ответ

AWS Sagemaker | как тренировать текстовые данные | Для классификации билетов

Я новичок в Sagemaker и не знаю, как классифицировать ввод текста в AWS Sagemaker, Предположим, у меня есть Dataframe с двумя полями, такими как "Билет" и "Категория", оба являются текстовым вводом. Теперь я хочу разделить его на тестовый и обучающи…
29 авг '18 в 06:35
1 ответ

Изображение-классификация-передача-обучение Sagemaker проблема

Я получаю такую ​​ошибку при попытке классификации изображений с помощью Sagemaker: ClientError: An error occurred (ValidationException) when calling the CreateTrainingJob operation: 1 validation error detected: Value 'ml.t2.medium' at 'resourceConf…
16 сен '18 в 09:08
1 ответ

Заваривание пользовательских моделей ML на AWS SageMaker

Я новичок в SageMaker и пытаюсь использовать собственный алгоритм обучения по болезни. Для этого я использую Docker. Я пытаюсь выполнить ту же задачу, которая описана здесь в этом аккаунте github: https://github.com/awslabs/amazon-sagemaker-examples…
10 авг '18 в 16:37
3 ответа

Выдача сертификата Sagemaker у Kubernetes

Я создал Docker контейнер, который использует Sagemaker через Java SDK. Этот контейнер развернут в кластере k8s с несколькими репликами. Контейнер делает простые запросы к Sagemaker, чтобы перечислить некоторые модели, которые мы обучили и развернул…
03 дек '18 в 02:03
1 ответ

AWS SageMaker Spark SQL

Я знаю, что, например, благодаря предложению Qubole Hive, в котором используются записные книжки Zeppelin, я могу использовать Spark SQL для выполнения собственных команд SQL для взаимодействия с таблицами Hive. Я могу читать из внешних таблиц и соз…
05 янв '19 в 04:38
1 ответ

Предсказание обнаружения объекта Sagemaker

Я создал учебное задание по обнаружению объектов Sagemaker и последующую конечную точку. У меня всего два занятия. Однако, когда я пытаюсь использовать конечную точку для прогнозирования, я получаю несколько строк в ответе, например так: {"predictio…
08 янв '19 в 16:08
0 ответов

Как UTF-8 кодировать.pkl в Sagemaker?

Я использую библиотеки fast.ai v1 в Sagemaker и нахожу, что ошибки learn.export() с примечанием: Первый вопрос - где в консоли я буду искать более подробную информацию? Я проверил журналы CloudWatch для этого ноутбука и ничего не вижу, и я не вижу о…
04 фев '19 в 21:28
2 ответа

Можно ли с помощью AWS SageMaker развернуть предварительно обученную модель с помощью SDK Sagemaker?

Я стараюсь не переносить существующий процесс обучения модели в SageMaker и избегать создания собственного контейнера Docker для размещения нашей обученной модели. Я надеялся вставить нашу существующую обученную модель в готовый контейнер scikit lea…
28 фев '19 в 01:07
0 ответов

Ранняя остановка и обратные вызовы с Keras при использовании SageMaker

Я использую Sagemaker для обучения модели Keras. Мне нужно внедрить подход ранней остановки при обучении модели. Есть ли способ передать обратные вызовы, такие как EarlyStopping, Histories..etc. Традиционно мы использовали это как параметр для функц…
26 ноя '18 в 17:21
1 ответ

Почему существует разница между предсказанием модели SVM для одних и тех же данных при локальном запуске на моей машине и в AWS sagemaker?

Я пытаюсь развернуть модель sklearn SVM в AWS SageMaker. Но при тестировании модели, я получаю разные результаты, даже если я использую тот же hyperparameters для алгоритма, те же данные обучения и тестирования. svm.SVC(kernel='rbf',gamma=1.0,C=10,p…
11 окт '18 в 12:51
0 ответов

Sagemaker | Тензор потока | Докер по умолчанию | Как использовать это в ноутбуке

Я хочу использовать Tensorflow в Sagemaker с некоторыми изменениями, чтобы проверить эту функциональность, я импортировал докер Sagemaker 1.9.0 по умолчанию ( https://github.com/aws/sagemaker-tensorflow-container/blob/master/docker/1.9.0/final/py2/D…
24 ноя '18 в 05:46
1 ответ

Как развернуть конечную точку прогнозирования рака молочной железы, созданную AWS Sagemaker, с использованием Lambda и API-шлюза?

Я пытаюсь развернуть существующую модель прогнозирования рака молочной железы на Amazon Sagemanker, используя AWS Lambda и API-шлюз. Я следовал за официальной документацией от нижеуказанного URL. https://aws.amazon.com/blogs/machine-learning/call-an…
01 окт '18 в 09:43