Описание тега simpletransformers

0 ответов

Модель simpletransformers, обученная на Colab, не работает локально

Я выполнил инструкции по этой ссылке и обучил модель BERT в Google Colab. Затем я загрузил его и попытался использовать локально на своем компьютере. Но что-то пошло не так. Вот мой код для обучения модели (в Google Colab): from simpletransformers.c…
1 ответ

Тонкая настройка предварительно обученной языковой модели с помощью Simple Transformers

В своей статье "Тонкая настройка языковой модели для предварительно обученных трансформеров" Тилина Раджапаксе (https://medium.com/skilai/language-model-fine-tuning-for-pre-trained-transformers-b7262774a7ee) приводит следующий код фрагмент для тонко…
2 ответа

Как вы загружаете модель простых трансформаторов с контрольной точки?

Я использую простые трансформеры (https://github.com/ThilinaRajapakse/simpletransformers) для рабочего проекта. После обучения модели я получаю кучу файлов, выгруженных в папку вывода. Мне было интересно, если бы вы хотели загрузить ранее обученную …
09 июн '20 в 01:00
1 ответ

Запуск простых трансформаторов для проверки NER вызывает ошибку. Какие-нибудь решения?

Я пытаюсь проверить этот https://github.com/ThilinaRajapakse/simpletransformers NER, используя простые трансформаторы, и столкнулся со следующей ошибкой. может кто-нибудь помочь мне решить эту проблему? Я попытался написать свой собственный NER, исп…
0 ответов

Если я использую предварительно обученную модель для мультиклассовой классификации, сможет ли она точно настроить языковую модель с использованием данных обучения?

Я тестирую классификатор следующим образом... from simpletransformers.classification import ClassificationModel model_bert_all = ClassificationModel('bert', 'bert-base-multilingual-cased', use_cuda=False, num_labels=num_labels, args={'reprocess_inpu…
06 дек '20 в 02:57
0 ответов

Проблема с импортом библиотеки классификации модуля simpletransformers

[введите описание изображения здесь][1][введите описание изображения здесь][2] получение этой ошибки при попытке импортировать библиотеку simpletransformers на colab [1]: https://stackru.com/images/cd9d19bfba9c95a6b432b9fb83bbea1223c52d65.png ------…
1 ответ

Развертывание модели искусственного интеллекта для классификации текста НЛП в GCP

Я пытаюсь развернуть модель на Google Cloud Platform. Но я сталкивался с теми же проблемами, что и при создании корзины, и, как указано в запущенных мною документах: gcloud ai-platform local predict --model-dir gs://bucket/ \ --json-instances input.…
2 ответа

BERT всегда предсказывает один и тот же класс (точная настройка)

Я настраиваю BERT для набора данных финансовых новостей. К сожалению, BERT, похоже, ограничен локальным минимумом. Он доволен тем, что учится всегда предсказывать один и тот же класс. балансировка набора данных не сработала параметры настройки тоже …
4 ответа

'use_cuda' устанавливается в True, когда cuda недоступна. Убедитесь, что CUDA доступен, или установите use_cuda=False

Я пытаюсь создать модель Берта для классификации турецких лан. вот мой код: import pandas as pd import torch df = pd.read_excel (r'preparedDataNoId.xlsx') df = df.sample(frac = 1) from sklearn.model_selection import train_test_split train_df, test_d…
30 ноя '20 в 09:21
2 ответа

API для обслуживания Roberta ClassificationModel с FastAPI

Я обучил преобразователь, используя модель простых преобразователей на colab, загрузил модель с поиском, и у меня есть небольшие проблемы с ее использованием для вывода. Загрузка модели в модель на jupyter работает, но при использовании с fastapi вы…
0 ответов

Более высокая точность с использованием SimpleTransformers против библиотеки трансформаторов с BERT

Я работаю над проектом классификации текста с помощью BERT Я получаю ок. Точность 90% при использовании простых трансформаторов. Но я получаю только около 60%, используя собственное обучение для цикла (здесь не опубликовано) или используя модуль тре…
1 ответ

Извлечение вывода слоя из модели классификации SimpleTransformer

Я настроил базовую модель Берта для задачи классификации текста. Теперь я хочу извлечь вывод скрытого слоя, чтобы объединить этот вывод с другими функциями для обучения модели случайного леса. Проблема заключается в том, что я не знаю, как извлечь в…
5 ответов

почему мой fastapi или uvicorn выключается?

Я пытаюсь запустить службу, которая использует простую модель трансформаторов Роберты для классификации. сам сценарий / функция логического вывода работает должным образом при тестировании. когда я включаю это с быстрым API, он выключает сервер. uvi…
1 ответ

Хотите получить лучший сгенерированный текст трансформеров T5?

Я тренировал трансформаторы Т5, используя библиотека. Вот код для получения прогнозов: pred_values = model.predict(input_values) Однако он просто возвращает верхний или жадный прогноз, как я могу получить 10 лучших результатов?
12 мар '21 в 12:33
0 ответов

RuntimeError (ошибка работника DataLoader) для классификатора SimpleTransformers

Я пытаюсь обучить текстовый классификатор с помощью SimpleTransformers. Я использую языковую модель TurkuNLP, чтобы попробовать обучить классификатор (используя графический процессор моего компьютера). Мой код: model = ClassificationModel('bert', 'T…
0 ответов

Извлечение вложений слов для модели кальссификации xlnet в простых преобразователях?

Я пытаюсь реализовать модель трансформатора xlnet с помощью библиотеки Simple Transformers. Я следую этому конкретному руководству - https://simpletransformers.ai/docs/multi-class-classification/ В соответствии с этим я могу обучить модель на train_…
24 мар '21 в 17:12
1 ответ

Ошибка при загрузке настроенной модели simpletransformer в Docker Container

При загрузке настроенной простой модели преобразователя в контейнер Docker я столкнулся с этой ошибкой, которую не могу решить. Traceback (most recent call last): File "<stdin>", line 1, in <module> File "/usr/local/lib/python3.7/dist-pa…
02 апр '21 в 15:50
1 ответ

не может импортировать имя T5Tokenizer из transformers.models.t5

Как вы видите в следующей консоли Python, я могу импортировать T5Tokenizer из transformers. Однако для simpletransformers.t5 Я получаю сообщение об ошибке: >>> from transformers import T5Model, T5Tokenizer >>> from simpletransforme…
1 ответ

AttributeError: объект 'str' не имеет атрибута 'to' при обучении QuestionAnsweringModel из простых преобразователей

Я пытаюсь обучить QuestionAnsweringModel bert-base-multingual-uncased из простых преобразователей и столкнулся со следующей проблемой: AttributeError Traceback (most recent call last) <ipython-input-10-40e9356ccee6> in <module>() ----&gt…
1 ответ

Продолжайте получать объект 'numpy.ndarray' не имеет атрибута 'fit', несмотря на многократное прочесывание кода

Добрый день, я пытаюсь запустить конвейер, но продолжаю сталкиваться с ошибкой «numpy.ndarray», у объекта нет атрибута «fit», и я не могу понять, почему. Ниже приведен код трансформатора, конвейера и фреймов данных. Приветствуются любые чаевые: impo…