Описание тега spacy-pytorch-transformers
0
ответов
Как классифицировать токен на основе его контекста с помощью НЛП
Я хочу извлечь размеры опухолей из отчетов о гистопатологии. Размер измеряется в миллиметрах и обычно упоминается где-нибудь в свободном тексте. Я могу определить размеры в миллиметрах, используя регулярные выражения, однако не все они будут соответ…
05 окт '19 в 04:11
0
ответов
Получение KeyError [Индекс (['CLASS_1', ...., \n ... 'CLASS_V'],\n dtype='object')] находятся в [индексе]", 'произошло в индексе 0')
Используя это репо Когда я запускаю new_toxic_multilabel.ipynb от sample notebook, Я получаю эту ошибку для команды: databunch = BertDataBunch(args['data_dir'], LABEL_PATH, args.model_name, train_file='train.csv', val_file='val.csv', test_data='test…
06 дек '19 в 10:55
1
ответ
Почему моя обучающая функция выдает ошибку имени "Распад имени не определен"?
Итак, я новичок в НЛП, и я пытаюсь обучить текстовый классификатор с помощью spacy_transformers. было показано, что этот код работает, но он вызывает ошибки на моем компьютере. В качестве примечания, может ли это быть вызвано жиром, из-за которого я…
25 мар '20 в 06:12
1
ответ
Заказ / контекстно-зависимый документ / предложение для векторов в Spacy
Я хотел бы выполнять некоторые контролируемые задачи двоичной классификации с предложениями и использовал spaCy из-за его простоты использования. Я использовал spaCy для преобразования текста в векторы, а затем отправил векторы в модель машинного об…
06 май '20 в 03:33
0
ответов
spacy-pytorch-transformers: loss = 0 постоянно во время обучения
Я использую spacy 2.1.8 а также spacy-pytorch-transformers 0.4.0обучить текстовый классификатор. Мой код сильно вдохновлен их примером, но модель ничего не изучает, что, похоже, вызвано постоянным нулевым проигрышем. Минимальный (не-) рабочий пример…
24 сен '19 в 18:39
1
ответ
Как вычисляются векторы токенов в spacy-pytorch-transformers
В настоящее время я работаю с spacy-pytorch-transformer пакет, чтобы поэкспериментировать с соответствующими вложениями.При чтении вводной статьи (по сути, GitHub README) я понял, что вложения на уровне токенов являются средним значением по сравнени…
24 сен '19 в 19:32
0
ответов
Классификация текста с помощью Spacy: выход за рамки основ для повышения производительности
Я пытаюсь обучить классификатор текста на обучающем наборе текстов (сообщения Reddit) с двумя эксклюзивными классами (1 и 0) в отношении особенности авторов сообщений, а не самих сообщений. Классы несбалансированы: примерно 75:25, что означает, что …
24 мар '20 в 00:29
2
ответа
Использование конвейера заливки-маски huggingface для получения "оценки" не предполагаемого результата
Я использовал huggingface, чтобы делать прогнозы для замаскированных токенов, и это отлично работает. Я заметил, что для каждого прогноза он дает "балл" и хотел бы получить "балл" для некоторых токенов, которые он не прогнозировал, но предоставил я.…
12 апр '20 в 11:07
1
ответ
Как я могу загрузить частично предварительно обученную модель pytorch?
Я пытаюсь запустить модель pytorch для задачи классификации предложений. Поскольку я работаю с медицинскими записями, я использую ClinicalBert (https://github.com/kexinhuang12345/clinicalBERT) и хотел бы использовать его предварительно обученные вес…
14 апр '20 в 18:42
0
ответов
Как использовать просторную кровать?
Я обнаружил, что встраивание слов увеличивает производительность Spacy. Кто-нибудь может сказать мне, как добавить встраивание Word в модель Spacy. Заранее спасибо.
12 май '20 в 00:23
0
ответов
Обучающий классификатор текста пространственно-трансформеров - пример минимального обучения
После ряда экспериментов по линиям, указанным в этих примерах: https://colab.research.google.com/github/explosion/spacy-pytorch-transformers/blob/master/examples/Spacy_Transformers_Demo.ipynb https://github.com/explosion/spacy-transformers/blob/mast…
17 июн '20 в 15:05
2
ответа
Идентичное случайное кадрирование на двух изображениях, преобразованных Pytorch
Я пытаюсь передать два изображения в сеть и хочу выполнить идентичное преобразование между этими двумя изображениями. transforms.Compose()берет одно изображение за раз и производит вывод независимо друг от друга, но мне нужно одно и то же преобразов…
19 июн '20 в 18:42
0
ответов
обучение Берта нескольким предложениям
У меня есть 2 предложения ["first sentence", "another one"] токенизировал ввод, используя batch_encode_plus(). Во время тренировки появляется следующая ошибка: RuntimeError: расширенный размер тензора (64) должен соответствовать …
06 авг '20 в 06:34
0
ответов
Как запустить результаты Gensim через spaCy, результаты spaCy через nltk и результаты nltk через Сумы
Я пытаюсь настроить конвейер, который увеличивает результаты суммирования. Я бы хотел сделать следующее: 1. Obtain summarization results from Gensim. 2. Run Gensim summarization results through spaCy. 4. Run spaCy summarization results through NLTK.…
20 янв '20 в 19:28
1
ответ
Распознавание нескольких объектов с ошибкой Spacy python
Я застрял в проблеме и ищу у вас помощь. Я пытаюсь обучить несколько объектов, используя простор Ниже приведены данные моего поезда response =[ ('java developer with java and html css javascript ', {'entities': [(0, 14, 'jobtitle'), (0 , 4, 'skills'…
12 май '20 в 03:42
0
ответов
Как указать, что условие применяется только к двум переменным, а другое - к другим переменным?
Я написал небольшой код, который помогает мне извлекать отрицательные предложения. Проблема, с которой я столкнулся, заключается в том, что я написал другой тип шаблона, и для одного конкретного шаблона мне нужно проверить последний атрибут, чтобы у…
29 июн '20 в 19:26
2
ответа
Как начать работу с пространственной библиотекой и ее модулем в Google Colab?
У меня проблема с Spacy модуль для загрузки colab Ноутбук с GPU. !python -m spacy download en_trf_xlnetbasecased_lg Эта команда работает для anaconda блокнот скачать, а как скачать в гугле Colab и загрузить модуль?
26 дек '19 в 09:13
1
ответ
Huggingface Bert: печать вывода
Я новичок в программировании и мог бы использовать рекомендации относительно того, почему он печатается так странно, как есть. Хотя это связано с НЛП, я считаю, что эту ошибку, скорее всего, мог бы объяснить кто-то, у кого больше знаний в кодировани…
05 июн '20 в 04:47
0
ответов
Подавлять сообщения spacy.load в блокноте Jupyter при использовании внутри моего модуля
У меня есть скрипт на Python, который использует spacy.load('en_trf_bertbaseuncased_lg'). Каждый раз, когда я импортирую этот скрипт в блокнот Jupyter, он показывает множество сообщений, от которых я хочу избавиться. Это то, что внутри сценария, my_…
22 авг '20 в 09:37
1
ответ
Вывод регрессии SpaCy-трансформаторов
Я хотел бы получить результат регрессии вместо классификации. Например: вместо n классов мне нужно выходное значение с плавающей запятой от 0 до 1. Вот минималистичный пример со страницы пакета на github: import spacy from spacy.util import minibatc…
19 мар '20 в 17:17