Описание тега spacy-3
0
ответов
Базовое обнаружение именованных объектов с приблизительным (нечетким) соответствием [закрыто]
У меня есть большой список именованных объектов (скажем, 4 миллиона), для которых я хотел бы обнаружить соответствующее упоминание (диапазон) во входном тексте. Поскольку большинство упоминаний во входном тексте не будут точно соответствовать моему …
21 фев '21 в 02:37
1
ответ
Разница между spacy v3 конвейером en_core_web_trf и конвейером en_core_web_lg
Я провожу несколько тестов производительности с помощью spacy версии 3, чтобы правильно определить размер моих экземпляров в производственной среде. Я наблюдаю следующее Наблюдение: Почему нет значительной разницы между сценариями с NER и без NER в …
22 фев '21 в 22:39
1
ответ
Проблема nlp.update в Spacy 3.0: TypeError: [E978] Метод Language.update принимает список объектов Example, но получает: {<class 'tuple'>}
В Spacy версии 3.0, похоже, есть некоторые изменения в nlp.update. Меня совершенно сбивает с толку этот простой код: examples = TRAIN_DATA random.shuffle(examples) losses = {} for batch in minibatch(examples, size=8): nlp.update(batch, sgd=optimizer…
24 фев '21 в 02:03
2
ответа
Невозможно обновить spacy до более новой версии 3 в среде conda
Я пытался обновить spacy до новой версии в среде conda. Мне не удалось добиться успеха, хотя я использовал следующую команду: conda update spacy =3.0 и (base) hadi@notebook:~$ conda install -c conda-forge spacy=3.0 Сбор метаданных пакета (current_re…
23 фев '21 в 15:05
2
ответа
Пользовательское обучение NER с помощью spaCy 3 вызывает ошибку ValueError
Я пытаюсь добавить собственные метки NER, используя spacy 3. Я нашел учебные пособия для более старых версий и внес изменения для spacy 3. Вот весь код, который я использую: import random import spacy from spacy.training import Example LABEL = 'ANIM…
22 фев '21 в 10:03
1
ответ
Как создать новый проект Spacy 3.0 с нуля?
Я пытаюсь создать новый проект Spacy 3.0 с нуля для пользовательского конвейера NLP. Кажется, это никак не сделать. Единственный механизм, который я могу найти в документации, - это клонировать существующий репозиторий проекта, а затем отредактирова…
25 фев '21 в 21:56
0
ответов
Проблема с новым spacy v3.0 при запуске Sentiws
Я хочу использовать расширенный пакет sentiws, у меня проблемы с кодовой строкой nlp.add_pipe("sentiws"), на просторной странице они объясняют использование @Language.component("sentiws"), но после языковой строки Python говорит синтаксическая ошибк…
18 фев '21 в 16:46
1
ответ
Преобразование кода из Spacy2 в Spacy3 - nlp.update не работает
Изменить: спасибо за комментарий. Я изменил doc = nlp(текст) на doc = nlp.make_doc(текст). Я нашел код, который пытаюсь воспроизвести. Судя по всему, это было написано на Spacy2: # add NER to the pipeline and the new label ner = nlp.get_pipe("ner") …
26 фев '21 в 01:47
0
ответов
Ошибка модели Spacy 3 не на английском языке. Не удается найти модель corpus/de_vectors с помощью nlp.initialize.
В Spacy 3.0 я попытался установить немецкую модель с: python -m spacy загрузить de_core_news_lg а также уже пробовал: pip install https://github.com/explosion/spacy-models/releases/download/de_core_news_lg-3.0.0/de_core_news_lg-3.0.0.tar.gz Я попыта…
24 фев '21 в 13:41
0
ответов
Как обучить проект Spacy3 со смешанной точностью FP16
Цель состоит в том, чтобы работать со смешанной точностью FP16, чтобы можно было использовать большие трансформаторы ( roberta-large, albert-largeи т. д.) в ограниченной VRAM (RTX 2080ti 11 ГБ). Новый подход Spacy3 project.yml к обучению напрямую ис…
07 мар '21 в 15:09
2
ответа
Могу ли я определить «вопросительные слова» (кто, как, когда…) в строке, используя пробел?
У меня есть строка a = "Hello my name is Amar. How can I help you?" doc = nlp(a) for tok in doc: print(tok.text, "-->",tok.dep_,"-->", tok.pos_) Этот код печатает весь текст, зависимости и позицию строки. Я хочу определить вопросительное слово…
17 мар '21 в 13:33
1
ответ
Использование предварительно обученных встраиваний BERT в качестве входных данных для моделей textcat в Spacy 3.0
Я пытаюсь перейти на платформу тренировочного файла конфигурации Spacy 3.0, и у меня возникли проблемы с настройкой настроек в соответствии с тем, что я хотел бы сделать. Проще говоря, я хотел бы использовать одну из готовых моделей textcat (скажем,…
22 мар '21 в 17:27
2
ответа
ImportError загрузка пространства в блокноте jupyter
У меня проблема, которую я не могу понять. Когда я впервые импортировал Spacy в ноутбук Jupyter, у меня не было проблем. Он просто импортировал его, как я и ожидал. Во второй раз, когда я попытался импортировать его (используя другой блокнот), я пол…
23 мар '21 в 17:10
1
ответ
Ошибка при предварительном обучении с использованием spacy 3.0. Что такое raw_text?
Предварительное обучение пользовательских весов в конвейере Spacy дает ошибку. Когда я запускаю это с помощью ноутбука jupyter: !python -m spacy pretrain config.cfg ./output_pretrain --paths.raw_text ./data.jsonl Возникает следующая ошибка: [i] Usin…
07 апр '21 в 14:39
2
ответа
Для обучения NER в spacy v3 требуется dev.spacy в командной строке
Я пытаюсь подготовить нестандартную модель в spacy v3.V3 значительно изменился по сравнению с v2 с точки зрения обучения. Я использую конфигурацию по умолчанию с en_web_lg. Я подготовил данные для обучения (training.spacy) с помощью команды convert.…
08 апр '21 в 06:59
1
ответ
Добавьте собственный язык в Spacy 3.0 и обучите в нем конвейеры
До сих пор я использовал Spacy 2.3.1. Я создал свой собственный класс, унаследованный от Language class и обучил конвейер NER, используя в нем скрипт Python. Но в Spacy 3.0 введено множество удобных команд CLI и конфигураций для обучения пользовател…
11 апр '21 в 16:32
1
ответ
Утечка памяти с моделью en_core_web_trf, Spacy
при использовании конвейера модели en_core_web_trf происходит утечка памяти, я запускаю модель с использованием графического процессора с 16 ГБ ОЗУ, вот образец кода. !python -m spacy download en_core_web_trf import en_core_web_trf nlp = en_core_web…
27 мар '21 в 17:53
1
ответ
Sapcy 3.0: невозможно добавить поиск по костюмам для Lemmatizer
Я использовал приведенный ниже код, чтобы добавить пользовательский Lookups к обычаю Lanuage класс: def create_lookups(): lookups = Lookups() lookups.add_table("lemma_lookup", LOOKUP) lookups.add_table("lemma_rules", json_to_dict('lemma_rules.json')…
13 апр '21 в 11:17
2
ответа
Оценка уверенности Spacy 3 в признании именных организаций
Мне нужно получить оценку достоверности тегов, предсказанных моделью de_core_news_lg NER. В Spacy 2 было хорошо известное решение проблемы: nlp = spacy.load('de_core_news_lg') doc = nlp('ich möchte mit frau Mustermann in der Musterbank sprechen') te…
05 мар '21 в 12:46
3
ответа
SpaCy: установить информацию об объекте для токена, который включен более чем в один диапазон.
Я пытаюсь использовать SpaCy для распознавания контекста сущности в мире онтологий. Я новичок в использовании SpaCy и просто играю для начала. Я использую ENVO Ontology в качестве списка «шаблонов» для создания словаря для распознавания сущностей. П…
09 апр '21 в 01:00