Описание тега sentence-transformers
Sentence Transformers — это фреймворк Python для современного встраивания предложений, текста и изображений. Эти вложения используются для поиска предложений, имеющих сходное значение.
1
ответ
Нет такого файла или каталога: '/Users/username/.cache/torch/sentence transformers/public.ukp.informatik.tu-darmstadt.de_reimers_sentence-transformers_v0
Я нашел простое решение следующей ошибки: No such file or directory: '/Users/username/.cache/torch/sentence transformers/public.ukp.informatik.tu-darmstadt.de_reimers_sentence-transformers_v0. после выполнения следующего кода: model_BERT = SentenceT…
21 апр '21 в 03:00
0
ответов
Ошибка при импорте SentenceTransformer в Python
Я установил пакетные преобразователи предложений, используя "pip install предложения-преобразователи". Но когда я попытался импортировать преобразователи предложений в python, я получил ошибку ниже. from sentence_transformers import SentenceTransfor…
29 апр '21 в 07:33
0
ответов
Трансформеры: Получение KeyError: 'offer_embedding' на model.fit
Я получаю эту ошибку KeyError: 'предложение_эмбеддинг' онлайн: rep = self.model(sentence_features[0])['sentence_embedding'] внутри функции model.fit трансформаторов setence. Еще немного кода: train_data = ParallelSentencesDataset(student_model=stude…
01 май '21 в 01:42
2
ответа
Ошибка FileNotFound при загрузке преобразователей предложений модели Роберта
Я уже скачал модель «roberta-large-nli-stsb-mean-tokens», но она начинает скачиваться снова и снова. Примечание: это не связано с пространством, в машине есть место. И вот эта ошибка приходит ... FileNotFoundError from sentence_transformers import S…
06 май '21 в 17:37
1
ответ
Получите размер словаря в токенизаторе tenorflow
Как мне получить размер словаря (неизвестного набора данных) после токенизации? Это код: f = open("parallel2200Tab.txt","r") pairs = [line.strip().split("\t") for line in f] f.close() docs = tf.data.Dataset.from_tensor_slices(pairs) tokenizer = text…
10 май '21 в 18:01
1
ответ
Развертывание ML-модели преобразователя предложений с помощью Flask Gunicorn, загрузка модели никогда не заканчивается
Я загружаю модель преобразователя предложений с помощью фляжки Gunicorn, но модель никогда не заканчивает загружать модель, кто-нибудь знает, почему, пожалуйста? вот журнал Gunicorn Бревенчатая фляга без пулемета
31 май '21 в 08:03
0
ответов
Невозможно импортировать Offer_transformers в python
Я пытаюсь импортировать переводы предложений (https://www.sbert.net/), но получаю следующее сообщение об ошибке: Не уверен, почему я получаю эту ошибку, хотя установленная версия numpy - 1.20.3: Есть идеи, как это решить?
05 июн '21 в 05:22
0
ответов
Как скачать модели bert и загрузить в python?
Как скачать модели bert и загрузить в python? from sentence_transformers import SentenceTransformer model = SentenceTransformer('bert-base-nli-mean-tokens') Как сохранить предварительно обученную модель и загрузить в Python?
12 июн '21 в 18:51
0
ответов
Могу ли я использовать paraphrase-mpnet-base-v2 для создания семантической поисковой системы? [закрыто]
Есть одно сомнение. Для семантических поисковых систем большинство из них используют distilbert. Но когда я увидел характеристики предварительно обученной модели, paraphrase-mpnet-base-v2 оказался на высоте по сравнению с другими моделями. Могу ли я…
26 июн '21 в 11:33
0
ответов
AttributeError: объект int не имеет атрибута strip, когда я пытаюсь закодировать список данных
AttributeError: объект int не имеет атрибута strip, когда я пытаюсь закодировать список данных Я пытаюсь закодировать данные с помощью приведенного ниже кода И код ниже: encoded_data = model.encode(df.Content.tolist()) encoded_data = np.asarray(enco…
28 июн '21 в 08:40
0
ответов
Ошибка при загрузке квантованной модели BERT из локального репозитория
После квантования модели BERT она работает без проблем. Но если я сохраню квантованную модель и загружу, она не сработает. Отображается сообщение об ошибке: объект LinearPackedParams не имеет атрибута _modules. Я использовал то же устройство для сох…
02 июл '21 в 16:31
3
ответа
Невозможно импортировать jax-пакет python в Google TPU
Я работаю над консолью linux, и при вводе python я попадаю в консоль python. Когда я использую следующую команду на машине TPU import jax затем он генерирует следующую команду mss и выходит из командной строки python. paramjeetsingh80@t1v-n-1c883486…
08 июл '21 в 20:49
0
ответов
Ошибка луча: отсутствует 1 обязательный позиционный аргумент: 'петли'
Я выполняю train.py, который указан в https://github.com/kingoflolz/mesh-transformer-jax. Он использует Jax, Ray, TPU для обучения этого mdoel. Однако я останавливаюсь между ними и генерирует следующую ошибку: (pid=9454, ip=10.164.0.9) jax runtime i…
09 июл '21 в 16:54
1
ответ
Как сохранить выходные векторы предложения-Берта в файл?
Я использую Bert, чтобы получить сходство между многословными словами. Вот мой код, который я использовал для встраивания: from sentence_transformers import SentenceTransformer model = SentenceTransformer('bert-large-uncased-whole-word-masking') wor…
11 июл '21 в 12:16
2
ответа
Загрузка предварительно обученной модели torch и предложения_transformers при запуске в докер-контейнере завершается ошибкой
Я получаю ошибку ниже при загрузке предварительно обученной модели факела и sentence_transformers("distilbert-base-nli-stsb-mean-tokens") при попытке запустить в докер-контейнере. Error: Invalid value for '-A' / '--app': Unable to load celery applic…
08 янв '21 в 20:47
0
ответов
Ошибка при попытке точной настройки модели BERT
Когда я пытаюсь точно настроить модель BERT, я получаю следующую ошибку, которая, похоже, является ошибкой при работающем поезде. TypeError: prepare_for_model() got an unexpected keyword argument 'padding' Раньше у меня получалось нормально запускат…
29 июл '21 в 14:26
2
ответа
Не удается найти модель pytorch при загрузке модели BERT в Python
Слежу за этой статьей, чтобы найти сходство текста. У меня есть такой код: from sentence_transformers import SentenceTransformer from tqdm import tqdm from sklearn.metrics.pairwise import cosine_similarity import numpy as np import pandas as pd docu…
04 авг '21 в 18:12
1
ответ
Длина последовательности индексов токенов Проблема
Я использую модель преобразователя предложений и пытаюсь усечь свои токены, но, похоже, она не работает. Мой код from transformers import AutoModel, AutoTokenizer model_name = "sentence-transformers/paraphrase-MiniLM-L6-v2" model = AutoModel.from_pr…
19 авг '21 в 17:56
0
ответов
Расшифровать представление предложения, полученное из SentenceTransformer
Можно ли декодировать представление предложения, полученное из SentenceTransformer, обратно в предложение? См. Пример из документации from sentence_transformers import SentenceTransformer model = SentenceTransformer('paraphrase-MiniLM-L6-v2') #Our s…
10 сен '21 в 02:19
0
ответов
Как улучшить косинусоподобие в SBERT
Я пытаюсь реализовать SBERT multi-qa-mpnet-base-dot-v1 в корпусе Yahoo Answers QA. почему какой-то результат нехороший? следующий код. !pip install -U sentence-transformers<br> from sentence_transformers import SentenceTransformer, util import…
27 сен '21 в 08:38