Описание тега openai-clip

Вопросы с тегом
1 ответ

используйте openAI CLIP с тензором факела или массивом numpy в качестве входных данных

Как правильно использовать тензор pytorch или iamge openCV в качестве входных данных для OpenAi CLIP? Я пробовал следующее, но пока это не сработало: device = "cuda" if torch.cuda.is_available() else "cpu" clip_model, clip_preprocess = clip.load("Vi…
17 дек '22 в 20:21
0 ответов

Yolo и Clip находят топ-3 похожих изображений

import os import clip import numpy as np from PIL import Image from tqdm import tqdm from typing import List, Dict import concurrent.futures import pickle import time def tokenize_text(text: List[str], tokenizer): """ Tokenize the input text using …
07 авг '23 в 12:42
1 ответ

Семантический поиск видео

Я пытаюсь расширить функциональность CLIP OpenAI для семантического поиска видео. По сути, моя цель — ввести текстовый запрос и получить соответствующие видеофрагменты/клипы, соответствующие семантическому содержанию текстового запроса. Вот что я по…
02 июл '23 в 17:24
0 ответов

Выходные данные кодировщика изображений Visual Transformer CLIP

Я проводил несколько экспериментов с выходом кодера визуального преобразователя CLIP (clip-ViT-B-32). Таким образом, по сути, учитывая одну и ту же сцену или изображение, он должен выводить почти тот же вектор признаков изображения, учитывая, что эт…
10 сен '23 в 17:54