Как я могу отобразить результат моей обученной модели на видео с помощью Detectron2?

Question

Я новичок в использовании Detectron2. Я хочу загрузить видео с локального диска. А затем выполните обнаружение с помощью моей обученной модели с помощью VideoVisualizer от Detectron2.

Я пытался найти учебник по этому поводу. Но этого не существует. Не могли бы вы, что мне делать?

Спасибо

import detectron2
from detectron2.utils.logger import setup_logger
setup_logger()

# import some common libraries
import numpy as np
import tqdm
import cv2

# import some common detectron2 utilities
from detectron2 import model_zoo
from detectron2.engine import DefaultPredictor
from detectron2.config import get_cfg
from detectron2.utils.video_visualizer import VideoVisualizer
from detectron2.utils.visualizer import ColorMode, Visualizer
from detectron2.data import MetadataCatalog
import time

video = cv2.VideoCapture('gdrive/My Drive/video.mp4')
width = int(video.get(cv2.CAP_PROP_FRAME_WIDTH))
height = int(video.get(cv2.CAP_PROP_FRAME_HEIGHT))


cfg = get_cfg()
cfg.merge_from_file(model_zoo.get_config_file("COCO-InstanceSegmentation/mask_rcnn_R_50_FPN_3x.yaml"))
cfg.OUTPUT_DIR = 'gdrive/My Drive/mask_rcnn/'
cfg.MODEL.WEIGHTS = os.path.join(cfg.OUTPUT_DIR, "model_final.pth")
cfg.MODEL.ROI_HEADS.SCORE_THRESH_TEST = 0.7  # set threshold for this model 
predictor = DefaultPredictor(cfg)

v = VideoVisualizer(MetadataCatalog.get(cfg.DATASETS.TRAIN[0]), ColorMode.IMAGE)

Answer 1

Во-первых, ознакомьтесь со следующим руководством (вы можете пропустить части обучения, если не хотите тренироваться на своих собственных данных).https://colab.research.google.com/drive/16jcaJoc6bCFAQ96jDe2HwtXj7BMD_-m5

Затем посмотрите на следующий код для вывода на видео. https://github.com/facebookresearch/detectron2/blob/master/demo/demo.py