Scrapy - передает данные в базу данных, если найдено ключевое слово

Проще говоря, я очищаю веб-данные в Scrapy.

Мне нужно проанализировать очищенные данные для ключевых слов / регулярных выражений и, если они совпадают, передать данные в базу данных. Если не найдено, бросьте.

Мой вопрос: должен ли я сделать это из Scrapy, и если да, то есть ли у вас какие-либо предложения высокого уровня для дальнейшего изучения.

Или я должен просто выполнить эту задачу за пределами Scrapy.

В идеале я хотел бы сделать все это из Scrapy.

ps Я новичок в Scrapy / Python и Stackru и исследовал это, насколько это возможно, и не нашел окончательных ответов / рекомендаций.

0 ответов

Другие вопросы по тегам