Класс Scrapy + Unicode использует много памяти при сканировании

Я попытался найти решение утечки памяти Гуппи, и появились следующие результаты. Как вы можете видеть, класс Unicode использует много ресурсов здесь..

Кроме того, это происходит только тогда, когда я запускаю это на своем облачном экземпляре, этого не происходит, когда я запускаю это на своей локальной машине.

введите описание изображения здесь

Вот изображение prefs(), если это поможет. введите описание изображения здесь

Здесь, как вы можете видеть, класс Selector использует много ресурсов, которых не должно быть. Более того, я не могу найти какое-либо решение по этому поводу в Интернете. Я боюсь, что я могу задать неправильный вопрос здесь..

Любая помощь будет оценена.. Спасибо заранее..

0 ответов

Другие вопросы по тегам