Сканирование / удаление в интернете номеров массовой компании
Я работаю над проектом, который требует от меня сбора большого количества названий компаний и соответствующих им контактных номеров посредством сканирования / сканирования в Интернете. Я изучал, как использовать Scrapy пару недель, но я не уверен, каким может быть хороший подход к проекту, поскольку я новичок в сканировании веб-страниц.
Я думал об использовании таких сайтов, как Yelp/Yellow Pages/ и т. Д., Но в их TOS это четко определено, чтобы не собирать данные. Я застрял в поиске отправной точки. Есть какие-нибудь идеи от тех, у кого есть опыт работы в Интернете?