Игнорировать Googlebot для Rack::Cache?
Я использую Rack::Cacheи поисковый робот Google запускает все мои пропуски в кеше, так что в моем кеше всегда полно страниц, которые на самом деле не представляют самые популярные на моем сайте, я не могу найти способ игнорировать IP или useragent для кеширования, кто-нибудь имел эту проблему раньше?
1 ответ
Решение
Вы можете проверить Googlebot в строке user-agent и пропустите кэширование, если оно есть.
Строки поискового агента: http://www.smart-it-consulting.com/internet/google/googlebot-spoofer/