Игнорировать Googlebot для Rack::Cache?

Я использую Rack::Cacheи поисковый робот Google запускает все мои пропуски в кеше, так что в моем кеше всегда полно страниц, которые на самом деле не представляют самые популярные на моем сайте, я не могу найти способ игнорировать IP или useragent для кеширования, кто-нибудь имел эту проблему раньше?

1 ответ

Решение

Вы можете проверить Googlebot в строке user-agent и пропустите кэширование, если оно есть.

Строки поискового агента: http://www.smart-it-consulting.com/internet/google/googlebot-spoofer/

Другие вопросы по тегам