Где разместить robots.txt на моем веб-сервере?
У меня есть 2 домена, которые указывают на мой веб-сервер, см. Ниже:
domain1.com -> / var / www / html / live
domain2.com -> /var/www/html/dev
мой robots.txt файл
User-agent: *
Disallow: /dev/
Теперь хочу domain2.com не быть проиндексирован поисковыми системами, где я должен поставить свой robots.txt?