user@pay2:~$ wget -qO- https://packages.altlinux.org/robots.txt User-agent: * Disallow: / Sitemap: https://packages.altlinux.org/sitemap.xml.gz user@pay2:~$ https://yandex.ru/support/webmaster/controlling-robot/robots-txt.html
Да, это было сделано как затычка, намерено. Возможно сеичас время, чтобы разделить запрещенные и разрешенные пути.
Разделил доступ. Ожидается в 0.8