Bug 37415

Summary: geyser.altlinux.org запрещен к индексирования поисковыми системами
Product: Infrastructure Reporter: mikhailnov <mikhailnov>
Component: geyser.altlinux.orgAssignee: Малъ Скрылевъ <majioa>
Status: CLOSED FIXED QA Contact: Andrey Cherepanov <cas>
Severity: normal    
Priority: P3 CC: 3aHyga
Version: unspecified   
Hardware: all   
OS: Linux   

Description mikhailnov 2019-11-02 07:29:14 MSK
user@pay2:~$ wget -qO- https://packages.altlinux.org/robots.txt
User-agent: *
Disallow: /
Sitemap: https://packages.altlinux.org/sitemap.xml.gz
user@pay2:~$ 

https://yandex.ru/support/webmaster/controlling-robot/robots-txt.html
Comment 1 Малъ Скрылевъ 2020-05-21 20:55:06 MSK
Да, это было сделано как затычка, намерено. Возможно сеичас время, чтобы разделить запрещенные и разрешенные пути.
Comment 2 Малъ Скрылевъ 2020-05-21 21:21:45 MSK
Разделил доступ. Ожидается в 0.8