|
|
| Файл robots.txt |
Файл robots.txt предназначен для указания правил индексации вашего сайта. Вы можете запретить доступ к определенным каталогам или файлам своего сайта для всех или конкретно определенных роботов-индексаторов.
|
|
| Найти сохраненную версию страницы |
Полезная функция поисковых серверов, когда необходимо проверить какая именно версия вашей страницы и за какой период хранится в индексе.
|
|
| Найти все сайты для конкретного IP |
Иногда возникает необходимость найти все сайты размещенные на одном IP адресе. Простейший пример - узнать своих проиндексированных соседей по хостингу.
|
|
| Поиск каналов новостей (RSS,Atom) |
Если вы пользуетесь программами для чтения каналов и не знаете где найти интересный вам канал, то вам может быть пригодиться такая возможность поисковых серверов.
|
|
|
|
|
|
|
|
|
