Поиск страниц в кэше поисковых систем
Очень часто вы приобретаете домен с историей или просто хотите найти удалённую страницу. Чтобы восстановить веб-страницу можно воспользоваться кэшем поисковых систем:
Google: вводите в поисковик cache:site.com/page/. Обрати внимание, приставка «http://» не нужно!
Яндекс: ссылки на кэшированные страницы (вида http://hghltd.yandex.net/yandbtm…) расположены снизу справа от поисковых результатов (видны при наведении мыши на результат)
Yahoo — аналогично (http://search.yahoo.com/r/_ylt…).
Рамблер — аналогично http://nova.rambler.ru/saved…
Mail.ru — аналогично http://hl.mailru.su/gcached…
Bing — ссылка на кэшированную страницу (http://cc.bingj.com/cache.aspx…0) в выпадающем меню справа от адреса страницы в выдаче.
Wayback Machine и её аналоги
Если страница в кэше ПС не сохранилась, то рекомендуется воспользоваться сервисами различных вебархивов:
Веб-архив, web-archive — архивные копии сайтов http://web-arhive.ru
Wayback Machine http://web.archive.org
Archive.is http://archive.is или http:/archive.li
OpenWayback http://web.archive.bibalex.org/web/
ScreenShots http://www.screenshots.com
Как исключить домен из кэша поисковиков вебархива
Если вы собираетесь «дропать» (прекратить администрирование домена) просто не оплатив продление или разделегировать его (убрать доменное имя из реестра), то рекомендуется в файле robots.txt прописать следующее правило, которое поспособствует быстрому устранению содержимого домена из кэша поисковых систем:
#Domain name expired
#no content here
User-agent: *
Disallow: /
Crawl-delay: 5
Чтобы запретить роботу вебархива Wayback Machine индексировать сайт, необходимо прописать следующее правило:
User-agent: ia_archiver
Disallow: /
Обратите внимание, что после весны 2018 года Вебархив игнорирует данную команду. Если ваш сайт уже проиндексирован в вебархиве, то необходимо направить им письмо на электронную почту или факс с запросом на удаление контента — их контакты доступны здесь https://archive.org/about/contact.php При этом следует учесть, что существует несколько коммерческих проектов, которые мониторят коммерческие и популярные сайты перед потенциальным дропом домена и потом продают заинтересованным лицам полный siterip.
©
Вместе с этим читают: История домена Обратные ссылки Спам-базы
