Данные из инструмента «Страницы в поиске» стали доступны для скачивания

Данные из разделов инструмента «Страницы в поиске» стали доступны для скачивания.

В разделе «Все страницы» содержатся данные о всех страницах сайта, известных поиску: их URL, дата последнего посещения страницы роботом и title.

Раздел «Последние изменения» включает информацию только по страницам, статус которых был изменен, например, они были добавлены в поиск или выпали из него. При этом данных по каждой изменившейся странице представлено больше, чем в предыдущей выгрузке:

updateDate — дата обновления поисковой базы;
url — адрес страницы;
httpCode — HTTP-код, полученный роботом во время последнего обхода;
status — статус страницы;
target — адрес страницы, на которую происходит перенаправление со страницы, указанной в поле url, или страница, дублирующая текущую;
lastAccess — дата последнего посещения страницы роботом;
title — заголовок страницы (HTML-элемент title).
event — действие, произведенное со страницей (добавление или исключение из поиска).

Теперь найти все исключенные или только что добавленные в поиск страницы, страницы с конкретным HTTP-ответом, дубли или все страницы без title еще проще.

Выгрузка данные можно в форматах CSV и XLS. Ссылку на скачивание вы найдете внизу страницы инструмента.

Источник: Блог Яндекса для Вебмастеров