SprytКак работает IndexNow в Яндексе. Результаты исследования
Из-за большого объема данных в Интернете поисковые системы не сразу узнают о появлении новых страниц или изменении старых. Соответственно, поисковый индекс является своего рода историческим слепком сети, а не его текущим представлением. Пользователь же ожидает видеть актуальную информацию при клике на результаты поиска. Но обходить интернет с частотой появления/обновления контента в нем для хранения свежего индекса невозможно. Частично это проблема решается в Яндексе, Google и других ПС расстановкой приоритетов сканирования, которые зависят от различных параметров. Также, поисковые системы предоставляют вебмастерам различные инструменты, позволяющие уведомлять об изменениях на сайте, что, в свою очередь, меняет приоритеты сканирования.- В Яндексе таким инструментом является "Переобход страниц" в панели для вебмастеров.
- Bing с сентября этого года использует URL Submission API.
- В Google имеется Indexing API, который по умолчанию предназначен не для всех типов контента.
Что такое IndexNow?
IndexNow — это простой API для информирования поисковых систем об изменениях на сайте: появлении новых страниц, удалении старых, обновлении контента. В Яндексе его можно использовать вместо или вместе с инструментом переобхода страниц. Однако, поисковики не дают гарантий, что страницы будут быстро переобходиться или это каким-либо образом повлияет на скорость индексации или переиндексации контента. Для проверки, как именно работает IndexNow в Яндексе было проведено исследование, результаты которого опубликованы в этой статье.
Комментарии (31):
Привет, а вы не знаете будет ли плагин для вп и как получить api коды для тестов?
вот это скорости))
В ответ на Андрей.
Андрей, спасибо за фидбек. Такие комментарии мотивируют вести блог дальше 🙂
В ответ на Валерий.
В платных плагинах уже есть, в wpshop вышло обновление плагина Clearly Pro, там добавили IndexNow.
В ответ на Валерий.
По-тихонечку появляются плагины для WP. Вот, например:
https://wpcourses.ru/indexnow/
Представитель популярного плагина Yoast SEO заявил, что пока не видит смысла добавлять такой функционал. Но думаю, как только Google поддержит протокол IndexNow, все сеошные плагины у себя это подобавляют. Просто Яндекс и Бинг мало кому интересны.
Что касается ключей для API, то вы их сами генерируете. Прочитайте внимательно документацию. Например, я использую ключ devakatalk.txt. Вы можете использовать его же, если не хотите заморачиваться на генерации нового.
В ответ на seoonly.ru.
Да, нормально. Но IndexNow все равно не сравнится со скоростью комментирования блогов seoonly 🙂
В ответ на Анон.
Я же seo-аналитик, должен разбираться во всех поисковых алгоритмах, независимо от гео 🙂
Ну и в бурже и рунете алгоритмы работают примерно одинаково.
Спасибо за коммент!
Спасибо за детальное исследование. Очень интересно. Не знал, что так быстро работает "Переобход". Статья полезно как для понимания IndexNow, так и того, как работает "Переобход"
Спасибо за исследование!
Много сейчас внимания к IndexNow, а опыта в практическом применении недостаточно
Без практического анализа новых фич нет смысла в их использовании
Получил недавно рассылку Яндекса про этот IndexNow и не понял, зачем он нужен. На тех сайтах, где страницы появляются быстро и много - бот Яндекса и так пасется без перерыва и быстро все берет в индекс. А там, где новое редко добавляется - ну так и не горит, все равно не сегодня, так через пару дней зайдет и проиндексирует))
Спасибо, Сергей.
Всегда с удовольствием читаем всей командой ваши исследования, опыты.
Замечательная пища для размышлений. Обязательно продолжайте. Единственный сео-блог, который читаем и который несет реальную практику. По моему мнению.
Интересное исследование. Думал как раз нечто подобное провести, но видимо уже не потребуется )
В добавлении к этому запилил сервис для индексации страниц через IndexNow - https://majento.ru/index.php?page=seo-analize/indexnow
Сервис бесплатный и по сути работает без ограничений
Спасибо за статью!
В ответ на Сергей.
Да, переобход работает шустро. Яндекс - молодец!
В ответ на Артур Титовец.
Смысл использования IndexNow есть у больших сайтов, где работает штат копирайтеров или контент-менеджеров. В остальных случаях Яндекс достаточно быстро находит новый контент. Но иногда, конечно, хотелось бы быстрее 🙂
В ответ на Majento.
Да, сервис крутой, спасибо! Использовал его в том числе, проводя эксперимент.
Я его добавил в список полезных ссылок в конце этой статьи.
В ответ на Ярослав.
Спасибо, Ярослав, за добрые слова! Очень вдохновляют.
Часто замечаю, что когда удаляю страницу через Webmaster, то по URL она не ищется уже через час, но вот если добавить кусок текста с нее и искать через site:, то вполне находится... А потом через 3-4 недели и по куску перестает искаться, видимо удаляется полностью
А как "отдавать страницы быстрее" при лимите в 10 минут? Это от скорости хостинга/сервера зависит?
В ответ на Игорь.
Зависит от скорости сервера. Но не только.
Также зависит от нагруженности БД, CMS, наличия серверного кеширования, удаленности сервера от того, кто запрашивает контент, размер контента, ну и еще несколько мелочей.
Аналогично на днях пробовал IndexNow, но почему то это не сработало с новым сайтом только открытым на индексацию...
Обычный переобход в панели вебмастера решил вопрос за считанные минуты.
Может инструмент еще сыроват?
Как думаете, данный инструмент однажды заменит собой "переобход"?
p.s. спасибо за проведенные и наглядные тесты
В плагинах вордпресс почему то постоянно приходится менять ключ шифрования. иначе пишет ошибка 403 при переобходе а на 200 для IndexNow
Спасибо за интересный эксперимент)
Такую бы статью еще про Indexing Api от гугла.
Клевый эксперимент. Автор не поленился, молодец.) Жаль что пингоматик погиб смертью храбрых, нормально он ботов загонял на сайт.
таки уже были инструменты по пингу у тех же поисковиков, это какое-то хождение по кругу
Войдите или зарегистрируйтесь чтобы оставить комментарий
Спасибо, хорошее иследование