В новом аудиоподкасте №391 Николай Шмичков рассказал о 3 способах ускорить индексацию в Google в 2021 году.
Текстовая версия выступления:
«Всем привет!
Вы находитесь на канале SEOquick.
Меня зовут Николай Шмичков.
И я хочу вам рассказать, как, например, добавить страницу своего сайта в индекс?
Какие способы для этого существуют?
Напомню, что мы уже рассматривали вопрос сиротских страниц и затрагивали тему повышения индексации в целом.
Так вот, на момент написания последних подкастов Google действительно исключил функцию добавления в индекс отдельных страниц, тем самым заставив многих оптимизаторов, что называется, понервничать.
Потому что отдельные страницы не сразу включались в индекс, и карты сайта обрабатывались не так быстро.
И в прошлом подкасте о сканирующем бюджете я затронул эту тему.
Так что, по сути, в Вебмастер вернулась возможность отправлять отдельные URL-адреса.
Чтобы запросить сканирование одной страницы, просто воспользуйтесь инструментом проверки URL-адресов, который расположен в верхней части вашего веб-мастера.
Поэтому просто добавьте URL-адрес; если вы видите, что URL-адреса нет в Яндексе, нажмите кнопку запросить индексацию.
Инструмент проверит страницу на наличие проблем с индексацией.
Если проблем нет, страница будет добавлена в очередь.
Если проблемы будут выявлены, инструмент покажет их, и вам придется их устранить.
Помните, что фактическая отправка запроса не гарантирует, что страница будет включена в индекс.
Что это вообще произойдет.
Более того, страницу могут исключить из индекса из-за некачественного и менее полезного контента.
Поэтому, прежде чем добавлять страницы таким способом, я рекомендую повторно просканировать сайт какими-нибудь парсерами, тем же Screaming Frog или другими подобными сервисами.
В целях поиска менее полезного и неуникального контента.
Это так называемый поиск близких дубликатов, позволяющий искать контент, слишком похожий на другой контент.
И конечно, вы должны помнить, что если вы когда-то в прошлом писали контент явно по заказу у копирайтеров, то очень велика вероятность того, что именно такой контент выпадет из индекса.
Для добавления большого количества страниц обязательно рекомендуем использовать добавление через карту сайта.
А файл карты сайта — это действительно то, что позволяет Google быстро найти все страницы вашего сайта.
Он может содержать все метаданные в версиях ресурса на других языках, с видео-страницами, изображениями, новостями.
Как говорится, повторная отправка карты сайта не поможет улучшить сканирование.
Если вы изменили страницу, вам необходимо изменить тег Lastmod и установить соответствующую дату изменения для страницы.
Тогда поисковый робот фактически обойдет эту информацию.
Есть несколько способов предоставить Google информацию о вашей карте сайта.
Отправьте его на интерфейс в специальном инструменте.
Еще можно отправить запрос через Ping — это через специальный запрос Google google.com/ping? Карта сайта равна ссылке на вашу карту сайта.
И таким образом вы, что называется, пропингуете Google, что у вас есть карта сайта.
Убедитесь, что этот файл доступен и открыт.
И конечно не забудьте вставить в любое место файла robots.txt строку с путем к файлу карты сайта в простом примере карты сайта, двоеточие и ссылку на вашу карту сайта, этого будет достаточно.
Как видите, все довольно просто и не требует никаких сложностей.
Но, например, если у вас есть веб-сайт стоимостью в несколько миллионов долларов, и вам нужно отправлять в индекс страницы, которые появляются случайным образом.
Есть еще трюк, так называемый «Ловец ботов».
Дмитрий Шахов рассказал об этом трюке под названием «Ловец ботов».
Он заключается в том, что вы ставите с помощью такого специального плагина «тоже рекомендуем прочитать, тоже рекомендуем прочитать».
Дело в том, что есть хитрость, когда после статьи или в середине статьи идут рекомендуемые ссылки на похожие материалы.
Этот блок «Также стоит прочитать» прекрасно позволяет ссылаться на те материалы, которые как-то плохо индексируются или которые необходимо прочитать.
Так, часто таким образом для пользователя привязываются полезные материалы, чтобы он гарантированно на них кликнул.
Но еще хочу ссылку для поискового робота.
Поэтому делается простой трюк: этот блок сделан так, что он работает случайным образом.
И он показывает случайные ссылки, но поисковому роботу могут показываться не случайные ссылки, а ссылки, которые по каким-то причинам исключены из индекса.
И здесь можно воспользоваться сбором списка неиндексируемых страниц и проверкой юзер-агента.
Если пользовательский агент — робот Googlebot, он показывает не только релевантные страницы, но только те страницы, которые не проиндексированы.
Это значительно увеличит вероятность сканирования страниц поисковым роботом, и таким образом этот «ловец ботов» позволит вам сканировать те страницы, которые по каким-то причинам не включены в индекс.
По поводу «Ловца ботов» советую прочитать презентацию Дмитрия Шахова.
Я постараюсь оставить ссылку в описании этого подкаста.
А если вам интересно, обязательно зайдите в описание этого подкаста и найдите ссылку на презентацию.
Вот и все.
Надеюсь, вам было действительно интересно.
Буду рад дождаться ваших комментариев.
И конечно подписывайтесь на наши подкасты.
Подпишитесь на наш YouTube-канал, где вебинары выходят каждый четверг.
И всех с праздником».
