Джон Мюллер из Google сказал, что оптимизаторы находятся в прекрасном положении, потому что они понимают, как работают сканеры, как работают элементы управления, и могут помочь своим клиентам определиться с их политикой и решениями в области ИИ, когда они ориентируются в эту новую эпоху ИИ-ботов.
Джон Мюллер написал LinkedIn«Это пересечение искусственного интеллекта и SEO предоставляет всем вам (техническим SEO-специалистам!) прекрасное место, где вы можете помочь сформировать политику/решения для своих клиентов и вместе с ними». «Вы знаете, как работают эти механизмы контроля, вы можете использовать их и помочь людям решить, что для них имеет смысл», — добавил он.
Мне нравится, как он сформулировал следующую строку: «Robots.txt дает вам большой контроль (над разумными сканерами/использованиями — для необоснованных вам, возможно, придется копнуть глубже или использовать CDN/хостер, который позволяет блокировать их по типу запроса), вы даже можете запретить все в файле robots.txt по умолчанию, если хотите». Я имею в виду, он сказал не «полный контроль», а «большой контроль». Потому что нет, это не дает вам полного контроля. В некоторых случаях, если вы хотите заблокировать обзоры AI, вам необходимо заблокировать весь поиск Google. Существуют и другие боты и сканеры с искусственным интеллектом, не связанные с Googlebot. А еще есть бесчисленное множество перспективных механизмов искусственного интеллекта с ботами повсюду.
Джон написал больше, вот полный набор комментариев:
Это пересечение искусственного интеллекта и SEO предоставляет всем вам (техническим SEO-специалистам!) прекрасное место, где вы можете помочь сформировать политику/решения для своих клиентов и вместе с ними. Вы знаете, как работают эти механизмы контроля, вы можете использовать их и помогать людям решить, что для них имеет смысл.
robots.txt дает вам большой контроль (над разумными сканерами/использованиями — для необоснованных вам, возможно, придется копнуть глубже или использовать CDN/хостер, который позволяет блокировать их по типу запроса), вы даже можете если хотите, сделайте так, чтобы ваш robots.txt запрещал все по умолчанию. Помогите человеку, управляющему сайтом, принять решение (это самая сложная часть) и правильно его реализовать (вы наверняка знаете, как это сделать).
Эти новые системы получают доступ к Интернету аналогично поисковым системам, и вы (я полагаю) знаете, как они работают и как ими управлять. Элементы управления аналогичны (иногда такие же) элементам управления поисковых систем, которые вы знаете, как они работают, и можете использовать их продуманно. То, что эти новые системы делают с данными, иногда сильно отличается, но этому можно научиться (кроме того, оно быстро меняется). Вы знаете, чего хотите от поисковых систем («зачем заниматься SEO? XYZ — вот почему»), вы можете экстраполировать оттуда, если новые системы дадут вам что-то сопоставимое, и использовать это, чтобы решить, как вы с ними взаимодействовать. Вы (в частности, как технический SEO-специалист) можете помочь в принятии этих решений, и вы определенно тот человек, который сможет их реализовать. (И, конечно же, ваша чистая техническая основа SEO упростит все, что делают эти новые системы: сканирование, внутренние ссылки, чистые URL-адреса, чистый HTML и т. д. — если вы решите пойти по этому пути.)
И, наконец, мы надеемся, что у вас есть много практики говорить «это зависит», что является основой принятия всех технических решений.
К вам приходят клиенты и спрашивают, как с этим бороться?
Обсуждение на форуме LinkedIn.
Примечание. Это было заранее написано и запланировано к публикации сегодня, в настоящее время я не в сети на Рош ха-Шана.
