Когда OpenAI запустила своего чат-бота ChatGPT, они также представили свой веб-сканер под названием GPTBot. Их сканер работает так же, как бот Google, и владельцы веб-сайтов могут заблокировать этим сканерам доступ к своим сайтам в файле robots.txt. OpenAI также предоставила доступ для блокировки своего бота. По данным исследования Originality.AI, около 48% веб-сайтов заблокировали доступ. После этого Google также анонсировал отдельный бот Google-Extended, чтобы позволить веб-мастерам блокировать свои инструменты искусственного интеллекта, не затрагивая их поискового бота.
Продолжающийся спор об ИИ-ботах
С момента запуска ChatGPT постоянно ведутся споры о том, как воспользоваться этой возможностью и заблокировать доступ к сайтам некоторым ИИ-ботам. Не существует единого ответа, который мог бы удовлетворить все заинтересованные стороны по всем направлениям, поскольку дискуссии по этому поводу продолжаются среди игроков SEO-индустрии и почти всех онлайн-изданий. Это второстепенная тема о том, будет ли блокировка этих ботов иметь какой-либо практический эффект, поскольку многие сервисы просматривают Интернет без разрешения.
Одним из моментов, подтверждающих эту точку зрения, является то, что сканер OpenAI был анонсирован довольно поздно. Компания, возможно, использовала множество различных методов для получения данных, которые, по ее словам, широко доступны в Интернете. Опасения заключаются в том, что компании могут использовать ботов под разными именами и под разными поставщиками, поэтому, если вы заблокируете нового, вы не сможете забрать обратно уже обработанные ими данные.
Это облегчило парсерам создание контента из тех самых ботов, которые обучены на ваших данных, созданных человеком.
Им нужен ваш контент
Некоторые могут полагать, что компаниям, работающим с искусственным интеллектом, не нужен их контент, и однажды они смогут создавать контент того же уровня, что и ваш, и тогда это очень серьезная проблема для сайтов, ориентированных на контент. Это также поднимает вопросы об эффективности и актуальности известных нам практик SEO. Другая проблема будет заключаться в том, что появится большое количество сайтов, производящих один и тот же контент. Таким образом, учитывая эти моменты, некоторые отрасли могут блокировать ботов с искусственным интеллектом в больших масштабах.
Эксперты, выступающие за предоставление доступа к ботам, подобным ChatGPT, основывают свои аргументы на том, что сервис используется не в качестве поисковой системы, а в качестве помощника, особенно для создания кода, перевода, а также создания контента. Они также говорят, что рыночная доля Bing увеличилась всего на 1% с тех пор, как он интегрировал ChatGPT. На данный момент Google заявляет, что ее бот с искусственным интеллектом является отдельным, но мы не знаем, что произойдет в будущем, поскольку Google собирается интегрировать искусственный интеллект в результаты поиска в будущем.
Сторонники также говорят, что дело не только в чат-ботом , но дело в том, что, если они упоминают название вашего бренда, по их мнению, это также делает ваш бренд более доступным для более широкой аудитории. Кроме того, если вы заблокируете им доступ, вы не сможете включить свои мысли в обучение будущих LLM. Однако существует также tron вероятность того, что в будущем на основе этих же моделей будут создаваться клоны брендов и продуктов, что в конечном итоге усугубит проблему дипфейков.
Угроза, которую модели искусственного интеллекта представляют для SEO и Google, заключается не в том, что они являются прямым конкурентом, а в том, что они представляют собой инструмент, который можно использовать для создания контента в больших масштабах. Это разрушительно для поиска, поскольку создаст проблемы для Google и Bing, а также будет потреблять трафик, который в противном случае потреблял бы уже существующий человеческий контент. Таким образом, в конечном итоге решение о том, разрешать использование бота или нет, сводится к предпочтениям человека как блоггера или издателя как фирмы после анализа их приоритетов.
Оригинальную историю можно найти здесь .
