Wikipedia ищет больше лицензионных сделок с компаниями ИИ, чтобы компенсировать затраты на обучение LLM
- Фонд Википедии ведет переговоры с компаниями ИИ о заключении соглашений для компенсации затрат, связанных с интенсивным автоматизированным использованием их контента.
- Автоматический обход сайта ИИ-ботами увеличивает нагрузку на сервер, потребление оперативной памяти и требования к кэшированию, что приводит к росту операционных расходов.
- Википедия остаётся бесплатной для частных пользователей, однако высоконагруженный автоматизированный доступ со стороны коммерческих ИИ-компаний рассматривается как отдельный вопрос.
Совместитель Wikipedia Джимми Уэлас заявил некоммерческая организация, стоящая за онлайн-энциклопедией, ищет больше лицензионных сделок с компаниями ИИ. Эта инициатива происходит на фоне того, как серия автоматизированных ботов ИИ напрягает инфраструктуру Wikipedia.
Уэласобъяснил, что компании ИИ используют свободно доступные знания платформы для обучения больших языковых моделей (LLM). Он отметил, что высоконагруженные боты ИИ сканируют весь сайт, возлагая значительные технические и финансовые бремя на платформу.
«Боты ИИ … проходят по всему сайту … поэтому нам нужно больше серверов, больше оперативной памяти и памяти для кэширования, и это обходится нам непропорционально дорого», — объяснил он.
Уэлас отметил, что интенсивное использование ботами ИИ вынуждает Wikipedia расширять свои серверы, увеличивать объем оперативной памяти (RAM) и улучшать кэширование, что обходится дорого.
Хотя сайт бесплатен для отдельных пользователей, он отметил, что более интенсивный автоматизированный доступ со стороны коммерческих компаний ИИ является другой проблемой. Некоммерческая организация заключила лицензионное соглашение с Google в 2022 году и ведет переговоры о подобных соглашениях с другими компаниями.
Некоммерческая организация, управляющая Wikipedia, Фонд Викимедиа, полагается на относительно небольшие публичные пожертвования и редакторов-волонтеров для функционирования, что не предназначалось для финансирования крупномасштабных коммерческих разработок ИИ.
Уэлас сказал, что несправедливо, чтобы участники и донеры оплачивали затраты коммерческих компаний ИИ, использующих контент Wikipedia.
Wikipedia предупреждает о неустойчивой нагрузке от ботов ИИ
Wikipedia заявляет, что предупреждает о неустойчивой нагрузке от ботов ИИ. Эти требования к серверам Wikipedia резко возросли в последние месяцы. Автоматизированные боты увеличили трафик — особенно за счет загрузки мультимедиа — и привели к тому, что некоммерческой организации пришлось инвестировать значительные средства в инфраструктуру.
Значительная часть этого трафика исходит от компаний ИИ, сканирующих контент, предназначенный для обучения их моделей, а не от людей. В 2022 году Фонд запустил платный коммерческий продукт Wikimedia Enterprise, чтобы обеспечить масштабный доступ к своему основному контенту и предоставить пользователям платформы необходимые инструменты и ресурсы.
Этот сервис предназначен для снижения нагрузки на живой сайт Wikipedia, одновременно предоставляя разработчикам ИИ необходимые данные для улучшения их моделей. Уэлас призвал компании ИИ использовать эту платную опцию вместо сканирования публичного сайта.
Если компании не будут соблюдать эти технические меры, Уэлас заявил, что доступ ботов будет ограничен с помощью таких инструментов, как AI Crawl Control может быть реализована. В бизнес-среде ведутся споры о роли публичного (или коммерческого) ИИ в управлении персональными данными, которые пользователи теперь хранят в масштабах, превышающих то, что позволяет право на свободный и прозрачный доступ к знаниям, а также то, что необходимо частному и государственному секторам.
Поскольку всё большая доля обработки данных ИИ сильно зависит от крупных общедоступных наборов данных, Википедия выступает за справедливый подход, который обеспечивает компенсацию как организациям, поддерживающим эти данные, так и бизнесу. Википедия не исключение в своей приверженности соблюдению нейтралитета.
Википедия с трудом сохраняет нейтралитет на фоне глобальных конфликтов
Сайт Википедия работает уже более 20 лет как некоммерческая организация, управляемая Фондом Викимедиа. Его модель основана на глобальной армии редакторов-волонтеров, которые тратят свое время на создание, редактирование и вычитку контента.
Публичные пожертвования являются ключевым условием, обеспечивающим открытость проекта для всех и везде, независимо от суммы денег или географического охвата, доступных пользователям. Википедия, всемирно известный международный сайт и энциклопедия, также испытывала трудности с соблюдением нейтралитета по сравнению с другими источниками.
Проблема становится еще более острой при детальном освещении политически значимых вопросов, социальных движений или вооруженных конфликтов по всему миру. Уэллс заявил, что, хотя большинство редакторов Википедии сами не являются активистами, личные предпочтения могут влиять на то, как освещаются те или иные темы.
Однако он добавил, что доверяет сообществу, отмечая, что редакторы, как правило, каким-то образом достигают ценностей Википедии в отношении справедливости и точности, даже под сильным давлением. Нейтральность платформы дополнительно подтверждается ее политикой сообщества, методами рецензирования коллегами и процессом разрешения споров, среди прочего.
В то же время постоянная зависимость от волонтеров и пожертвований подчеркивает слабость системы. И по мере того как платформа сталкивается с новым давлением, включая рост использования ее контента компаниями ИИ, обеспечение неизменности основных ценностей платформы (нейтралитет, точность и свободный доступ) становится все более важным.
Если вы читаете это, вы уже впереди. Оставайтесь с нами, подписавшись на нашу рассылку.
Неллиус Ирэн
Неллиус — выпускница программ по управлению бизнесом и информационным технологиям с пятилетним опытом работы в индустрии криптовалют. Она также окончила Bitcoin Dada. Неллиус внесла вклад в ведущие медиа-издания, включая BanklessTimes, Cryptobasic и Riseup Media.
