最新新闻
为您推荐

维基百科寻求更多AI授权协议以抵消大语言模型训练的成本

作者Nellius IreneNellius Irene 3 分钟阅读
维基百科寻求更多AI授权协议以抵消大语言模型训练的成本
  • 维基媒体基金会正在与AI公司谈判协议,以抵消因大量自动化使用其内容而产生的成本。
  • AI 机器人的自动爬取会增加服务器负载、内存占用和缓存需求,从而导致运营成本上升。
  • 维基百科对个人用户保持免费,但高容量、自动化的商业 AI 公司访问则被视为另一回事。

维基百科联合创始人吉米·威尔士 表示 这家运营在线百科全书的非营利组织正在寻求与AI公司达成更多授权协议。 这一举措是在一系列自动化AI机器人给维基百科的基础设施带来压力的背景下进行的。 

威尔士指出,人工智能公司利用该平台免费提供的知识来训练大型语言模型(LLM)。他提到,高流量的AI机器人会爬取整个网站,给平台带来了巨大的技术和财务负担。

“AI机器人……正在浏览整个网站……因此我们需要更多的服务器,需要更多的内存和缓存,这给我们带来了不成比例的成本,”他解释道。

威尔士指出,AI机器人的大量使用迫使维基百科扩展服务器、增加内存并改进缓存,所有这些都需要高昂的成本。

尽管该网站对个人用户免费,但他指出,营利性AI公司的高容量自动化访问是另一个问题。该非营利组织于2022年与谷歌签署了授权协议,并正在与其他公司协商类似的协议。

运营维基百科的非营利组织维基媒体基金会主要依靠相对少量的公众捐款和志愿者编辑来维持运作,这原本并非用于资助大规模的商业AI开发。

威尔士表示,让贡献者和捐赠者为商业AI公司使用维基百科内容的成本买单是不公平的。

维基百科警告AI机器人带来的不可持续负担

维基百科表示,它警告AI机器人带来的不可持续负担。近期几个月,对维基百科服务器的需求急剧增加。自动化机器人 增加了流量 ——特别是通过多媒体下载——导致该非营利组织不得不大量投资基础设施。 

这些流量中很大一部分来自AI公司抓取内容以训练其模型,而非来自人类。2022年,该基金会推出了一项付费商业产品Wikimedia Enterprise,以大规模提供其核心内容的访问权限,并为平台用户提供必要的工具和资源。 

该服务旨在减轻维基百科实时网站的压力,同时为AI开发者提供增强其模型所需的数据。威尔士敦促AI公司使用这一付费选项,而不是抓取公共网站。 

威尔士表示,如果公司不遵守这些技术措施,可能会通过诸如 AI爬取控制 等工具限制机器人访问。目前,关于公共(或商业)AI在管理用户以超出法律赋予的自由、透明知识权利规模的个人数据方面的作用,以及私营和公共部门的需求,企业间存在一些争议。 

随着越来越多的AI处理严重依赖大型公开数据集,维基百科倡导一种公平的方法,既补偿维护这些数据实体的利益,也补偿企业的利益。维基百科并未因其保持中立的承诺而免疫。 

维基百科在全球冲突中难以保持中立

维基百科网站作为由维基媒体基金会管理的非营利实体,已运营超过20年。其模式基于全球志愿者编辑大军,他们花费时间创建、编辑和校对内容。

公众捐款是确保其向任何人开放的关键因素,无论其资金多少或地理位置如何。作为知名的国际网站和百科全书,维基百科也在努力 保持中立 以及其他来源。 

当详细报道高风险政治问题、社会运动或全球武装冲突时,问题变得更加严峻。威尔士表示,虽然大多数维基百科编辑本身并非活动家,但个人偏好可能会影响话题的覆盖方式。 

然而,他补充说,他信任社区,称编辑们往往能在巨大压力下以某种方式实现维基百科的公平和准确价值观。平台的 neutrality 还体现在其社区政策、同行评审方法和争议解决程序等方面。 

同时,对志愿者和捐款的持续依赖凸显了系统的弱点。随着平台面临新的压力,包括AI公司对其内容使用量的增加,确保平台核心价值观(中立、准确和免费访问)保持不变变得越来越重要。

不要只是阅读加密货币新闻,要真正理解它。订阅我们的通讯。 免费。

Nellius Irene

Nellius Irene

Nellius 是一位商业管理与信息技术专业毕业生,拥有五年加密货币行业经验,同时也是 Bitcoin Dada 的毕业生。她曾为多家领先的媒体出版物撰稿,包括 BanklessTimes、Cryptobasic 和 Riseup Media。

更多新闻…