テックジャイアントがAI時代の高品質なデータのためにKaryaに注目

バンガロール南西部の水田とピーナッツ畑に囲まれた静かな村、Agaraで、Preethi P.はミシンに座っています。通常、彼女は服を縫ったり修理したりする一日を過ごし、仕事に対して1日1ドル未満の収入を得ています。しかし、今日は違います。Preethiは、母語であるカンナダ語の文をスマートフォンアプリに読み上げています。彼女は、インドの Vernacular languages（地域言語）でテキスト、音声、画像データを収集することに専念するスタートアップであるKaryaによって雇われた70人の労働者の一人です。

Preethiとその同僚たちは、インド、ケニア、フィリピンなどの国々で活動する広範なグローバル労働力の一部であり、AIチャットボットやバーチャルアシスタントに不可欠なデータの収集とラベリングを担当しています。他の多くのデータ契約業者とは異なり、Karyaは労働者に、特に現地の基準では generously（手厚く）支払います。Karyaで3日間の作業を終えた後、Preethiは4,500ルピー（54ドル）を稼ぎ、仕立て屋としての月収の4倍以上となりました。この収入により、彼女は家の修理ローンの分割払いを返済し、家族に安らいでもたらしました。Karyaのモデルは、テクノロジーが農村コミュニティをどのように浮上させるかを示しています。

2021年に設立されたKaryaの台頭は、ChatGPTのような生成AI技術の急増と重なり、テック企業のデータへの渇望を激化させました。Nasscomによると、インドでは2030年までにほぼ100万人のデータ注釈労働者が存在すると予想されています。Karyaは、主に女性で農村部の労働力に、 prevailing minimum wage（現在の最低賃金）の最大20倍の賃金を提供することで際立っており、テック企業にとってより高品質なインド語のデータを確保しています。

テックジャイアントがKaryaに注目する理由：高品質なデータ

シリコンバレーの主要プレイヤーのいくつかは、AI製品のための高品質なデータソースの課題に対処するためにKaryaと協力し始めています。Microsoftは、例えば、Karyaを利用して現地の音声データを取得しました。ビル＆メリンダ・ゲイツ財団は、AIチャットボットにとって重要である大規模言語モデルにフィードされるデータにおける性別バイアスを軽減するためにKaryaとパートナーシップを組んでいます。AlphabetのGoogleも、85のインドの地区で音声データを収集するためにKaryaに依存しており、すべての地区と言語への拡大を計画しています。

多くのAIサービスは主に英語のデータを使用して開発されており、特にインドのような国々における非英語話者のユーザーの代表性が欠如していました。GoogleのManish Guptaは、何百万人もの人々が話す70以上のインド言語のデジタルコーパスがゼロであるという顕著な課題を指摘しています。このギャップにより、AIシステムは南アジアの言語の文法や語彙で苦労しています。Karyaの取り組みは、これらの格差を是正するために不可欠です。

多様で高品質なデータの重要性は過大評価されることはありません。不十分なデータで訓練された大規模言語モデルは、誤情報、有害なステレオタイプ、さらにはヘイトスピーチを生み出す可能性があります。トレーニングデータにおける代表性を確保することは重要であり、Karyaはこの点で重要な役割を果たしています。

Karyaの社会的インパクト

バンガロールに拠点を置く社会的インパクトスタートアップであるKaryaは、代表される言語のプールを拡大するだけでなく、それ以外では見逃されがちな農村部の労働者にも焦点を当てています。同社のアプリは、インターネットアクセスなしで動作するように設計されており、識字率が限られている人々のために音声サポートを提供しています。インドでは32,000人以上のクラウドソーシング労働者がアプリにログインし、画像認識、動画注釈、音声注釈を含む4,000万件の有償デジタルタスクを完了しました。

Karyaの創設者であるManu Chopraにとって、ミッションはデータを超えています。デリー西部で貧困の中で育った彼は、テクノロジーが貧困削減に与える影響を理解していました。Karyaのモデルは、労働者が公正な収入を得られるようにし、最終的に農村コミュニティの貧困撲滅に役立ちます。

インドでのKaryaの成功は、同社が国境を越えた機会を探ることをインスパイアしています。このスタートアップは、アフリカおよび南米の組織向けにプラットフォームをサービスとして提供するための協議を行っており、これらの組織は自らのコミュニティをエンパワーするためにこのモデルを再現することができます。

インドの農村部では、30,000人以上の教育を受けた女性が、AIデータセットにおける性別バイアスを軽減するプロジェクトでKaryaと積極的に活動しています。ビル＆メリンダ・ゲイツ財団の支援を受けるこのイニシアチブは、インド語における重要な取り組みであり、AIシステムにおける性別の公平性を促進するデータセットを構築するための基盤となります。

より明るい未来への道

Yelandurのような村では、女性たちが収入を得て子供たちを教育したいという願いから、Karyaのプロジェクトに熱心に参加しています。テクノロジーが進歩するにつれて、Karyaのようなイニシアチブはデータ業界を再形成するだけでなく、世界中の農村コミュニティにとってより明るい未来への扉を開いています。

Karyaのデータ収集への革新的なアプローチは、AIの風景を変革しつつ、貧困や性別バイアスといった重要な社会的課題に対処しています。テクノロジー企業が高品質なデータの価値をますます認識するにつれて、Karyaのモデルはテック業界における進歩と包摂性の指標となっています。