生成AIで大手IT企業に挑むヨーロッパの秘密兵器

生成AIは現在、テクノロジー業界で最も注目を集めており、Microsoft、Google、Amazon、Metaといった大手企業が大規模言語モデル（LLM）で市場を席巻しています。これらのLLMは、テクノロジーにおける次なる大きなブレークスルーとして広く認識されています。しかし、ヨーロッパには、特に英語以外の言語において、大手テクノロジー企業の覇権に挑戦しようとする一筋の希望の光が見えています。.

コンピューティングとデータのジレンマ

AI分野におけるビッグテックの優位性は、膨大な計算能力だけでなく、インターネットから収集される広範な言語データへのアクセスによっても支えられています。ヨーロッパの企業がビッグテックを上回る英語の法学修士課程を構築するのは容易ではありませんが、フィンランドのAI企業Siloは、Poro（フィンランド語でトナカイ）と呼ばれる多言語モデルで有望な成果を発表しました。.

Poroはフィンランド語と英語の両方のテキストで学習されており、異なる言語を融合することで高性能なLLMを作成できることの証拠となっています。Siloは、初期の結果がMetaのオープンソースLlamaモデルとの競争力を示していると主張しています。Siloとトゥルク大学の共同研究は、EUが資金提供している高性能言語技術（HPLT）プロジェクトから得られた膨大なデータを活用しており、2022年以降、80の言語にわたって7ペタバイト（7,000テラバイト）もの膨大な言語データを収集しています。これを比較すると、ChatGPTのリリースバージョンを駆動したGPT-3.5は、45テラバイトのテキストデータで学習されました。.

HPLT の場合のように、公的資金で賄われた高品質のテキスト データにアクセスできれば、オンライン データの入手が限られている言語では、Silo のようなモデルが優位に立つ可能性があります。.

多言語アプローチ

フィンランド語などの言語のデータが不足しているため、Siloは英語とフィンランド語の両方のデータを用いてモデルを「クロストレーニング」する多言語戦略を採用しました。このアプローチでは、モデルに両方の言語のテキストを入力し、2つの言語が互いにどのように関連しているかを学習します。その結果、モデルはこれまでフィンランド語のコードに遭遇したことがなくても、フィンランド語で応答を生成できるようになります。.

Siloの共同創業者兼CEOであるピーター・サーリン氏は、「モデルがフィンランド語のコードを全く学習していないにもかかわらず、フィンランド語のコードを生成できるのです」と説明する。Siloはクロストレーニング技術をオープンソース化する予定で、利用可能なデータが限られている言語も含め、あらゆるヨーロッパ言語でモデルを開発する道を開く可能性がある。.

技術主権の追求

サーリン氏は、英語以外の言語で法学修士号（LLM）を取得する市場には大きなチャンスがあると指摘しています。彼は、欧州企業が米国の大手企業が保有する技術だけに頼らないことの重要性を強調しています。大手テックのAIモデルを基盤とすると、欧州に留まる価値創造がほとんど得られない可能性があります。そのため、欧州が自らの技術主権を主張する必要性が高まっています。.

LUMIのスーパーコンピューティングパワー

ポロ氏の訓練は、2022年に稼働を開始したEU資金によるスーパーコンピュータ「LUMI」の恩恵も受けました。注目すべきは、LUMIが業界標準のNVIDIAチップではなく、AMDチップを使用していることです。AMDチップはAIには高価で非効率だと考える人もいますが、シロ氏のチームはAMDチップに最適化されたAI訓練ソフトウェアの開発に多大なリソースを投入しました。.

サーリン氏は、このソフトウェアの大部分をオープンソース化する計画であり、LUMI上でのモデル学習において他の企業を支援することに尽力していると述べています。欧州企業がLUMIのようなリソースをAI学習に活用できれば、AI時代における欧州の地位向上に向けた大きな変革をもたらす可能性があります。.

AIにおけるヨーロッパのルネサンス

大手テック企業がシリコンバレーでAIの力を見せつけ続ける中、ヨーロッパは静かに独自のAI兵器庫を築き上げている。ヨーロッパ大陸の強みは、多言語アプローチ、公的資金による言語データの活用、そしてLUMIのような代替コンピューティングの選択肢の探求にある。今後の道のりは困難かもしれないが、世界のAIの舞台で競争しようとするヨーロッパの決意はdentだ。.

生成型AIにおける巨大テック企業の支配に対抗するヨーロッパの秘密兵器は、多様性、協働、そして技術主権へのコミットメントに根ざしています。SiloのPoroモデルは、ヨーロッパが何を達成できるかを示す証であり、ヨーロッパはAIの世界に足跡を残すための大きなチャンスを手にしているかもしれません。.