ChatGPTの登場以来、大規模モデルのオープンソース性とクローズドソース性は業界で大きな話題となっています。先日開催されたSIGGRAPH 2024カンファレンスでは、NVIDIA CEOのジェンスン・フアン氏とMeta CEOのマーク・ザッカーバーグ氏が、オープンソースモデルの変革の可能性について議論しました。

協力は進歩の鍵

Metaは7月23日（米国現地時間）、最新のオープンソース大規模モデルであるLlama 3.1を正式にリリースしました。Llama 3.1は、8B、70B、405Bの3つのパラメータバージョンを提供し、最大コンテキストサイズは128kに増加しました。評価結果によると、Llama 3.1は、GPT-4o、Claude 3.5、Sonnetといったトップのクローズドソース大規模モデルに匹敵、あるいは凌駕する性能を示しました。

ザッカーバーグ氏は、さらなる進歩の鍵はコラボレーションにあると考えている。ブログ投稿で、彼はLlama 3.1がオープンソースAIの導入における「転換点」となる可能性があると述べている。また、Metaがオープンソースに参入したのは比較的遅かったと説明した。Metaが分散コンピューティングインフラとデータセンターの構築を開始した頃には、既に他のテクノロジー企業が参入していたため、これがMetaにとって競争上の優位性にはならなかったという。

これを踏まえ、Metaはオープンソース化を決定し、その周囲に構築されたエコシステム、特にオープンコンピューティングの恩恵を受けることにしました。Metaは自社のサーバー、ネットワーク、データセンターの設計を公開し、それが業界標準となったことで、サプライチェーン全体が主にMetaの標準に従って運用されるようになりました。そのため、オープンソース化はMetaに数十億ドルのコスト削減をもたらしました。

オープンソースは計り知れない価値をもたらす

オープンソース戦略について議論する中で、ザッカーバーグ氏は、Metaの製品が競合他社のモバイルプラットフォームを通じてアプリケーションを配布するという現実に直面していることを強調した。スマートフォンOS間の競争において、Appleはクローズドなエコシステムで市場を支配し、ゲームのルールを支配している。Androidスマートフォンは数的優位に立っているものの、Appleは事実上市場全体と利益の大部分を掌握しており、Androidは追随する立場にとどまっている。しかし、PC時代を振り返ると、Microsoftは完全にオープンではなかったものの、様々なOEM、異なるソフトウェア、ハードウェア上で動作可能なWindowsシステムは、Appleと比較してよりオープンなエコシステムを構成し、世界をリードするエコシステムとなっていた。PC時代は、オープンなエコシステムが主流だった。

そのため、ザッカーバーグ氏は、次世代のコンピューティングではオープンエコシステムが復活し、主流となることを期待しています。「オープンソースモデルとクローズドソースモデルにはそれぞれ利点があります。私は特に熱心なオープンソース支持者ではありませんし、Metaの製品すべてがオープンソースというわけでもありません。しかし、オープンソースは業界全体が共同で構築するコンピューティングプラットフォームにとって非常に重要です。」ザッカーバーグ氏は、オープンソースが最終的に勝利すると確信しています。

ジェンセン・フアン氏も同意見で、オープンソースは偉大な理念であり、世界で最も優れた才能を持つ人々が最高のAIシステムの構築に尽力し、それを献身的に世界へのサービスとして提供していると信じています。同時に、オープンソースは個人や組織が独自のAIシステムを構築する力も与えます。「この革ジャンを自分で作らず、誰かが作った完成品を買うのと同じように、このサービスの価値は計り知れません」とフアン氏は語りました。

現実には、オープンソースソフトウェアの開発は一人の人間や一つの企業だけでは実現できません。包括的なエコシステムによるサポートが必要であり、本質的にオープン性とコラボレーションが不可欠です。ジェンセン・フアン氏はPyTorchエコシステムを例に挙げ、NVIDIAにはPyTorchの継続的な改善に尽力する何百人もの専門家がおり、より強力でスケーラブルかつ効率的なものへと進化させていると指摘しました。

結論は：

オープンソースの重要性は明白です。オープンソースを通じて、企業や開発者は研究成果を共有し、技術革新を加速させ、参入障壁を下げ、より多くの人々が大規模モデルの開発に参加できるようになります。今後、オープンソースは大規模モデルの分野においてさらに重要な役割を果たし続けると確信しています。