Microsoft OpenAI パートナーシップは Google の羨望から生まれました

今日の AI の状況は、恐怖、嫉妬、そして資本主義の激しい野心に遡ることができることが判明しました。 司法省による Google に対する独占禁止法訴訟で明らかになった電子メール、まず 言及された による 貿易に興味があるは、Microsoftの幹部らがGoogleの人工知能の進歩に対して苛立ちと羨望の気持ちを表明している様子を示している。 これが緊急性を呼び起こし、Windows メーカーは今や欠かせないパートナーである OpenAI に初期投資として 10 億ドルを投資することになりました。

大幅に編集された 2019 年の電子メール シリーズ「Thoughts on OpenAI」の中で、Microsoft CEO の Satya Nadella は、CTO の Kevin Scott から CFO Amy Hood に長い手紙を送っています。 ナデラ氏は、「なぜ私たちがこれを行う必要があるのか​​を説明した非常に優れた電子メールでした。また、インフラストラクチャスタッフにこれを確実に実行させる理由も説明しました」と書いています。

スコット氏は、グーグルの急速に成長するAI能力について「深く懸念している」と書いた。 同氏は当初、同社の「エキサイティングなゲームプレイゲーム」を拒否したと語ったが、これはおそらくGoogleのAlphaGoモデルを参考にしたものと思われる。 そのうちの1人は2017年に世界チャンピオンの呉柯潔を破ったが、これは当時としては印象的な偉業だった。 (後の Google モデルはこのモデルを超え、人間によるトレーニングの必要性を完全に排除しました。)

しかしスコット氏は、ゲームにおけるGoogleの進歩を無視したのは「間違いだった」と語る。 「彼らが構築したインフラをすべて引き継いだとき、 [natural language] 「私たちが簡単に再現できなかったモデルが、物事をより真剣に受け止め始めました」とスコット氏は書いています。 「モジュール式トレーニングに関して、Google と私たちの能力のギャップがどこにあるのかを理解しようとさらに深く掘り下げていくうちに、非常に懸念を感じました。」

スコット氏は、MicrosoftがGoogleの大きなBERTモデル（文中の単語の意味と文脈を解読するAIモデル）をコピーするのにどのように苦労したかを語ります。 Scott 氏は、Microsoft はそうではなかったが、競合他社が行ったインフラストラクチャの飛躍を非難した。

「大規模な BERT モデルを単純に複製することは、私たちにとって簡単ではないことがわかりました。「モデルを用意したにもかかわらず、インフラストラクチャがそのタスクに対応できなかったため、モデルのトレーニングに約 6 か月かかりました。」と Microsoft の CTO は述べています。 「Google はこれより少なくとも 6 か月前から BERT を導入していたため、3 億 4,000 万のパラメータ モデルをトレーニングする機能を共同でハックするのに 1 年かかり、それを本番環境に導入して前進させる方法を見つけるのに 1 年かかりました。より幅広く、より興味深いモデルへ。

同氏はまた、GoogleのGmailオートコンプリート機能が「恐ろしく良くなった」と称賛と羨望の念を表明した。 同氏は、マイクロソフトは「競争という点で数年遅れている」とコメントした。 [machine learning] 同氏は、OpenAI、DeepMind、Google Brain の「興味深い」成長についてコメントしました。

スコット氏はマイクロソフトの機械学習チームの「非常に賢い」人材を称賛したが、彼らの野心は抑制されたと述べた。 「しかし、これらの大規模なチームのそれぞれの中核となる深層学習チームは非常に小さく、彼らの野心も制約されています。つまり、私たちが彼らにリソースを供給し始めたとしても、彼らは依然として作業を拡大するための学習プロセスを経る必要があります。」スコットは書いた。 「そして、機械学習の規模という点では、私たちは競合他社に数年遅れをとっています。」

フッド氏がスコット氏の懸念は「なぜ私たちがこれを行う必要があるのか​​」、つまりOpenAIへの投資であると主張した後、同社はCEOの願いを実行した。 マイクロソフトは 2019 年にサム アルトマン氏率いるスタートアップに 10 億ドルを投資しましたが、残りは急速に変化しています。 (現在 130 億ドルを投資しています。) これは信じられないほどのことを行うテクノロジーですが、雇用市場を破壊する恐れがあり、すでに誤った情報が蔓延していた時代において、説教者にこれまでで最も強力なツールを提供します。