Partnerstvo Microsoftu OpenAI sa zrodilo zo závisti Google

Ukazuje sa, že vzhľad dnešného prostredia umelej inteligencie možno vysledovať späť k — čo vy viete — strachu, žiarlivosti a intenzívnym kapitalistickým ambíciám. E-maily odhalené v protimonopolnom prípade ministerstva spravodlivosti proti spoločnosti Google, o ktorom ako prvý informoval Business Insider, ukážte vedúcim predstaviteľom spoločnosti Microsoft, ktorí vyjadrujú znepokojenie a závisť nad vedúcim postavením spoločnosti Google v oblasti AI. To podnietilo naliehavú situáciu, ktorá viedla k počiatočnej miliardovej investícii výrobcu Windows do jeho teraz už nepostrádateľného partnera OpenAI.

V silne zredigovanom e-mailovom vlákne z roku 2019 s názvom „Myšlienky na OpenAI“, generálny riaditeľ spoločnosti Microsoft Satya Nadella preposiela dlhú správu od CTO Kevina Scotta finančnej riaditeľke Amy Hoodovej. “Veľmi dobrý e-mail, ktorý vysvetľuje, prečo chcem, aby sme to urobili… a tiež prečo potom zabezpečíme vykonanie našich infra ľudí,” napísal Nadella.

Scott napísal, že bol „veľmi, veľmi znepokojený“ rýchlo rastúcimi schopnosťami AI spoločnosti Google. Hovorí, že pôvodne odmietol „kakadérske kúsky“ spoločnosti, pravdepodobne s odkazom na modely AlphaGo od Google. Jeden z nich porazil v roku 2017 majstra sveta Go Ke Jie, čo bol na tú dobu pozoruhodný výkon. (Neskoršie modely spoločnosti Google tento model prekonali a úplne upustili od potreby ľudského školenia.)

Scott však hovorí, že oprášiť pokrok spoločnosti Google v hraní hier „bola chyba“. „Keď vzali všetku infraštruktúru, ktorú vybudovali, aby vytvorili modely (prirodzeného jazyka), ktoré sme nemohli ľahko replikovať, začal som brať veci vážnejšie,“ napísal Scott. “A keď som sa snažil pochopiť, kde sú všetky medzery v schopnostiach medzi spoločnosťou Google a nami v oblasti školenia modelov, veľmi, veľmi som sa znepokojil.”

Scott rozpráva, ako sa Microsoft snažil skopírovať Google BERT-large, model AI, ktorý dešifruje význam a kontext slov vo vete. Scott pripísal vinu na infraštruktúrne skoky, ktoré urobil jeho konkurent – ​​a Microsoft nie.

„Ukázalo sa, že len replikácia BERT-large pre nás nebola jednoduchá. Aj keď sme mali šablónu pre model, trvalo nám približne 6 mesiacov, kým sme model vyškolili, pretože naša infraštruktúra túto úlohu nezodpovedala,“ napísal technický riaditeľ spoločnosti Microsoft. „Spoločnosť Google mala BERT najmenej šesť mesiacov predtým, takže v čase, keď nám trvalo hacknúť schopnosť trénovať model s parametrami 340 miliónov, mali rok na to, aby prišli na to, ako ho dostať do výroby a pohnúť sa ďalej. vo väčšom meradle, zaujímavejšie modely.“

Tiež obdivoval a závidel možnosti automatického dopĺňania Gmailu od Googlu, pričom povedal, že je „desivo dobré“. Poznamenal, že Microsoft zaostával „niekoľko rokov za konkurenciou, pokiaľ ide o rozsah (strojového učenia). Vyjadril sa k „zaujímavému“ rastu OpenAI, DeepMind a Google Brain.

Scott chválil „veľmi šikovných“ ľudí z Microsoftu v jeho tímoch strojového učenia, ale povedal, že ich ambície sú obmedzené. „Ale hlavné tímy hlbokého učenia v rámci každého z týchto väčších tímov sú veľmi malé a ich ambície boli tiež obmedzené, čo znamená, že aj keď ich začneme zásobovať zdrojmi, stále musia prejsť procesom učenia, aby sa zväčšili. “ napísal Scott. “A v rozsahu ML sme za konkurenciou niekoľko rokov.”

Po vyzvaní Hooda, že Scottove obavy boli „prečo chcem, aby sme to urobili“, čo znamená investovať do OpenAI, spoločnosť splnila želania svojho generálneho riaditeľa. Microsoft investoval v roku 2019 miliardu dolárov do startupu pod vedením Sama Altmana a zvyšok je rýchlo sa meniacou históriou. (Teraz sa do nej investovalo 13 miliárd dolárov.) Je to technológia, ktorá robí neuveriteľné veci, no hrozí, že vykuchá pracovný trh a dá propagandistom svoje doteraz najsilnejšie nástroje v dobe, ktorá už bola vekom rozšírených dezinformácií.