Microsoft AI Frontiers: Langfordov popis reorganizácie a zdieľané výskumné kanály

Čo toto video pokrýva

• Langford hovorí, že presun do Microsoft AI začiatkom septembra bol v rozpore s jeho výskumnými prioritami a on odišiel.
• Asi päťdesiat bol jeho odhad veľkosti skupiny; článok spomína ľudí, ktorí zostali, a neuvádza žiadny počet prepustených.
• Jeho skupina zdieľala monorepo v rámci Microsoft Research; hlási minimálne štyri snahy o trénovacie kanály, pričom ostatné tri externé úložiská boli zdieľané v rámci MSR.
• Full-bandwidth transformátor prenáša predchádzajúci skrytý stav spolu so vzorkovaným tokenom do ďalšieho vstupu; celkové úspory nákladov tu zostávajú nepreukázané.
• Archivovaný README súbor AutoGenu odporúča Microsoft Agent Framework; varovanie o archivácii predchádza blogu a má samostatnú chronológiu.

Preložený prepis

Preložené z pôvodného anglického rozprávania. Dostupný zvuk a titulky sú kontrolované službou YouTube.

Prečo sa Microsoft AI Frontiers rozpadol?

0:00 Laboratórium AI výskumu v rámci Microsoftu by malo mať budúcnosť. Jeho spoluzakladateľ hovorí, že AI Frontiers je minulosťou a on odišiel. V tomto videu, prečo odišiel? A čo s tým majú spoločné štyri trénovacie kanály? Tu je skorá odpoveď. John Langford hovorí, že presun do Microsoft AI v septembri spôsobil, že jeho výskum bol nekompatibilný s novými prioritami. Odišiel. Jeho popis týchto štyroch kanálov vysvetľuje, prečo aj umiestnenie všetkých

0:22 pod jedného šéfa môže stále minúť problém. Je nedeľa, ôsmy november, a toto je The Daily Diff. AI Frontiers bola výskumná skupina v rámci Microsoft Research, vytvorená po príchode ChatGPT. Langford odhaduje jej veľkosť na približne päťdesiat ľudí. Pracovala na agentoch a nových technikách modelovania. Microsoft AI je samostatná organizácia, do ktorej bola presunutá, podľa jeho opisu.

0:42 Jeho príspevok zo šiesteho novembra znie ako

Prečo organizovať výskumnú skupinu po ChatGPT?

0:44 výskumník vysvetľujúci, prečo nakoniec odišiel. Hovorí, že sa snažil umiestniť svojich ľudí čo najlepšie pred odchodom, a želá ľuďom, ktorí zostali, všetko dobré. Toto formulovanie je dôležité. Máme jeho popis odchodu, pričom kolegovia sú stále tam. Už v roku 2023 sa sťažoval na rýchlosť. Samostatný výskumník mohol prísť neskoro so slabými porovnaniami. Skupina spojila úsilie pre silnejšie experimenty.

1:06 Aj váš prelom potrebuje základ, ktorý si môže dovoliť elektrinu. Niektorá práca sa dostala k vývojárom. Langford menuje AutoGen, rámec pre koordináciu agentov. Existujú aj verejné výskumné práce o modeloch, kde je medzi autormi. Táto skupina vydala prácu, ktorú obhajovala popri svojom poslaní. Potom príde reorganizácia.

Čo sa zmenilo, keď sa AI Frontiers presunul do Microsoft AI?

1:23 Langford hovorí, že AI Frontiers sa presunul do Microsoft AI začiatkom septembra. Mustafa Suleyman, predtým z Inflection, vedie túto organizáciu. Langford opisuje konflikt s bývalým vedením Inflection. Toto je jeho opis presunu. Langford to nazýva prostredím len pre škálovanie a hovorí, že výskum bol nežiaduci. To je jeho charakteristika. Poskytuje aj obchodný argument.

1:43 Škálovanie ponúka predvídateľnejšie zisky ako neistý výskum. Finančné oddelenie môže predvídateľnosť vložiť do tabuľky. Hovorí, že tento prístup sa zameriava na získavanie a rafinovanie údajov. Jeho záujmom boli nové schopnosti a lepšie techniky modelovania. Nezhoda bola v tom, ktoré experimenty si zaslúžia zdroje, a ktoré výsledky dostanú šancu stať sa užitočnými. Pred rokom, Suleymanovo oznámenie o superinteligencii

Hovorí Microsoft, že výskum je u konca?

2:05 uviedlo, že chcel najlepšie miesto na svete na výskum a budovanie AI. Langfordov nový príspevok opisuje jeho skúsenosti po reorganizácii. Tá staršia ambícia neustanovuje, čo sa stalo v tejto skupine. Vezmite si prácu Full Bandwidth Transformer. Model produkuje token pri každom kroku dekódovania. Tento návrh tiež vkladá skrytý stav predchádzajúcej hornej vrstvy do ďalšieho vstupu. Interné informácie cestujú spolu so slovom, ktoré model vytlačil.

2:28 Autori uvádzajú zlepšenia v testovaných modeloch. Langford sa pýta, akú hodnotu by mohlo mať polovičné zníženie nákladov. Táto úspora tu zostáva nepreukázaná. Parametre, trénovacia práca a náklady na obsluhu potrebujú samostatné merania predtým, než ktokoľvek zruší polovicu svojej objednávky GPU.

Prečo sa Langford nevrátil do Microsoft Research?

2:42 Dôvod, ktorý uvádza pre odchod, je bezprostrednejší. Hovorí, že nedokázal dostať inovácie do užívania, alebo ich dokonca vážne zvážiť, v rámci Microsoft AI. A návrat do Microsoft Research sa cítil ako čelenie rovnakej zablokovanej ceste. Lepší experiment je ťažké oceniť, keď jeho ďalšou destináciou je ďalšia interná prezentácia. Hovorí tiež, že základná dohoda sa rozpadla. Rob dobrú prácu a dobré veci sa stanú. Z jeho pohľadu bola odmenou nechcený presun.

3:06 Píše, že každý iný zakladajúci člen vedenia dospel k podobnému záveru. To "zdá sa" tu vykonáva prácu. Nedáva nám overený zoznam odchodov. Používatelia AutoGen majú konkrétne varovanie o údržbe. Aktuálny readme súbor AutoGenu hovorí, že projekt je archivovaný. Microsoft hovorí, že tam neposkytuje žiadne opravy chýb, bezpečnostné opravy ani podporu. Odporúča existujúcim používateľom Microsoft Agent Framework a migračnú príručku. Skontrolujte to skôr, ako starý tutoriál nasadíte do produkcie.

3:31 Toto varovanie už bolo v úložisku pred týmto príspevkom.

Čo by mal používateľ AutoGenu skontrolovať teraz?

3:34 Nepreukazuje, že tento odchod spôsobil archiváciu. A verejné úložisko nástupníckeho rámca je stále tam, ponúka orchestráciu agentov pre produkciu. Skutočná situácia zahŕňa výskumné práce, archivovaný nástroj a Microsoftom odporúčaného nástupcu. Každý má svoj vlastný životný cyklus. Skontrolujte každý životný cyklus samostatne. Je kód udržiavaný? Kde je migračná cesta?

3:53 Môžete vyhodnotiť výskum? Slávne meno spoločnosti vám tieto otázky nezodpovie.

Čo boli tie štyri snahy o kanály?

3:58 Čo nás privádza späť k inštalácii. Langford hovorí, že AI Frontiers udržiaval monorepo zdieľané v predvolenom nastavení v rámci Microsoft Research. Zahŕňalo to kanál pre pretrénovanie modelu. To je dôležité, pretože mechanizmus pre vykonávanie presvedčivých experimentov si vyžaduje podstatnú prácu, skôr než príde na rad chytrá výskumná myšlienka. Vie o minimálne štyroch snahách o budovanie modelových kanálov. Ďalšie tri, hovorí, neboli v úložiskách zdieľaných v rámci Microsoft Research. Jeho tím bol zdieľaný v predvolenom nastavení.

4:23 Firemná efektivita dosiahla štádium, kde má každý svoju vlastnú spoločnú kuchyňu. To je zlyhanie, ktoré odhaľuje jeho popis. Výskumníci potrebujú opakovane použiteľnú infraštruktúru a cestu k reálnym produktom. Langford hovorí, že jeho skupina vybudovala zdieľanú infraštruktúru a stratil dôveru v cestu k produktu. Reorganizácia zmenila, kto vlastnil jeho skupinu. Napriek tomu odišiel. Ak si to radšej prečítate, ako by ste ma počuli hovoriť, diff vám príde do schránky

4:44 každé ráno, zadarmo na the daily diff dot dev, odkaz nižšie.

Čo si zaslúži verdikt POTREBNÁ KONTROLA?

4:47 Takže dnešný verdikt, POTREBNÁ KONTROLA. Chcel by som cestu z výskumu do produktu a plán údržby predtým, ako by som túto konsolidáciu nazval úspechom. Langfordov popis mi dáva dôvody spochybňovať obe. Prihláste sa na odber, stlačte zvonček a povedzte mi v komentároch, či by ste to oznámkovali inak. A to je pre dnešok všetko. Som Niko z Axrisi. Zlučujte zodpovedne.

Zdroje

1. The End of AI Frontiers — former founder's account and internal-sharing scopeJohn Langford / Machine Learning (Theory)
2. AutoGen README — archived project and successor recommendationMicrosoft / GitHub
3. Microsoft Agent Framework — public successor repositoryMicrosoft / GitHub
4. Full-bandwidth transformer — author-reported design and results, v2Xi Wang and colleagues / arXiv
5. Towards Humanist Superintelligence — November 6, 2025 ambition, no current replyMustafa Suleyman / Microsoft AI
6. Mustafa Suleyman — Microsoft AI identity and biographyMustafa Suleyman
7. Authentic Mustafa portrait — cropped, background removed, resized and unflipped; corporate identity only, no authorship, closure order, current reaction or endorsementVillage Global / Wikimedia Commons
8. Original Village Global Grove photo — November 17, 2022Village Global / Flickr
9. Portrait licence — CC BY 2.0; attribution and adaptation disclosureCreative Commons
10. Spider-Man pointing template — resized with process-commentary caption; brief transformed satire, no identical-code evidence or actual executive reaction; hosting grants no licence, legal clearance or blanket reuseImgflip / Spider-Man cartoon
11. Fantasia broom GIF — Disney/@disney uploader with Disney Tumblr provenance; silent resized short excerpt with narrator-commentary caption, broom brought to life without multiplication claim; no actual executive reaction, hosting licence, legal-clearance or blanket-reuse claimDisney / GIPHY
12. Original Disney GIF source linkDisney / Tumblr
13. Hacker News discussion — attention context, no anonymous claims used as factsHacker News
14. AutoGen README archive clarification — October 16, before Langford's postMicrosoft / GitHub
15. Full-bandwidth transformer paper v2 licence — CC BY 4.0; exact excerpt reformatted, accompanying model diagram conceptualXi Wang and colleagues / Creative Commons