Microsoft AI Frontiers: Langfords Reorganisation und gemeinsame Forschungspipelines

Was dieses Video behandelt

• Langford sagt, dass ein Umzug in Microsoft AI Anfang September im Konflikt mit seinen Forschungsprioritäten stand und er ging.
• Etwa fünfzig war seine Schätzung der Gruppengröße; der Artikel erwähnt zurückgebliebene Personen und liefert keine Entlassungszahlen.
• Seine Gruppe teilte ein Monorepo innerhalb von Microsoft Research; er berichtet von mindestens vier Trainings-Pipeline-Projekten, wobei die anderen drei außerhalb von MSR geteilte Repositories waren.
• Der Full-bandwidth Transformer überträgt einen früheren versteckten Zustand zusammen mit dem abgetasteten Token in den nächsten Input; die gesamten Kosteneinsparungen sind hier noch nicht nachgewiesen.
• Das archivierte README von AutoGen empfiehlt Microsoft Agent Framework; die Archivwarnung datiert vor dem Blog und hat eine separate Chronologie.

Übersetztes Transkript

Aus der englischen Originalerzählung übersetzt. Verfügbare Audio- und Untertitel werden von YouTube gesteuert.

Warum zerfiel Microsofts AI Frontiers?

0:00 Ein KI-Forschungslabor innerhalb von Microsoft sollte eine Zukunft haben. Sein Mitbegründer sagt, AI Frontiers sei vorbei, und er ist gegangen. In diesem Video, warum ist er gegangen? Und was haben vier Trainings-Pipelines damit zu tun? Hier ist die erste Antwort. John Langford sagt, ein Umzug in Microsoft AI im September machte seine Forschung inkompatibel mit den neuen Prioritäten. Er ging. Sein Bericht über diese vier Pipelines erklärt, warum es immer noch das Problem verfehlen kann,

0:22 wenn man alle unter einen Chef stellt. Es ist Sonntag, der achte November, und dies ist The Daily Diff. AI Frontiers war eine Forschungsgruppe innerhalb von Microsoft Research, die nach der Ankunft von ChatGPT gegründet wurde. Langford schätzt ihre Größe auf etwa fünfzig Personen. Sie arbeitete an Agenten und neuen Modelltechniken. Microsoft AI ist die separate Organisation, in die sie verlegt wurde, laut seinem Bericht.

0:42 Sein Beitrag vom sechsten November liest sich wie

Warum eine Forschungsgruppe nach ChatGPT organisieren?

0:44 ein Forscher, der erklärt, warum er endlich gegangen ist. Er sagt, er habe versucht, seine Leute so gut wie möglich unterzubringen, bevor er ging, und wünscht den zurückgebliebenen Menschen alles Gute. Diese Formulierung ist wichtig. Wir haben seinen Austrittsbericht, mit Kollegen, die noch dort sind. Im Jahr 2023 war seine Beschwerde die Geschwindigkeit. Ein einzelner Forscher könnte spät mit schwachen Vergleichen kommen. Die Gruppe bündelte Anstrengungen für stärkere Experimente.

1:06 Selbst dein Durchbruch braucht eine Basislinie, die den Strom leisten kann. Einige Arbeiten erreichten Entwickler. Langford nennt AutoGen, das Framework zur Koordination von Agenten. Es gibt auch öffentliche Modellforschungsarbeiten, bei denen er zu den Autoren gehört. Diese Gruppe hatte Arbeit veröffentlicht, die sie neben ihrer Missionserklärung verteidigen konnte. Dann kommt die Reorganisation.

Was änderte sich, als AI Frontiers zu Microsoft AI wechselte?

1:23 Langford sagt, AI Frontiers sei Anfang September zu Microsoft AI gewechselt. Mustafa Suleyman, ehemals von Inflection, leitet diese Organisation. Langford beschreibt einen Konflikt mit der ehemaligen Inflection-Führung. Dies ist sein Bericht über den Umzug. Langford nennt es eine reine Skalierungsumgebung und sagt, Forschung sei unerwünscht gewesen. Das ist seine Charakterisierung. Er liefert auch das Geschäftsargument.

1:43 Skalierung bietet vorhersehbarere Renditen als unsichere Forschung. Eine Finanzabteilung kann Vorhersagbares in eine Tabelle eintragen. Er sagt, dieser Ansatz konzentriere sich auf den Erwerb und die Verfeinerung von Daten. Seine Interessen waren neue Fähigkeiten und bessere Modelltechniken. Die Meinungsverschiedenheit betraf, welche Experimente Ressourcen verdienten, und welche Ergebnisse eine Chance erhalten würden, nützlich zu werden. Ein Jahr zuvor besagte Suleymans Superintelligenz-Ankündigung,

Sagt Microsoft, dass die Forschung beendet ist?

2:05 er wolle den weltweit besten Ort zur Erforschung und Entwicklung von KI. Langfords neuer Beitrag beschreibt seine Erfahrungen nach der Reorganisation. Dieses ältere Ziel legt nicht fest, was in dieser Gruppe geschah. Nehmen Sie die Arbeit zum Full Bandwidth Transformer. Ein Modell erzeugt bei jedem Dekodierungsschritt ein Token. Dieses Design speist auch den versteckten Zustand der vorherigen obersten Schicht in den nächsten Input ein. Interne Informationen reisen zusammen mit dem vom Modell gedruckten Wort.

2:28 Die Autoren berichten von Verbesserungen in getesteten Modellen. Langford fragt, was eine Halbierung der Kosten wert sein könnte. Diese Einsparung bleibt hier nicht nachgewiesen. Parameter, Trainingsaufwand und Bereitstellungskosten müssen separat gemessen werden, bevor jemand die Hälfte seiner GPU-Bestellung storniert.

Warum kehrte Langford nicht zu Microsoft Research zurück?

2:42 Der Grund, den er für seinen Weggang angibt, ist unmittelbarer. Er sagt, er konnte Innovationen innerhalb von Microsoft AI nicht zur Anwendung bringen oder auch nur ernsthaft in Betracht ziehen. innerhalb von Microsoft AI. Und eine Rückkehr zu Microsoft Research fühlte sich an, als würde man demselben blockierten Weg gegenüberstehen. Ein besseres Experiment ist schwer zu interessieren, wenn sein nächstes Ziel eine weitere interne Präsentation ist. Er sagt auch, dass der grundlegende Deal zerbrochen war. Mach gute Arbeit, und es werden gute Dinge passieren. Aus seiner Sicht war die Belohnung eine unerwünschte Versetzung.

3:06 Er schreibt, dass jedes andere Gründungsmitglied der Führung zu einem ähnlichen Schluss gekommen zu sein scheint. Dieses "scheint" ist eine wichtige Formulierung. Er gibt uns keine verifizierte Liste der Abgänge. AutoGen-Benutzer erhalten eine konkrete Wartungswarnung. Das aktuelle Readme von AutoGen besagt, dass das Projekt archiviert ist. Microsoft sagt, dass es dort keine Fehlerbehebungen, Sicherheitsupdates oder Support bereitstellt. Es verweist bestehende Benutzer auf das Microsoft Agent Framework und eine Migrationsanleitung. Überprüfen Sie dies, bevor Sie ein altes Tutorial in Produktion nehmen.

3:31 Diese Warnung war bereits vor diesem Beitrag im Repository.

Was sollte ein AutoGen-Benutzer jetzt überprüfen?

3:34 Sie beweist nicht, dass dieser Weggang die Archivierung verursacht hat. Und das öffentliche Repository des Nachfolger-Frameworks ist immer noch da, und bietet Agentenorchestrierung für die Produktion. Die tatsächliche Situation umfasst Forschungsarbeiten, ein archiviertes Tool und Microsofts empfohlenen Nachfolger. Jeder hat seinen eigenen Lebenszyklus. Überprüfen Sie jeden Lebenszyklus separat. Wird der Code gepflegt? Wo ist der Migrationspfad?

3:53 Können Sie die Forschung bewerten? Ein berühmter Firmenname wird diese Fragen nicht für Sie beantworten.

Was waren diese vier Pipeline-Projekte?

3:58 Was uns zurück zur Infrastruktur bringt. Langford sagt, AI Frontiers habe ein Monorepo beibehalten, das standardmäßig in Microsoft Research geteilt wurde. Es enthielt eine Modellvorbereitungs-Pipeline. Das ist wichtig, denn die Maschinerie für die Durchführung überzeugender Experimente erfordert erhebliche Arbeit, bevor die clevere Forschungsidee zum Zug kommt. Er kennt mindestens vier Projekte, die Modell-Pipelines entwickeln. Die anderen drei, so sagt er, waren nicht in Repositories, die innerhalb von Microsoft Research geteilt wurden. Sein Team wurde standardmäßig geteilt.

4:23 Die Unternehmenseffizienz hat das Stadium erreicht, in dem jeder seine eigene Gemeinschaftsküche hat. Das ist das Scheitern, das sein Bericht aufzeigt. Forscher benötigen wiederverwendbare Infrastruktur und einen Weg zu realen Produkten. Langford sagt, seine Gruppe habe die gemeinsame Infrastruktur aufgebaut und er habe das Vertrauen in den Produktweg verloren. Die Reorganisation änderte, wem seine Gruppe gehörte. Er ist trotzdem gegangen. Wenn Sie dies lieber lesen als mich sprechen zu hören, landet der Diff jeden Morgen kostenlos in Ihrem Posteingang

4:44 auf the daily diff dot dev, Link unten.

Was verdient ein NEEDS REVIEW-Urteil?

4:47 Also das heutige Urteil, NEEDS REVIEW. Ich würde einen Forschungs-zu-Produkt-Pfad und einen Wartungsplan verlangen, bevor ich diese Konsolidierung als Erfolg bezeichnen würde. Langfords Bericht gibt mir Gründe, beides in Frage zu stellen. Abonnieren Sie, drücken Sie die Glocke und sagen Sie mir in den Kommentaren, ob Sie es anders bewertet hätten. Und das ist der Diff für heute. Ich bin Niko von Axrisi. Verantwortungsvoll zusammenführen.

Quellen

1. The End of AI Frontiers — former founder's account and internal-sharing scopeJohn Langford / Machine Learning (Theory)
2. AutoGen README — archived project and successor recommendationMicrosoft / GitHub
3. Microsoft Agent Framework — public successor repositoryMicrosoft / GitHub
4. Full-bandwidth transformer — author-reported design and results, v2Xi Wang and colleagues / arXiv
5. Towards Humanist Superintelligence — November 6, 2025 ambition, no current replyMustafa Suleyman / Microsoft AI
6. Mustafa Suleyman — Microsoft AI identity and biographyMustafa Suleyman
7. Authentic Mustafa portrait — cropped, background removed, resized and unflipped; corporate identity only, no authorship, closure order, current reaction or endorsementVillage Global / Wikimedia Commons
8. Original Village Global Grove photo — November 17, 2022Village Global / Flickr
9. Portrait licence — CC BY 2.0; attribution and adaptation disclosureCreative Commons
10. Spider-Man pointing template — resized with process-commentary caption; brief transformed satire, no identical-code evidence or actual executive reaction; hosting grants no licence, legal clearance or blanket reuseImgflip / Spider-Man cartoon
11. Fantasia broom GIF — Disney/@disney uploader with Disney Tumblr provenance; silent resized short excerpt with narrator-commentary caption, broom brought to life without multiplication claim; no actual executive reaction, hosting licence, legal-clearance or blanket-reuse claimDisney / GIPHY
12. Original Disney GIF source linkDisney / Tumblr
13. Hacker News discussion — attention context, no anonymous claims used as factsHacker News
14. AutoGen README archive clarification — October 16, before Langford's postMicrosoft / GitHub
15. Full-bandwidth transformer paper v2 licence — CC BY 4.0; exact excerpt reformatted, accompanying model diagram conceptualXi Wang and colleagues / Creative Commons