Microsoft AI Frontiers. Լենգֆորդի վերակազմավորման հաշվետվություն և ընդհանուր հետազոտական խողովակաշարեր

Ինչ է ընդգրկում այս տեսանյութը

• Լենգֆորդն ասում է, որ սեպտեմբերի սկզբին Microsoft AI տեղափոխվելը հակասում էր իր հետազոտական առաջնահերթություններին, և նա հեռացել է:
• Մոտ հիսուն էր խմբի չափի նրա գնահատականը. հոդվածում նշվում է մարդկանց, ովքեր մնացել են, և չի նշվում աշխատանքից ազատումների թիվը։
• Նրա խումբը կիսում էր մի մոնորեպո Microsoft Research-ի շրջանակներում. նա հայտնում է առնվազն չորս ուսուցման-խողովակաշարերի ջանքերի մասին, մյուս երեքը գտնվում էին MSR-ի մյուս պահեստներից դուրս։
• Ամբողջ թողունակությամբ տրանսֆորմատորը նախկին թաքնված վիճակը կրում է նմուշառված թոքենի հետ միասին հաջորդ մուտքի մեջ. ընդհանուր ծախսերի խնայողությունները դեռ հաստատված չեն այստեղ։
• AutoGen-ի արխիվացված README-ն խորհուրդ է տալիս Microsoft Agent Framework-ը. արխիվացման նախազգուշացումը նախորդում է բլոգին և ունի առանձին ժամանակագրություն։

Թարգմանված արձանագրություն

Թարգմանվել է բնօրինակ անգլերեն պատմությունից։ Հասանելի աուդիո և ենթագրերը վերահսկվում են YouTube-ի կողմից։

Ինչու՞ քանդվեց Microsoft-ի AI Frontiers-ը։

0:00 Microsoft-ի ներսում AI հետազոտական լաբորատորիան պետք է ապագա ունենար։ Նրա համահիմնադիրն ասում է, որ AI Frontiers-ն ավարտված է, և նա հեռացել է։ Այս տեսանյութում՝ ինչու՞ նա հեռացավ: Եվ ի՞նչ կապ ունեն չորս ուսուցման խողովակաշարերը դրա հետ։ Ահա վաղ պատասխանը։ Ջոն Լենգֆորդն ասում է, որ սեպտեմբերին Microsoft AI տեղափոխվելը իր հետազոտությունը դարձրեց անհամատեղելի նոր առաջնահերթությունների հետ։ Նա հեռացավ։ Այդ չորս խողովակաշարերի մասին նրա հաշվետվությունը բացատրում է, թե ինչու բոլորին

0:22 մեկ շեֆի տակ դնելը դեռ կարող է բաց թողնել խնդիրը։ Կիրակի է, նոյեմբերի ութը, և սա The Daily Diff-ն է։ AI Frontiers-ը հետազոտական խումբ էր Microsoft Research-ի ներսում, ձևավորվել է ChatGPT-ի հայտնվելուց հետո։ Լենգֆորդը նրա չափը գնահատում է մոտ հիսուն հոգի։ Այն աշխատում էր գործակալների և մոդելային նոր տեխնիկաների վրա։ Microsoft AI-ն առանձին կազմակերպությունն է, որտեղ այն տեղափոխվեց, նրա հաշվետվության համաձայն։

0:42 Նրա նոյեմբերի վեցին կատարված գրառումը նման է

Ինչու՞ կազմակերպել հետազոտական խումբ ChatGPT-ից հետո։

0:44 հետազոտողի, ով բացատրում է, թե ինչու վերջապես հեռացավ։ Նա ասում է, որ փորձել է իր մարդկանց հնարավորինս լավ տեղավորել մինչ հեռանալը, և բարի կամք է մաղթում մնացած մարդկանց։ Այդ ձևակերպումը կարևոր է։ Մենք ունենք նրա հեռանալու մասին հաշվետվությունը, որտեղ դեռ կան գործընկերներ։ 2023 թվականին նրա բողոքը արագությունն էր։ Միայնակ հետազոտողը կարող էր ուշանալ թույլ համեմատություններով։ Խումբը համատեղ ջանքեր էր գործադրում ավելի ուժեղ փորձերի համար։

1:06 Նույնիսկ ձեր բեկումը կարիք ունի բազային գծի, որը կարող է իրեն թույլ տալ էլեկտրաէներգիա։ Որոշ աշխատանքներ հասան մշակողներին։ Լենգֆորդն անվանում է AutoGen-ը՝ գործակալների համակարգման շրջանակը։ Կան նաև հանրային մոդելների հետազոտական հոդվածներ, որտեղ նա հեղինակներից է։ Այս խումբը թողարկել էր աշխատանք՝ պաշտպանելու իր առաքելության հայտարարության կողքին։ Այնուհետև գալիս է վերակազմավորումը։

Ի՞նչ փոխվեց, երբ AI Frontiers-ը տեղափոխվեց Microsoft AI:

1:23 Լենգֆորդն ասում է, որ AI Frontiers-ը Microsoft AI է տեղափոխվել սեպտեմբերի սկզբին։ Մուստաֆա Սուլեյմանը, նախկինում Inflection-ից, ղեկավարում է այդ կազմակերպությունը։ Լենգֆորդը նկարագրում է բախում նախկին Inflection-ի ղեկավարության հետ։ Սա նրա տեղափոխության մասին հաշվետվությունն է։ Լենգֆորդը դա անվանում է միայն մասշտաբային միջավայր և ասում, որ հետազոտությունը ցանկալի չէր։ Դա նրա բնութագիրն է։ Նա նաև ներկայացնում է բիզնեսի փաստարկը։

1:43 Մասշտաբավորումն ավելի կանխատեսելի եկամուտներ է առաջարկում, քան անորոշ հետազոտությունները։ Ֆինանսական բաժինը կարող է կանխատեսելին դնել աղյուսակում։ Նա ասում է, որ այդ մոտեցումը կենտրոնանում է տվյալների ձեռքբերման և կատարելագործման վրա։ Նրա հետաքրքրություններն էին նոր հնարավորությունները և մոդելային ավելի լավ տեխնիկաները։ Անհամաձայնությունը վերաբերում էր այն բանին, թե որ փորձերն էին արժանի ռեսուրսների, և որ արդյունքները կստանային օգտակար դառնալու հնարավորություն։ Մեկ տարի առաջ Սուլեյմանի գերխելացիության մասին

Ասո՞ւմ է Microsoft-ը, որ հետազոտությունն ավարտված է։

2:05 հայտարարությունում ասվում էր, որ նա ցանկանում է աշխարհի լավագույն վայրը AI հետազոտելու և ստեղծելու համար։ Լենգֆորդի նոր գրառումը նկարագրում է նրա փորձը վերակազմավորումից հետո։ Այդ ավելի հին ամբիցիան չի հաստատում, թե ինչ է տեղի ունեցել այս խմբի ներսում։ Վերցնենք Full Bandwidth Transformer թուղթը։ Մոդելը յուրաքանչյուր ապակոդավորման քայլում թոքեն է արտադրում։ Այս դիզայնը նաև նախորդ վերին շերտի թաքնված վիճակը կերակրում է հաջորդ մուտքին։ Ներքին տեղեկատվությունը շարժվում է մոդելի տպած բառի հետ միասին։

2:28 Հեղինակները հաղորդում են փորձարկված մոդելների բարելավումների մասին։ Լենգֆորդը հարցնում է, թե ինչ արժեք կարող է ունենալ ծախսերի կիսով չափ կրճատումը։ Այդ խնայողությունը դեռ հաստատված չէ այստեղ։ Պարամետրերը, ուսուցման աշխատանքը և սպասարկման ծախսերը պահանջում են առանձին չափումներ, նախքան որևէ մեկը կչեղարկի իրենց GPU պատվերի կեսը։

Ինչու՞ Լենգֆորդը չվերադարձավ Microsoft Research:

2:42 Նրա հեռանալու պատճառն ավելի անմիջական է։ Նա ասում է, որ չի կարողացել նորարարությունը կիրառել կամ նույնիսկ լրջորեն դիտարկել Microsoft AI-ի ներսում։ Եվ Microsoft Research վերադառնալը նման էր նույն արգելափակված ուղուն բախվելուն։ Ավելի լավ փորձի մասին հոգալը դժվար է, երբ դրա հաջորդ նպատակակետը մեկ այլ ներքին ներկայացում է։ Նա նաև ասում է, որ հիմնական գործարքը խախտվել է։ Լավ աշխատիր, և լավ բաներ կլինեն։ Նրա տեսանկյունից, պարգևը անցանկալի փոխանցում էր։

3:06 Նա գրում է, որ մյուս բոլոր հիմնադիր ղեկավարության անդամները, կարծես, հասել են նմանատիպ եզրակացության։ Այդ «կարծես»-ը աշխատանք է կատարում։ Նա մեզ չի տրամադրում հաստատված հեռացողների ցուցակ։ AutoGen-ի օգտատերերը ունեն կոնկրետ սպասարկման նախազգուշացում։ AutoGen-ի ներկայիս readme-ում ասվում է, որ նախագիծը արխիվացված է։ Microsoft-ն ասում է, որ այնտեղ սխալների շտկումներ, անվտանգության շտկումներ կամ աջակցություն չի տրամադրում։ Այն գոյություն ունեցող օգտատերերին ուղղորդում է Microsoft Agent Framework-ի և միգրացիոն ուղեցույցի։ Ստուգեք դա՝ նախքան հին ձեռնարկը արտադրության մեջ դնելը։

3:31 Այդ նախազգուշացումն արդեն պահեստում էր այս գրառումից առաջ։

Ի՞նչ պետք է ստուգի AutoGen-ի օգտատերը հիմա:

3:34 Դա չի ապացուցում, որ այս հեռանալը պատճառել է արխիվացումը։ Եվ հաջորդող շրջանակի հանրային պահոցը դեռ կա՝ առաջարկելով գործակալի համակարգում արտադրության համար։ Իրական իրավիճակը ներառում է հետազոտական աշխատություններ, արխիվացված գործիք և Microsoft-ի առաջարկված հաջորդողը։ Յուրաքանչյուրն ունի իր կյանքի ցիկլը։ Ստուգեք յուրաքանչյուր կյանքի ցիկլը առանձին-առանձին։ Կոդը պահպանվո՞ւմ է: Որտե՞ղ է միգրացիայի ուղին:

3:53 Կարո՞ղ եք գնահատել հետազոտությունը: Հայտնի ընկերության անունը ձեր փոխարեն չի պատասխանի այդ հարցերին։

Որո՞նք էին այդ չորս խողովակաշարերի ջանքերը։

3:58 Ինչը մեզ հետ է բերում ջրամատակարարմանը: Լենգֆորդն ասում է, որ AI Frontiers-ը պահպանել է monorepo-ն, որը լռելյայնորեն համօգտագործվում էր Microsoft Research-ի կողմից։ Այն ներառում էր մոդելի նախնական ուսուցման խողովակաշար։ Դա կարևոր է, քանի որ համոզիչ փորձեր կատարելու մեքենան պահանջում է զգալի աշխատանք, նախքան խելացի հետազոտական գաղափարը կստանա իր հերթը։ Նա գիտեր առնվազն չորս ջանքերի մասին, որոնք կառուցում էին մոդելային խողովակաշարեր։ Մյուս երեքը, նա ասում է, չէին գտնվում Microsoft Research-ի կողմից համօգտագործվող պահեստներում։ Նրա թիմինը լռելյայն համօգտագործվում էր։

4:23 Կորպորատիվ արդյունավետությունը հասել է այն փուլին, երբ բոլորն ունեն իրենց սեփական համայնքային խոհանոցը։ Դա այն ձախողումն է, որը բացահայտում է նրա պատմությունը։ Հետազոտողներին անհրաժեշտ է վերաօգտագործվող ենթակառուցվածք և իրական արտադրանքներ մուտքի ուղի։ Լենգֆորդն ասում է, որ իր խումբը կառուցել է համօգտագործվող ենթակառուցվածքը, և նա կորցրել է վստահությունը արտադրանքի ուղու նկատմամբ։ Վերակազմավորումը փոխեց նրա խմբի սեփականատիրոջը։ Նա դեռ հեռացավ։ Եթե նախընտրում եք կարդալ սա, քան լսել ինձնից, ապա տարբերությունը ձեր մուտքի արկղում է

4:44 ամեն առավոտ, անվճար the daily diff dot dev-ում, հղումը ստորև։

Ի՞նչն է արժանի NEEDS REVIEW վճռի:

4:47 Այսպիսով, այսօրվա վճիռը՝ NEEDS REVIEW: Ես կցանկանայի ունենալ հետազոտությունից-արտադրանք ուղի և սպասարկման պլան, նախքան այս միավորումը հաջողություն անվանելը։ Լենգֆորդի հաշվետվությունը ինձ հիմքեր է տալիս կասկածելու երկուսին էլ։ Բաժանորդագրվեք, սեղմեք զանգակը և մեկնաբանություններում ինձ ասեք, թե արդյոք դուք այլ կերպ կկնքեիք։ Եվ սա այսօրվա տարբերությունն է։ Ես Նիկոն եմ Աքսրիսիից։ Միացրեք պատասխանատվությամբ:

Աղբյուրներ

1. The End of AI Frontiers — former founder's account and internal-sharing scopeJohn Langford / Machine Learning (Theory)
2. AutoGen README — archived project and successor recommendationMicrosoft / GitHub
3. Microsoft Agent Framework — public successor repositoryMicrosoft / GitHub
4. Full-bandwidth transformer — author-reported design and results, v2Xi Wang and colleagues / arXiv
5. Towards Humanist Superintelligence — November 6, 2025 ambition, no current replyMustafa Suleyman / Microsoft AI
6. Mustafa Suleyman — Microsoft AI identity and biographyMustafa Suleyman
7. Authentic Mustafa portrait — cropped, background removed, resized and unflipped; corporate identity only, no authorship, closure order, current reaction or endorsementVillage Global / Wikimedia Commons
8. Original Village Global Grove photo — November 17, 2022Village Global / Flickr
9. Portrait licence — CC BY 2.0; attribution and adaptation disclosureCreative Commons
10. Spider-Man pointing template — resized with process-commentary caption; brief transformed satire, no identical-code evidence or actual executive reaction; hosting grants no licence, legal clearance or blanket reuseImgflip / Spider-Man cartoon
11. Fantasia broom GIF — Disney/@disney uploader with Disney Tumblr provenance; silent resized short excerpt with narrator-commentary caption, broom brought to life without multiplication claim; no actual executive reaction, hosting licence, legal-clearance or blanket-reuse claimDisney / GIPHY
12. Original Disney GIF source linkDisney / Tumblr
13. Hacker News discussion — attention context, no anonymous claims used as factsHacker News
14. AutoGen README archive clarification — October 16, before Langford's postMicrosoft / GitHub
15. Full-bandwidth transformer paper v2 licence — CC BY 4.0; exact excerpt reformatted, accompanying model diagram conceptualXi Wang and colleagues / Creative Commons