Door AI Trends Staff
Op de vraag waar hij in de opkomst van de technologie het meest van onder de indruk is, zei Satya Nadella, CEO van Microsoft bij MIT AI en het werk van de toekomst Congres 2020 hield vrijwel vorige week vast dat hij getroffen is door het vermogen van cloud computing om enorme rekenkracht te leveren.
"De computers die beschikbaar zijn om AI te doen, zijn transformatief", zei Nadella tegen David Autor, de Ford-professor economie aan het MIT, die de Fireside Chat-sessie leidde.
Nadella noemde het algemene taalmodel GPT-3 van OpenAI, een AI-lab dat op zoek is naar een commercieel bedrijfsmodel. GPT-3 is een autoregressief taalmodel met 175 miljard parameters. OpenAI stemde ermee in om GPT-3 aan Microsoft te licentiëren voor hun eigen producten en diensten, terwijl ze de API van OpenAI op de markt bleven aanbieden. Tegenwoordig bevindt de API zich in een beperkte bèta, aangezien OpenAI en academische partners de mogelijkheden ervan testen en beoordelen.
De Microsoft-licentie is echter exclusief, wat betekent dat de concurrenten van Microsoft's cloud computing er niet op dezelfde manier toegang toe hebben. De overeenkomst werd gezien als belangrijk om OpenAI te helpen met de kosten om GPT-3 operationeel te krijgen en te onderhouden, volgens een account in TechTalks. Deze omvatten naar schatting $ 10 miljoen aan uitgaven om GPT-3 te onderzoeken en het model te trainen, tienduizenden dollars aan maandelijkse cloud computing en elektriciteitskosten om de modellen uit te voeren, naar schatting een miljoen dollar per jaar om het model opnieuw te trainen om verval te voorkomen, en extra kosten van klantenondersteuning, marketing, IT, juridische en andere vereisten om een softwareproduct op de markt te brengen.
Eerder dit jaar kondigde Microsoft op de Build-ontwikkelaarsconferentie aan dat het samenwerkte met OpenAI om te verzamelen wat volgens Microsoft een van de vijf meest openbaar gemaakte supercomputers ter wereld was, aldus een account op de Microsoft AI-blog. De infrastructuur zal beschikbaar zijn in Azure, het cloud computing-aanbod van Microsoft, om "extreem grote" AI-modellen te trainen.
Het partnerschap tussen Microsoft en OpenAI heeft tot doel "gezamenlijk nieuwe supercomputertechnologieën te creëren in Azure", de blogpost vermeld.
"En het gebeurt niet alleen in de cloud, het gebeurt aan de rand, ”zei Nadella.
Toepassingen voor cloud- en edge-computing die samenwerken - zoals het genereren van natuurlijke taal, het aanvullen van afbeeldingen of virtuele simulaties van draagbare sensoren die het werk zien - zijn zeer rekenintensief. "Het is verbluffend om de mogelijkheden te zien", van het GPT-3-model toegepast op dit werk, zei Nadella. "Iets in de modelarchitectuur geeft me het vertrouwen dat we in een sneller tempo meer doorbraken zullen hebben", zei hij.
Potentieel strategisch voordeel bij zoeken, spraakassistenten van GPT-3-modellen
Strategisch gezien kan het zijn dat de GPT-3-modellen Microsoft een echt voordeel zullen geven, aldus het artikel in TechTalks suggereerde. Op de zoekmachinemarkt heeft Microsoft's Bing bijvoorbeeld iets meer dan 6% marktaandeel, achter Google's 87%. Of GPT-3 Microsoft in staat zal stellen nieuwe functies uit te rollen die de manier waarop zoeken wordt gebruikt opnieuw definiëren, valt nog te bezien.
Microsoft zal waarschijnlijk ook de potentiële voordelen onderzoeken die GPT-3 zou kunnen brengen op de markt voor spraakassistenten, waar Cortana van Microsoft een aandeel van 22% ziet, achter Apple's Siri, dat 35% heeft.
Nadella maakt zich zorgen over de kracht van AI en automatisering. “We hebben een reeks ontwerpprincipes nodig, van ethiek tot daadwerkelijke engineering en ontwerp, en een proces waarmee we verantwoording kunnen afleggen, dus de modellen zijn eerlijk en niet bevooroordeeld. We moeten de modellen 'de-bias' maken en dat is hard technisch werk, ”zei hij. "Onbedoelde gevolgen" en "gevallen van slecht gebruik" zijn ook uitdagingen, zei hij, zonder uit te weiden. [Ed. Opmerking: een 'geval van misbruik' of een geval van slecht gebruik beschrijft een functie die het systeem niet zou moeten toestaan Wikipedia.]
Presentator auteur vroeg Nadella hoe Microsoft beslissingen neemt over welke problemen ze moeten aanpakken met AI. Nadella noemde "echte kleine AI" en het bedrijf Krachtplatform tools, waardoor verschillende producten goed kunnen samenwerken als onderdeel van een bedrijfsapplicatieplatform. Deze basis is gebouwd op wat de Common Data Service voor apps werd genoemd, en heet vanaf deze maand (november) "gegevensvers. " Gegevens worden opgeslagen in tabellen die in de cloud kunnen staan.
Met behulp van de tools: "Mensen kunnen hun domeinexpertise gebruiken om deze om te zetten in automatisering met behulp van AI-mogelijkheden", zei Nadella.
Op de vraag welke nieuwe banen worden gecreëerd door het gebruik van AI dat hij in de toekomst verwacht, vergeleek Nadella de transitie die vandaag gaande is met het ontstaan van computerspreadsheets en tekstverwerkers. "Hetzelfde gebeurt vandaag", nu computers steeds meer ingebed raken in fabrieken, winkels, ziekenhuizen en boerderijen. "Dit zal nieuwe banen vormen en bestaande banen veranderen", zei hij.
'Democratisering van AI' gezien als potentieel om belemmeringen te verlagen
De twee bespraken of de kansen van AI zich uitstrekken tot die werknemers zonder abstracte vaardigheden zoals programmeren. Er volgde een discussie over "democratisering van AI", waardoor de drempels voor individuen en organisaties worden verlaagd om ervaring op te doen met AI, waardoor ze bijvoorbeeld openbaar beschikbare gegevens en algoritmen kunnen gebruiken om AI-modellen te bouwen op een cloudinfrastructuur.
Met betrekking tot onderwijs vroeg Autor zich af of de toegang tot onderwijs meer gedemocratiseerd kon worden. Nadella zei: “STEM is belangrijk, maar we hebben niet iedereen nodig om een master in computerwetenschappen te halen. Als je de expertise kunt democratiseren om de productiviteit van de eerstelijnsmedewerker te helpen, is dat het probleem dat je moet oplossen. "
Autor vroeg of technologie iets te maken heeft met de groeiende kloof tussen laagbetaalde en hoogbetaalde werknemers, en wat er aan gedaan kon worden. Nadella zei dat Microsoft zich inzet voor het beschikbaar maken van onderwijs dat leidt tot inloggegevens. "We hebben een real-time feedbacklus nodig tussen de banen van de toekomst en de vereiste vaardigheden", zei Nadella. “Om die vaardigheden te bewijzen, zien we dat meer bedrijven investeren in bedrijfstrainingen als onderdeel van hun dagelijkse workflow. Microsoft is daar super gefocust op. "
Een belastingvermindering voor bedrijven die in opleiding investeren, zou een goed idee zijn, stelde Nadella voor. "We hebben een stimuleringsmechanisme nodig", zei hij, eraan toevoegend dat een feedbacklus de trainingsprogramma's zou helpen succesvol te zijn.
Zal "telepresence" blijven bestaan nadat de pandemie voorbij is? Vroeg de auteur. Nadella schetste vier gedachten: ten eerste zal de samenwerking tussen eerstelijnswerkers en kenniswerkers worden voortgezet, aangezien de samenwerking in sommige opzichten productiever is gebleken; ten tweede zullen vergaderingen veranderen, maar de samenwerking zal voor, tijdens en na vergaderingen worden voortgezet; ten derde zullen leren en het geven van opleidingen beter worden ondersteund met virtuele hulpmiddelen; en "videomoeheid" zal als iets echts worden herkend.
"We moeten mensen uit hun vierkante dozen halen en een gedeeld gevoel van aanwezigheid geven, om de cognitieve belasting te verminderen," zei Nadella. “Een van mijn zorgen is dat we het opgebouwde sociaal kapitaal verbranden. We moeten nieuwe technieken leren om sociaal kapitaal terug op te bouwen. "
Lees verder over AI en het werk van de toekomst Congres 2020, GPT-3 inchTechTalks en in de Microsoft AI-blog Krachtplatform en gegevensvers.
