Av AI Trends Staff
På frågan om vad i tekniken som han är mest imponerad av, sa Microsofts VD Satya Nadella på MIT AI och Work of the Future Congress 2020 höll nästan förra veckan att han drabbats av förmågan hos cloud computing att tillhandahålla massiv datorkraft.
"Datorn som är tillgänglig för att göra AI är transformativ", sa Nadella till David Autor, Ford-professor i ekonomi vid MIT, som genomförde Fireside Chat-sessionen.
Nadella nämnde GPT-3-språkmodellen för allmänt ändamål från OpenAI, ett AI-laboratorium som letade efter en kommersiell affärsmodell. GPT-3 är en autoregressiv språkmodell med 175 miljarder parametrar. OpenAI gick med på att licensiera GPT-3 till Microsoft för sina egna produkter och tjänster, samtidigt som de fortsatte att erbjuda OpenAIs API på marknaden. Idag är API: n i en begränsad betaversion när OpenAI och akademiska partners testar och bedömer dess kapacitet.
Microsoft-licensen är dock exklusiv, vilket innebär att Microsofts molntjänster inte kan komma åt den på samma sätt. Avtalet ansågs vara viktigt för att hjälpa OpenAI med kostnaden för att få GPT-3 igång och underhålla det, enligt ett konto i TechTalks. Dessa inkluderar uppskattningsvis 10 miljoner dollar i kostnader för att undersöka GPT-3 och träna modellen, tiotusentals dollar i månatlig molnberäkning och elkostnader för att köra modellerna, uppskattningsvis en miljon dollar årligen för att omskola modellen för att förhindra förfall och extra kostnader för kundsupport, marknadsföring, IT, juridiska och andra krav för att marknadsföra en programvaruprodukt.
Tidigare i år tillkännagav Microsoft på sin utvecklarkonferens att de arbetade med OpenAI för att montera vad Microsoft sa var "en av de fem bästa superdatorer som offentliggjorts i världen", enligt ett konto på Microsoft AI-blogg. Infrastrukturen kommer att finnas tillgänglig i Azure, Microsofts cloud computing-erbjudande, för att utbilda ”extremt stora” AI-modeller.
Partnerskapet mellan Microsoft och OpenAI syftar till att "gemensamt skapa nya superdatortekniker i Azure," det blogginlägg som anges.
"Och det händer inte bara i molnet, det händer på kanten, säger Nadella.
Applikationer för moln- och kantberäkning som arbetar tillsammans - som generering av naturligt språk, komplettering av bilder eller virtuella simuleringar från bärbara sensorer som ser arbetet - är mycket datorintensiva. "Det är fantastiskt att se förmågan", enligt GPT-3-modellen som tillämpas på detta arbete, sa Nadella. "Något i modellarkitekturen ger mig förtroende för att vi kommer att få fler genombrott i en snabbare takt", sa han.
Potentiell strategisk fördel i sökning, röstassistenter från GPT-3-modeller
Strategiskt kan det vara så att GPT-3-modellerna ger Microsoft en verklig fördel, säger artikeln i TechTalks föreslog. Till exempel på sökmotormarknaden har Microsofts Bing drygt 6% marknadsandel, bakom Googles 87%. Om GPT-3 kommer att göra det möjligt för Microsoft att lansera nya funktioner som omdefinierar hur sökning används återstår att se.
Microsoft kommer sannolikt också att utforska potentiella fördelar som GPT-3 kan ge till röstassistentmarknaden, där Microsofts Cortana ser en andel på 22%, bakom Apples Siri, som har 35%.
Nadella har bekymmer relaterade till kraften i AI och automatisering. ”Vi behöver en uppsättning designprinciper, från etik till verklig konstruktion och design och en process som gör att vi kan vara ansvariga, så modellerna är rättvisa och inte partiska. Vi måste ”förvränga” modellerna och det är hårt ingenjörsarbete, sade han. "Oavsiktliga konsekvenser" och "dåliga användningsfall" är också utmaningar, sade han utan att utarbeta. [Ed. Obs: Ett ”missbruk” eller dåligt användningsfall beskriver en funktion som systemet inte bör tillåta från Wikipedia.]
Presentatören författaren frågade Nadella hur Microsoft fattar beslut om vilka problem man ska arbeta med att använda AI. Nadella nämnde ”verklig liten AI” och företagets Power Platform verktyg, vilket gör att flera produkter kan fungera bra tillsammans som en del av en affärsapplikationsplattform. Denna grund bygger på det som kallades Common Data Service för appar och från och med denna månad (november) kallas det ”Datavers. ” Data lagras i tabeller som kan finnas i molnet.
Med hjälp av verktygen "kan människor ta sin domenexpertis och förvandla den till automatisering med hjälp av AI-funktioner", sa Nadella.
På frågan om vilka nya jobbmöjligheter som skapas med hjälp av AI som han förväntar sig i framtiden, jämförde Nadella övergången i dag med början av datorkalkylblad och ordbehandlare. "Samma sak händer idag", eftersom databehandling blir inbäddad i tillverkningsanläggningar, butiker, sjukhus och gårdar. "Detta kommer att forma nya jobb och förändra befintliga jobb", sa han.
'Demokratisering av AI' ses som potential att sänka hinder
De två diskuterade om möjligheterna från AI sträcker sig till dessa arbetare utan abstrakta färdigheter som programmering. Diskussion följde om ”demokratisering av AI” som sänker hinder för individer och organisationer att få erfarenhet av AI, vilket tillåter dem att till exempel utnyttja offentligt tillgängliga data och algoritmer för att bygga AI-modeller på en molninfrastruktur.
När det gäller utbildning, undrade Autor om tillgången till utbildning kunde "demokratiseras" mer. Nadella sa, ”STEM är viktigt, men vi behöver inte alla för att få en magisterexamen i datavetenskap. Om du kan demokratisera kompetensen för att hjälpa produktiviteten hos frontlinjearbetaren är det problemet att lösa. ”
Autor frågade om tekniken har något att göra med den växande klyftan mellan låg- och höglönearbetare och vad som kan göras åt det. Nadella sa att Microsoft har åtagit sig att göra utbildning som leder till meriter. "Vi behöver en återkopplingsslinga i realtid mellan framtidens jobb och den kompetens som krävs", sa Nadella. ”För att betona dessa färdigheter ser vi fler företag investera i företagsutbildning som en del av deras dagliga arbetsflöde. Microsoft är superfokuserat på det. ”
En skattekredit för företag som investerar i utbildning skulle vara en bra idé, föreslog Nadella. "Vi behöver en stimulansmekanism", sade han och tillade att en feedback-loop skulle hjälpa träningsprogram att lyckas.
Kommer "telepresence" kvar efter att pandemin är över? Frågade Autor. Nadella skisserade fyra tankar: för det första kommer samarbetet mellan frontlinjearbetare och kunskapsarbetare att fortsätta, eftersom samarbetet har visat sig vara mer produktivt på vissa sätt; för det andra kommer möten att ändras men samarbetet kommer att fortsätta före, under och efter möten. för det tredje kommer lärande och utbildning av utbildning att få bättre hjälp med virtuella verktyg. och "videoutmattning" kommer att erkännas som en riktig sak.
"Vi måste få människor ur sina fyrkantiga lådor och till en delad känsla av närvaro, för att minska kognitiv belastning", sa Nadella. ”En av mina bekymmer är att vi bränner det sociala kapital som byggdes upp. Vi måste lära oss nya tekniker för att bygga tillbaka socialt kapital. ”
Läs mer om AI och Work of the Future Congress 2020, GPT-3 tumTechTalks och om Microsoft AI-blogg, den Power Platform och Datavers.
