Microsoft Build 2024 – Másodpilóták pluszban

Százötvennél több frissítést adott ki a Microsoft Copilot digitális asszisztenseihez az elmúlt egy évben, miközben a felhőtől a peremhálózatig érő AI infrastruktúrát, valamint az alapmodellekből, fejlesztő és felügyeleti eszközökből álló technológiai környezetet is kiépítette, amellyel a vállalatok a szoftvercég Copilotjai mellett saját digitális asszisztenseiket – intelligens chatbotjaikat – is elkészíthetik, bővíthetik, bevezethetik, megbízhatóan és biztonságosan használhatják. A két évvel ezelőtt elsőként kibocsátott GitHub Copilot azóta 1,8 millió előfizetőt gyűjtött, és a legszélesebb körben használt AI fejlesztőeszközzé lépett elő – mondta a Microsoft májusban Seattle-ben és online megtartott Build 2024 fejlesztői konferenciáján.

A konferencia előtti napon a Microsoft bemutatta a Copilot+ PC-ket is. Az AI PC-k új osztályaként megjelenő gépeken a fejlesztők a Build konferencián bejelentett technológiákkal és eszközökkel – közöttük a Microsoft Fabric és a Github Copilot friss képességeivel, valamint az új, multimodális AI modellekkel – eddig nem látott felhasználói élményeket alakíthatnak ki. Összességében a Microsoft hatvannál több terméket és megoldást jelentett be a rendezvényen, amelyre 200 ezer résztvevő regisztrált, közülük négyezren személyes részvétellel.

A leggyorsabb és legokosabb PC

A Copilot+ PC-k, amelyeket a Microsoft az eddigi leggyorsabb és legintelligensebb Windows-alapú személyi számítógépnek nevezett, a szoftvercég új kampuszán megtartott, külön eseményen premiereztek.

Satya Nadella, elnök-vezérigazgató…

Az első modellek a Qualcomm Snapdragon X Elite és X Plus processzoraival, valamint Oryon CPU-ival és Adreno GPU-ival jelennek meg, neurális feldolgozó egységük teljesítménye hihetetlenül nagy – másodpercenként több mint 40 billió műveletet hajt végre -, és szinte egész nap működnek akkumulátorról. A legfejlettebb AI modellekhez hozzáférést adó Copilot+ PC-kkel a felhasználók olyan dogokat tehetnek, amilyenekre a személyi számítógépek eddig nem voltak képesek. A Recall funkcióval például mindent azonnal előkereshetnek, amit a PC kijelzőjén láttak, a Cocreator segítségével közel valós időben generálhatnak és szerkeszthetnek AI képeket, a Live Captions funkcióival pedig a beszédet fordíthatják több mint 40 nyelvről angolra, mondta a szoftvercég.

Az új képességeket a felhasználók a Microsoft Surface gépek mellett a szoftvercég eszközgyártó partnerei, az Acer, ASUS, Dell, HP, Lenovo és Samsung által már szintén bejelentett, nagyrészt június második felétől kezdve megjelenő Copilot+ PC-ken érhetik el. Mindez azonban még csupán a kezdet, mondta a Microsoft, a személyi számítógép ezzel a szilíciumtól kezdve az operációs rendszeren át az alkalmazásrétegig és a felhőig teljesen átalakul, és a mesterséges intelligenciát helyezi a középpontba, ami a Windows platform történetében évtizedek óta a legnagyobb változás.

Minden Copilot+ PC a felhasználó személyes AI asszisztensével érkezik, amely a billentyűzet Copilot gombjával egyetlen mozdulattal bármikor elérhető. A Recall funkció azonban, amely a gép használata közben pillanatfelvételeket, azaz képernyőmentéseket készít és őriz egy görgethető idővonalon, megosztotta a véleményeket, mivel egyesekben információvédelmi aggályokat ébresztett. Az Egyesült Királyság adatvédelmi biztosa például már bejelentette, hogy részletesebb tájékoztatást fog kérni a fotografikus memória működéséről.

A Microsoft a bejelentéskor kiemelte ugyan, hogy a Recall a felhasználó személyi szemantikus indexe, amely teljes egészében a PC-n épül, ott tárol adatokat, és a pillanatfelvételek készítése, megőrzése is részletesen szabályozható a Beállításokban, vagy a Tálcáról egy kattintással szüneteltethető. Kérdés azonban, hogy a vállalatok a gyakorlatban hogyan fogadják, kezelik vagy szabályozzák majd, hogy a hibrid modellben dolgozó kollégák saját tulajdonú, magáncélra is használt Copilot+ PC-je esetleg képernyőmentéseket készíthet és tárolhat alkalmazásaik és belső weboldalaik kezelőfelületéről vagy megnyitott dokumentumaikról.

Team Copilot, a csapat új tagja

Megjelenésük óta a Microsoft termékeiben elérhető másodpilóták a fejlett mesterséges intelligenciára és a nagy nyelvi modellekre (LLM-ekre) támaszkodva a háttérből, AI asszisztensként segítették a felhasználókat bonyolult és időigényes feladataik gyors elvégzésében.

A Team Copilot mostani bejelentésével a Copilot for Microsoft 365 előlép a háttérből, és AI asszisztensből egy értékes csapattag szerepére vált, mondta a szoftvercég. A felhasználók mindenhol – a Teams, a Loop, a Planner és minden más app felületén – előhívhatják, ahol kollégáikkal együtt dolgoznak. A Team Copilot így többek között segíthet a megbeszélések szervezésében és lebonyolításában, kezeli a napirendet, követi a rendelkezésre álló idő felhasználását, és jegyzeteket készít. A chatekhez csatlakozva fontos információkra hívhatja fel az együttműködő felek figyelmét, követi a további intézkedéseket igénylő elemeket, és emlékeztet a megválaszolatlan kérdésekre. Projektmenedzserként is szolgálhat, figyelheti a projektek előrehaladását, és értesítheti a csapattagokat, ha beavatkozásra van szükség. A Team Copilot előzetes változatában az év folyamán később megjelenő funkciókat a szoftvercég a gyakorlati tapasztalatok alapján fogja továbbfejleszteni.

Friss képességeket kapott a Microsoft Copilot Studio is, amelyekkel a vállalati fejlesztők az adatok és események változásaira proaktívan válaszoló, specifikus feladatokat ellátó és funkciókat betöltő copilotokat készíthetnek. Ezek a másodpilóták már önállóan is megbirkóznak a hosszú és összetett üzleti folyamatok kezelésével, mivel kellő memóriával és tudással rendelkeznek az összefüggések értelmezéséhez, valamint a cselekvések és bemenetek mérlegeléséhez, tanulnak a felhasználók visszajelzéseiből, ugyanakkor segítséget kérnek, ha egy helyzetet nem tudnak megoldani.

A Microsoft Copilot emellett újabb plugineket és konnektorokat is kapott, amelyekkel a vállalatok további adatforrásokkal és alkalmazásokkal kapcsolhatják össze másodpilótáikat.

…és Charles Lamanna, alelnök Microsoft Build 2024 pódiumán

Valós idejű intelligencia

A mesterséges intelligencia alkalmazások hatékony működéséhez a vállalatoknak minősíteniük, elemezniük és rendszerezniük kell adataikat a bevitel során, ez azonban korántsem egyszerű feladat. A Real-Time Intelligence, amely a Microsoft Fabric analitikai és adatplatformján most előzetes változatában érhető el, végponttól végpontig érő SaaS megoldásként segíti a felhasználókat a nagy tömegben keletkező, időérzékeny és rendkívül részletes adatok alapján történő, gyors cselekvésben, valamint a tájékozottabb üzleti döntéshozásban.

A Real-Time Intelligence képességeit az elemzők egyszerű, low/no-code élményt biztosító kezelőfelületen keresztül érik el, de a hivatásos fejlesztők munkájához a megoldás kódgazdag környezetet is biztosít. A szintén most bejelentett Microsoft Fabric Workload Development Kit segítségével pedig a független szoftverszállítók és a fejlesztők kiterjeszthetik alkalmazásaikat a Fabric platformon, így egységes felhasználói élményt hozhatnak létre.

Bővítmények első készletével újít a GitHub Copilot, amelyeket a szoftvercég és partnerei fejlesztettek. A privát előzetes változatukban elérhető bővítményekkel a fejlesztők és a vállalatok a GitHub Copilot felhasználói élményét olyan szolgáltatásokkal szabhatják testre, mint az Azure, a Docker és a Sentry, a GitHub Copilot Chat esetében pedig ezt sokkal közvetlenebb módon is megtehetik. A GitHub Copilot for Azure, a Microsoft által készített bővítmények egyike például lehetővé teszi, hogy a fejlesztők természetes nyelvi kezelőfelületen érjenek el és kezeljenek Azure erőforrásokat, hárítsanak el hibákat, keressenek elő releváns naplófájlokat és kódrészeket.

A GPT-4o, az OpenAI legújabb modellje szintén megjelent API-ként az Azure AI Studio kínálatában. A szöveg, a képek és a hang feldolgozását integráló, úttörőnek számító multimodális modell új szintre emeli a generatív és konverzációs mesterséges intelligencia, a chatbotok és virtuális asszisztensek élményét, mondta a szoftvercég.

Phi-3-vision néven a Microsoft is bejelentett egy új, multimodális modellt kis nyelvi modelljeinek (SLM) családjában, amely már elérhető az Azure felhőjében. Nagy teljesítményű, ugyanakkor költséghatékony Phi-3 modelljeit a szoftvercég a személyi digitális eszközökre optimalizálta. Bemenetként a felhasználók nemcsak szöveget, hanem képeket – például egy grafikont – is megadhatnak a modelleknek, és kérdéseikre szövegben kapnak választ.

A fejlesztők az új, csúcstechnológiás modellekkel az Azure AI Playground homokozójában kísérletezhetnek, az Azure AI Studio eszközeivel pedig hozzáláthatnak alkalmazásaik építéséhez és testre szabásához.