Microsoft lanceert een nieuwe functie binnen Copilot Studio waarmee AI-agenten zelf websites en desktopapps kunnen gebruiken.
Microsoft breidt Copilot Studio uit met een nieuwe functie: ‘computer use’. De toevoeging, nu beschikbaar in een vroege preview, laat AI-agenten toe om rechtstreeks te interageren met websites en desktopapplicaties via hun grafische gebruikersinterface. Recent lanceerde Microsoft nog een gelijkaardige functie Copilot Actions die de AI-agent in staat stelde om voor jou te surfen op het web.
Computer Use
Dankzij de nieuwe mogelijkheid kunnen Copilot Studio-agenten taken uitvoeren in applicaties waarvoor geen API beschikbaar is. Door elementen op het scherm aan te klikken, velden in te vullen of menu’s te selecteren, handelen agenten op een vergelijkbare manier als menselijke gebruikers. Deze aanpak laat toe om handmatige processen te automatiseren, zoals gegevensinvoer, marktonderzoek of factuurverwerking.
Computer use werkt met populaire browsers zoals Edge, Chrome en Firefox, en draait op een infrastructuur gehost door Microsoft. Dit verlaagt de onderhoudskosten voor organisaties, terwijl bedrijfsgegevens binnen Microsoft Cloud blijven en niet worden gebruikt voor modeltraining. De functie past zich bovendien automatisch aan wanneer applicaties of websites veranderen, met behulp van ingebouwde redeneermodellen.
Traditionele RPA
De functie betekent ook een nieuwe stap in de richting van meer toegankelijke robotic process automation (RPA). In tegenstelling tot traditionele RPA, die vaak kwetsbaar is voor veranderingen in UI-elementen, blijft computer use functioneren bij aanpassingen aan de interface. Gebruikers kunnen de gewenste acties beschrijven in natuurlijke taal, terwijl de agent zelf slimme keuzes maakt op basis van wat er op het scherm verschijnt.
lees ook
Microsoft 365 Copilot krijgt AI-aangedreven onderzoekstools
Microsoft benadrukt dat deze nieuwe benadering van automatisering niet alleen efficiënter is, maar ook geschikt is voor gebruikers zonder technische achtergrond. Via Copilot Studio kunnen organisaties nu sneller agenten bouwen die complexe taken uitvoeren in een visuele gebruikersomgeving, met meer flexibiliteit en minder technische drempels.