Microsoft heeft de Fall Moments-update aangekondigd voor zijn Windows 11-besturingssysteem, waarmee een reeks functies wordt geïntroduceerd die zijn ontworpen om kunstmatige intelligentie-mogelijkheden te integreren in elke ondersteunde pc. De update concentreert zich op twee primaire toevoegingen, Copilot Voice en Copilot Vision, die samen functioneren om een meer interactieve AI-omgeving voor gebruikers te creëren. De eerste functie, Copilot Voice, stelt gebruikers in staat om met hun computer te communiceren via spraakopdrachten en natuurlijke gesprekken, een interactiemethode die vergelijkbaar is met die van andere conversatie-AI-tools. De tweede kernfunctie is Copilot Vision, waarmee de computer zijn omgeving via een camera kan waarnemen en interpreteren. Copilot Vision kan ook de inhoud analyseren die op het scherm van een gebruiker wordt weergegeven, waardoor deze de context kan begrijpen en acties kan uitvoeren op basis van wat hij “ziet”. Als onderdeel van deze update kan de AI-assistent met uw stem worden geactiveerd met behulp van de zin “Hé, copiloot.” Eenmaal geactiveerd kunnen gebruikers vragen stellen, informatie zoeken of de assistent opdracht geven specifieke taken uit te voeren. Met de Copilot Vision-functionaliteit kunnen gebruikers hun desktop of individuele applicaties rechtstreeks met de AI delen. In ruil daarvoor kan Copilot inzichten verschaffen of vragen beantwoorden met betrekking tot de inhoud op het scherm. De update introduceert ook een begeleidingsfunctie die Microsoft Highlights noemt. Deze tool is ontworpen om gebruikers te helpen die niet bekend zijn met bepaalde computerbewerkingen. Door naar een gebied op het scherm te wijzen en om hulp te vragen, kunnen gebruikers stapsgewijze instructies van de AI krijgen over hoe ze een taak moeten voltooien. Microsoft heeft opgemerkt dat deze functie vooral bedoeld is voor gebruikers met een lager niveau van technologische bekendheid. De Highlights-functionaliteit is beschikbaar binnen het besturingssysteem en binnen specifieke applicaties. In combinatie met deze functies is de Copilot-typeinterface opnieuw ontworpen en rechtstreeks in de taakbalk van Windows 11 geïntegreerd. Deze wijziging heeft tot doel tekstgebaseerde interactie met de AI-assistent toegankelijker te maken. Binnen de Microsoft 365-applicatiesuite, die PowerPoint, Excel en Word omvat, is Copilot Vision verbeterd om de volledige context van het werk van een gebruiker te begrijpen. Met expliciete gebruikerstoestemming kan de AI het scherm bekijken en hulp bieden bij taken zoals het ontwerpen van een presentatie of het analyseren van spreadsheetgegevens. Microsoft breidt ook Copilot Actions uit, een functie waarmee een intelligente agent taken in meerdere stappen voor de gebruiker kan uitvoeren. Deze mogelijkheid was voorheen beperkt tot browsergebaseerde acties zoals het boeken van een hotel of het vinden van vluchten, maar wordt nu uitgebreid naar het Windows 11 Insiders-programma. Dankzij de uitbreiding kan Copilot Actions binnen het lokale besturingssysteem werken, taken uitvoeren in Verkenner of zoeken naar bestanden op de computer. Gebruikers kunnen een gewenst resultaat beschrijven, en de AI zal eraan werken om het uit te voeren. Dit sluit aan bij een breder Microsoft-initiatief om zijn AI te koppelen aan diensten als OneDrive en externe platforms zoals Google Gmail, met de mogelijkheid om taakresultaten naar andere applicaties te exporteren. Daarnaast kondigde Microsoft een samenwerking aan met de task-agent-tool Manus. Dankzij deze samenwerking kan de tool complexe bewerkingen uitvoeren op de lokale bestanden van een gebruiker, afhankelijk van het verkrijgen van toestemming. De technische basis voor deze samenwerking is een gedeelde infrastructuur die is gebouwd door Microsoft en het moederbedrijf van Manus, een extern bedrijf gevestigd in Shanghai, waarbij gebruik wordt gemaakt van Azure-servers die zijn uitgebreid met AI-mogelijkheden. Om de veiligheid en privacy aan te pakken, bevat de update nieuwe controleniveaus die worden omschreven als ‘veiligheidshekken’. Microsoft stelt dat gebruikers volledige controle hebben over de nieuwe functies en Copilot Actions op elk moment kunnen uitschakelen of opschorten. Het bedrijf streeft er ook naar om gebruikers volledige transparantie te bieden over de acties van de AI, met updates in elke fase van een taak. Verwijzend naar de lessen uit het recente ‘recall-fiasco’ beweert Microsoft dat het voortdurend uitgebreide controles uitvoert en organisatorische feedback verzamelt om zijn beveiligings- en privacymechanismen te verbeteren.
Source: Microsoft lanceert “Copilot Voice” en “Copilot Vision” op Windows 11
