AI Nieuws Vandaag
Zo werkt computergebruik door een AI-model
Computergebruik is dat een AI-model naar je scherm kijkt en zelf klikt en typt, zoals een collega die meewerkt op je computer. Nieuwe modellen zoals GPT-6.1 Terra leggen daar nadruk op, omdat veel kantoorwerk uit herhaald klikwerk bestaat.
Wat heb je eraan: Je weet beter welk herhaalwerk je aan een AI kunt overlaten en waar je zelf moet meekijken.
Stel je een stagiair voor die naast je zit, je scherm bekijkt en zelf een formulier invult. Een AI-model doet hetzelfde: het ziet het scherm, kiest de volgende klik en typt zelf.
Hoe ziet een AI-model wat er op je scherm staat?
Je kent het van ChatGPT: je typt een vraag en je krijgt tekst terug. Bij computergebruik krijgt het model ook een beeld van je scherm, net als een screenshot. Daardoor kan het zien welke knoppen, vakjes en menu's er staan.
Het model leest dat beeld zoals jij een pagina leest. Het herkent bijvoorbeeld een veld met de naam 'adres' of een knop 'verzenden'. Daarna bedenkt het welke handeling nu logisch is.
Dat gaat niet in één keer. Het model kijkt, doet een stap en kijkt weer naar het nieuwe scherm. Zo werkt ook een nieuwe collega die je nog niet kent: hij controleert na elke klik of het gelukt is.
Hoe klikt en typt een AI-model zelf?
Het model heeft geen hand en geen muis. Het schrijft in plaats daarvan korte opdrachten, zoals 'klik op deze plek' of 'typ dit woord'. Een programma op je computer voert die opdrachten uit.
Daardoor kan een model werk doen in programma's die niet voor AI zijn gebouwd. Denk aan een oud boekhoudpakket of een website zonder koppeling met andere diensten. Als jij het kunt bedienen, kan het model het in principe ook.
Het nieuws rond GPT-6.1 Terra is hier een voorbeeld van. OpenAI zet bij dit model juist het bedienen van een computer voorop, naast het lezen van beelden. Volgens OpenAI is het daar snel in, maar dat is een bewering van het bedrijf zelf.
Welk werk laat je aan computergebruik over?
Het past het best bij werk dat steeds hetzelfde is. Denk aan gegevens uit een mail overnemen in een formulier, of elke week dezelfde rapportage openen en opslaan. Zo'n klus is saai voor jou, maar duidelijk genoeg voor een model.
Let wel op, want een model kan misklikken. Het leest soms een scherm verkeerd of kiest de verkeerde knop. Kijk dus mee bij alles wat geld kost, gegevens verwijdert of iets verstuurt dat je niet terug kunt halen.
Begin daarom klein. Geef het model een klus die je zelf in vijf minuten doet, en controleer het resultaat. Pas als het meerdere keren goed gaat, kun je het meer overlaten.
Gemeld door 3 bronnen: OpenAI, Simon Willison, Reddit
Lees de bron (naar de bron)Klopt er iets niet?
Onderwerpen: AI-agents
Elke ochtend het AI-nieuws in je mail
Om 07:00 de belangrijkste berichten, in gewone taal. Gratis, en afmelden kan altijd met één klik. Je meldt je aan bij Buttondown, de dienst die de nieuwsbrief voor ons verstuurt.
