Large language models in de praktijk: Potentiële toepassingen voor het Nederlands Jeugdinstituut

Abstract

Het doel van dit onderzoek was het Nederlands Jeugdinstituut advies geven over de potentie en het gebruik van large language models. Het kennisinstituut had twee vragen: (1) “Wat zijn large language models en waar moeten we rekening mee houden als we large language models gebruiken in de organisatie?” en (2) “Wat kan een potentiële large language model-tool betekenen voor de medewerkers betrokken bij de web-teksten en voor de kwaliteit en vindbaarheid van de web-teksten?” Deze vragen zijn beantwoord met drie studies. De eerste studie betrof een literatuuronderzoek naar large language models, de potentiële toepassingen van deze modellen en ethische en technologische kwesties rondom deze modellen. De tweede studie betrof een onderzoek naar de toepassing van large language models voor web-teksten redigeren op begrijpelijkheid. Vijf redacteurs hebben elk zes teksten geredigeerd, waarvan drie met Typetone en drie zonder Typetone. Nadat zij de teksten hadden geredigeerd, zijn hun ervaringen en inzichten verzameld met interviews. Ook zijn de teksten beoordeeld op begrijpelijkheid door LiNT, een leesbaarheidsinstrument om teksten mee te analyseren. Het laatste onderdeel van deze studie betrof de redigeertijd per tekst. De derde studie richtte zich op zoekmachineoptimalisatie door zoekwoordenonderzoek uit te voeren met Typetone, web-teksten te optimaliseren voor zoekmachines met Typetone en door zoekwoordenonderzoek met Typetone te vergelijken met zoekwoordenonderzoek van een marketingbureau. Uit dit onderzoek blijkt dat large language models in de basis voorspellingsmachines zijn en dat de huidige werkwijze van het Nederlands Jeugdinstituut omtrent kunstmatige intelligentie wordt ondersteund, verklaard en uitgebreid door de wetenschap. Ook blijkt dat Typetone een beperkte bijdrage levert aan de medewerkers betrokken bij de web-teksten en de kwaliteit en de vindbaarheid van de web-teksten. Echter, Typetone toont wel potentie. Wellicht kan de bijdrage van Typetone vergroot worden als de tool beter aansluit bij de behoeften van het Nederlands Jeugdinstituut. Dit rapport sluit af met vier adviezen voor het Nederlands Jeugdinstituut over welke vervolgstappen zij kan zetten om large language models in te zetten binnen haar organisatie.