Hoe u AI-gegenereerde citaten verifieert

U moet elk AI-gegenereerd citaat verifiëren door onafhankelijk te bevestigen dat de bron bestaat en dat de inhoud de specifieke bewering daadwerkelijk ondersteunt. Vertrouw niet op de uitvoer van het model; behandel elke referentie als een hypothese die forensisch moet worden getoetst aan externe bibliografische records en de originele tekst.

De specifieke foutmodi van AI-citaatgeneratie

Grote taalmodellen genereren vaak citaten die plausibel lijken maar structureel gebrekkig zijn. Deze fouten vallen doorgaans in drie categorieën:

• Gehallucineerde titels. Het model verzint een titel die academisch passend klinkt maar niet bestaat. De titel kan echte concepten uit verschillende vakgebieden combineren, waardoor een frase ontstaat die logisch lijkt maar geen publicatiegeschiedenis heeft.
• Verkeerde auteurs. De titel of het onderwerp is echt, maar de lijst met auteurs is onjuist. Het model kan een paper toewijzen aan een bekende onderzoeker in het vakgebied die het niet heeft geschreven, of voor- en achternamen omwisselen. Het kan ook mede-auteurs verzinnen om het citaat robuuster te laten lijken.
• Onjuiste jaren en metadata. Het publicatiejaar, het volume, het paginabereik of de DOI kan zijn verzonnen. Een veelvoorkomende fout is het toekennen van een recent jaar aan een ouder baanbrekend werk, of het koppelen van een DOI die verwijst naar een volledig ander artikel.

Deze fouten zijn gevaarlijk omdat ze vaak subtiel zijn. Een lezer kan vluchtig naar een citaat kijken, het onderwerp herkennen en aannemen dat de referentie geldig is zonder de details te controleren.

Stapsgewijze verificatiewerkstroom

Volg deze sequentie om een citaat systematisch te controleren. U moet eerst het bestaan verifiëren, daarna de ondersteuning.

1. Scheid de metadata. Kopieer de volledige citatiegegevens (auteurs, titel, jaar, bron, DOI indien aanwezig) uit je concept.

2. Verifieer het bestaan via DOI of Registry. Als er een DOI is opgegeven, gebruik dan Crossref om de DOI-registry te raadplegen. Controleer of de DOI verwijst naar een echt record en of de metadata exact overeenkomt met je citatie. Als er geen DOI is opgegeven, of als je een boek of hoofdstuk controleert, gebruik dan OpenAlex om de combinatie van titel en auteur te zoeken. Controleer of er een overeenkomend record bestaat in de open wetenschappelijke index.

3. Kruisverifieer met een secundaire database. Gebruik Google Scholar om op de titel te zoeken. Zoek naar meerdere instanties van de citatie. Als het artikel bestaat, zou je het geciteerd moeten zien door andere onderzoekers. Controleer het abstract om te zien of het onderwerp overeenkomt. Voor biomedische citaties gebruik je PubMed om te verifiëren of het artikel in de levenswetenschappelijke database staat en om het abstract te bekijken. Voor bredere dekking, vooral als je toegang hebt tot institutionele abonnementen, gebruik je Scopus om het bestaan en de context van het artikel te bevestigen.

4. Verifieer de ondersteuning van de bewering. Dit is de belangrijkste stap. Open de volledige tekst of het abstract van de geverifieerde bron. Lees het specifieke deel waar de bewering supposedly wordt gedaan. Vraag jezelf af: maakt deze bron dit argument daadwerkelijk? Biedt het de gegevens of theorie die je concept impliceert? Als de bron het onderwerp slechts terloops noemt of het tegenovergestelde betoogt, is de citatie voor jouw doel ongeldig.

5. Leg de geverifieerde referentie vast. Sla het record na bevestiging op in Zotero of Mendeley. Deze tools stellen je in staat om de geverifieerde metadata op te slaan. Door de AI-gegenereerde citatie te vergelijken met je opgeslagen, geverifieerde records, creëer je een lokale bibliotheek van waarheid die toekomstige fouten voorkomt.

Waarschuwingsvlaggen die wijzen op een gefabriceerde citatie

Wees alert op de volgende patronen:

• Volledig generieke titels. Titels die grammaticaal correct zijn, maar de specifieke nuance van echte academische taal missen.
• Onmogelijke DOI's. DOI's die het format volgen maar niet werken, of die verwijzen naar de homepage van een uitgever in plaats van naar een specifiek artikel.
• Auteurslijsten die te lang of te kort zijn. In de meeste vakgebieden hebben echte papers een typisch aantal auteurs. Een lijst van 15 auteurs voor een theoretisch paper, of één auteur voor een grootschalige empirische studie, kan wijzen op fabricage.
• Afrondingsfouten in data. Als de AI een paper uit "2024" citeert maar bevindingen beschrijft die een decennium aan longitudinale data vereisen, is de datum waarschijnlijk onjuist.
• De "Confidence"-illusie. Als de AI de citatie met veel zekerheid en zonder aarzeling presenteert, wees dan juist voorzichtiger, niet minder. Modellen zijn vaak het meest zeker als ze hallucineren.

Prompts structureren om citatiefouten te verminderen

Je kunt de kans op fouten verkleinen door de uitvoer van de AI tijdens de opzetfase te beperken.

• Vereis specifieke metadata. Vraag niet om "relevante papers". Vraag om "drie papers gepubliceerd na 2020 met DOI's". Als je niet om DOI's vraagt, zal het model waarschijnlijk neppe titels genereren.
• Beperk de scope. Vraag om citaties voor een zeer specifieke bewering, niet voor een breed onderwerp. Hoe smaller de bewering, hoe kleiner de kans dat het model afdwaalt naar hallucinaties.
• Vraag om verificatiehulpmiddelen. Laat het model de eerste zin van de abstract of de specifieke conclusie van het paper noemen. Als het geen coherente snippet kan leveren, verzint het waarschijnlijk de bron.
• Gebruik iteratieve controle. Genereer een lijst met vijf citaties voor een bewering. Verifieer er twee. Als beide nep zijn, gooi je de hele lijst weg. Als beide echt zijn, verifieer je de overige drie. Deze steekproefmethode bespaart tijd en behoudt hoge nauwkeurigheid.