Jak ověřit citace vytvořené pomocí AI

Každou citaci vytvořenou pomocí AI musíte ověřit tak, že nezávisle potvrdíte existenci zdroje a že jeho obsah skutečně podporuje konkrétní tvrzení, ke kterému je přiřazena. Nevěřte výstupu modelu; každou referenci považujte za hypotézu, která vyžaduje pečlivé prověření oproti externím bibliografickým záznamům a původnímu textu.

Konkrétní způsoby selhání generování citací pomocí AI

Velké jazykové modely často generují citace, které vypadají věrohodně, ale jsou strukturně chybné. Tyto chyby se obvykle dělí do tří kategorií:

• Halucinované názvy. Model vymyslí název, který zní akademicky vhodně, ale neexistuje. Název může kombinovat reálné pojmy z různých oborů a vytvořit tak frázi, která se zdá logická, ale nemá žádnou publikační historii.
• Nesouladující autoři. Název nebo téma je reálné, ale seznam autorů je špatně. Model může přiřadit článek známému výzkumníkovi v oboru, který jej nenapsal, nebo prohodit křestní a příjmení. Může také vymyslet spoluautory, aby citace působila robustněji.
• Nesprávné roky a metadata. Rok vydání, číslo svazku, rozsah stránek nebo DOI mohou být vymyšlené. Běžnou chybou je přiřazení nedávného roku staršímu zásadnímu dílu nebo připojení DOI, které odkazuje na zcela jiný článek.

Tyto chyby jsou nebezpečné, protože jsou často nenápadné. Čtenář může rychle zkontrolovat citaci, poznat téma a předpokládat, že odkaz je platný, aniž by ověřil podrobnosti.

Krok za krokem: Ověřovací postup

Pro systematickou kontrolu citace postupujte podle této posloupnosti. Nejprve je třeba ověřit existenci, poté podporu.

1. Izolujte metadata. Zkopírujte úplné citační údaje (autory, název, rok, zdroj, DOI, pokud je uvedeno) ze svého konceptu.

2. Ověřte existenci pomocí DOI nebo registru. Pokud je uvedeno DOI, použijte Crossref k dotazu do registru DOI. Potvrďte, že DOI odkazuje na skutečný záznam a že metadata přesně odpovídají vaší citaci. Pokud DOI není uvedeno, nebo pokud kontrolujete knihu či kapitolu, použijte OpenAlex k dotazu na kombinaci názvu a autora. Zkontrolujte, zda v otevřeném akademickém indexu existuje odpovídající záznam.

3. Prověřte pomocí sekundární databáze. Použijte Google Scholar k vyhledání názvu. Hledejte více instancí citace. Pokud článek existuje, měl by být citován jinými výzkumníky. Zkontrolujte abstrakt, aby byl zajištěn soulad tématu. Pro biomedicínské citace použijte PubMed k ověření existence článku v databázi životních věd a ke zkontrolování abstraktu. Pro širší pokrytí, zejména pokud máte přístup k institucionálním předplatným, použijte Scopus k potvrzení existence a kontextu článku.

4. Ověřte podporu tvrzení. Toto je nejdůležitější krok. Přistupte k plnému textu nebo abstraktu ověřeného zdroje. Přečtěte si konkrétní sekci, kde má být tvrzení uvedeno. Zeptejte se: skutečně tento zdroj předkládá tento argument? Poskytuje data nebo teorii, které váš koncept implikuje? Pokud zdroj zmiňuje téma pouze okrajově nebo argumentuje opačně, je citace pro váš účel neplatná.

5. Zaznamenejte ověřenou referenci. Po potvrzení uložte záznam v Zotero nebo Mendeley. Tyto nástroje umožňují ukládat ověřená metadata. Porovnáním AI-generované citace s vašimi uloženými, ověřenými záznamy vytvoříte lokální knihovnu pravdivých údajů, která zabraňuje budoucím chybám.

Varovné příznaky indikující fabrikovanou citaci

Buďte obezřetní vůči následujícím vzorcům:

• Příliš obecné názvy. Názvy, které jsou gramaticky správné, ale postrádají specifický odstín reálného akademického jazyka.
• Nemožná DOI. DOI, která odpovídají formátu, ale nevedou na cíl, nebo které přesměrovávají na domovskou stránku vydavatele místo na konkrétní článek.
• Seznamy autorů, které jsou příliš dlouhé nebo příliš krátké. Reálné práce ve většině oborů mají typický rozsah počtu autorů. Seznam 15 autorů pro teoretickou práci nebo jeden autor pro rozsáhlou empirickou studii může signalizovat fabrikaci.
• Chyby zaokrouhlení v datech. Pokud AI cituje práci z roku "2024", ale popisuje zjištění, která vyžadují desetiletý longitudinální datový soubor, je datum pravděpodobně nesprávné.
• Iluze "Sebedůvěry". Pokud AI prezentuje citaci s vysokou sebedůvěrou a bez zaváhání, buďte opatrnější, nikoli méně. Modely jsou často nejsebedůvěrnější právě tehdy, když halucinují.

Strukturování promptů pro snížení chyb v citacích

Pravděpodobnost chyb můžete snížit omezením výstupu AI během fáze tvorby konceptu.

• Vyžadujte specifická bibliografická metadata. Nežádejte o "relevantní práce". Žádejte o "tři práce vydané po roce 2020 s DOI". Pokud nevyžadujete DOI, model pravděpodobně vygeneruje falešné názvy.
• Omezte rozsah. Žádejte o citace pro velmi úzce vymezené tvrzení, nikoli pro široké téma. Čím užší je tvrzení, tím menší je pravděpodobnost, že model sklouzne do oblasti halucinací.
• Vyžádejte si ověřovací vodítka. Požádejte model, aby uvedl první větu abstraktu nebo specifický závěr práce. Pokud nedokáže poskytnout koherentní úryvek, pravděpodobně zdroj vymýšlí.
• Používejte iterativní kontrolu. Vygenerujte seznam pěti citací pro tvrzení. Ověřte dvě z nich. Pokud jsou obě falešné, zahodte celý seznam. Pokud jsou obě skutečné, ověřte zbývající tři. Tento přístup vzorkování šetří čas při zachování vysoké přesnosti.