Cara Memverifikasi Sitasi yang Dihasilkan AI

Anda harus memverifikasi setiap sitasi yang dihasilkan AI dengan mengonfirmasi secara independen bahwa sumber tersebut ada dan bahwa kontennya benar-benar mendukung klaim spesifik yang dilampirkan padanya. Jangan percaya pada output model; perlakukan setiap referensi sebagai hipotesis yang memerlukan pengujian forensik terhadap catatan bibliografi eksternal dan teks asli.

Mode Kegagalan Spesifik dalam Pembuatan Sitasi AI

Model bahasa besar sering menghasilkan sitasi yang tampak masuk akal tetapi secara struktural rusak. Kesalahan ini umumnya terbagi ke dalam tiga kategori:

• Judul yang berhalusinasi. Model mengarang judul yang terdengar sesuai secara akademis tetapi tidak ada. Judul tersebut mungkin menggabungkan konsep nyata dari bidang yang berbeda, menciptakan frasa yang tampak logis tetapi tidak memiliki riwayat publikasi.
• Penulis yang tidak cocok. Judul atau topiknya nyata, tetapi daftar penulisnya salah. Model mungkin menetapkan sebuah makalah kepada peneliti terkenal di bidang tersebut yang tidak menulisnya, atau menukar nama depan dan belakang. Model juga mungkin mengarang penulis tambahan agar sitasi terlihat lebih kuat.
• Tahun dan metadata yang salah. Tahun publikasi, nomor volume, rentang halaman, atau DOI mungkin direkayasa. Kesalahan umum adalah menetapkan tahun terbaru untuk karya seminal yang lebih lama, atau melampirkan DOI yang mengarah ke artikel yang sama sekali berbeda.

Kesalahan ini berbahaya karena sering kali halus. Pembaca mungkin sekilas melihat sitasi, mengenali topiknya, dan menganggap referensi tersebut valid tanpa memeriksa detailnya.

Alur Kerja Verifikasi Langkah demi Langkah

Untuk memeriksa sitasi secara sistematis, ikuti urutan ini. Anda perlu memverifikasi keberadaan terlebih dahulu, lalu dukungan.

1. Isolasi metadata. Salin detail sitasi lengkap (penulis, judul, tahun, sumber, DOI jika ada) dari draf Anda.

2. Verifikasi keberadaan melalui DOI atau Registry. Jika DOI tersedia, gunakan Crossref untuk melakukan kueri pada registry DOI. Pastikan DOI tersebut mengarah ke rekaman nyata dan bahwa metadata cocok persis dengan sitasi Anda. Jika tidak ada DOI, atau jika Anda memeriksa buku atau bab, gunakan OpenAlex untuk melakukan kueri kombinasi judul dan penulis. Periksa apakah rekaman yang cocok ada dalam indeks akademik terbuka.

3. Lakukan pemeriksaan silang dengan basis data sekunder. Gunakan Google Scholar untuk mencari judul tersebut. Cari beberapa instance sitasi tersebut. Jika makalah tersebut ada, Anda akan melihatnya dikutip oleh peneliti lain. Periksa abstrak untuk memastikan topiknya cocok. Untuk sitasi biomedis, gunakan PubMed untuk memverifikasi keberadaan artikel dalam basis data ilmu hayati dan untuk meninjau abstraknya. Untuk cakupan yang lebih luas, terutama jika Anda memiliki akses ke langganan institusional, gunakan Scopus untuk mengonfirmasi keberadaan dan konteks artikel tersebut.

4. Verifikasi dukungan klaim. Ini adalah langkah paling kritis. Akses teks lengkap atau abstrak dari sumber yang telah diverifikasi. Baca bagian spesifik tempat klaim tersebut seharusnya dibuat. Tanyakan: apakah sumber ini benar-benar mengajukan argumen ini? Apakah sumber ini menyediakan data atau teori yang diimplikasikan oleh draf Anda? Jika sumber hanya menyebutkan topik tersebut sekilas atau berargumen sebaliknya, sitasi tersebut tidak valid untuk tujuan Anda.

5. Catat referensi yang telah diverifikasi. Setelah dikonfirmasi, simpan rekaman tersebut di Zotero atau Mendeley. Alat-alat ini memungkinkan Anda menyimpan metadata yang telah diverifikasi. Dengan membandingkan sitasi hasil AI terhadap rekaman tersimpan Anda yang telah diverifikasi, Anda menciptakan pustaka kebenaran lokal yang mencegah kesalahan di masa depan.

Tanda Bahaya yang Menunjukkan Sitasi Fiktif

Waspada terhadap pola-pola berikut:

• Judul yang terlalu generik. Judul yang secara tata bahasa benar tetapi kurang memiliki nuansa spesifik dari bahasa akademis yang sesungguhnya.
• DOI yang tidak valid. DOI yang mengikuti format tetapi tidak dapat diakses, atau mengarah ke halaman beranda penerbit alih-alih artikel tertentu.
• Daftar penulis yang terlalu panjang atau terlalu pendek. Makalah asli di sebagian besar bidang memiliki rentang jumlah penulis yang khas. Daftar berisi 15 penulis untuk makalah teoretis, atau satu penulis untuk studi empiris berskala besar, dapat mengindikasikan adanya fabrikasi.
• Kesalahan pembulatan pada tanggal. Jika AI mengutip makalah dari "2024" tetapi menggambarkan temuan yang membutuhkan data longitudinal selama satu dekade, tanggal tersebut kemungkinan salah.
• Ilusi "Keyakinan". Jika AI menyajikan kutipan dengan keyakinan tinggi dan tanpa keraguan, bersikaplah lebih hati-hati, bukan sebaliknya. Model sering kali paling yakin ketika mereka sedang berhalusinasi.

Menyusun Prompt untuk Mengurangi Kesalahan Kutipan

Anda dapat mengurangi kemungkinan kesalahan dengan membatasi output AI selama fase penyusunan.

• Minta metadata spesifik. Jangan meminta "makalah yang relevan." Mintalah "tiga makalah yang diterbitkan setelah 2020 dengan DOI." Jika Anda tidak meminta DOI, model kemungkinan akan menghasilkan judul palsu.
• Batasi cakupan. Minta kutipan untuk klaim yang sangat spesifik, bukan topik yang luas. Semakin spesifik klaimnya, semakin kecil kemungkinan model menyimpang ke wilayah halusinasi.
• Minta petunjuk verifikasi. Minta model untuk menyebutkan kalimat pertama abstrak atau kesimpulan spesifik dari makalah tersebut. Jika model tidak dapat memberikan potongan yang koheren, kemungkinan besar sumber tersebut dikarang sendiri.
• Gunakan pemeriksaan iteratif. Hasilkan daftar lima kutipan untuk suatu klaim. Verifikasi dua di antaranya. Jika keduanya palsu, buang seluruh daftar. Jika keduanya asli, verifikasi tiga sisanya. Pendekatan pengambilan sampel ini menghemat waktu sambil menjaga akurasi tinggi.