Perisai Fabrikasi AI ialah nama kami untuk proses pengesahan manusia yang menyemak setiap petikan, statistik dan dakwaan fakta dalam manuskrip anda berbanding sumber asalnya sebelum karya dihantar. Halaman ini menerangkan masalah yang ditanganinya, apa yang kami semak dan bagaimana, penjelasan yang jujur ​​tentang apa yang boleh dan tidak boleh ditangkapnya, dan apa yang anda terima.

Masalahnya, dalam bukti utama

Model bahasa yang besar kerap menghasilkan rujukan yang kelihatan berwibawa tetapi direka-reka, disalahartikan atau diambil daripada karya yang ditarik balik. Ini didokumenkan dalam literatur yang dikaji semula oleh rakan sebaya, bukan spekulasi.

Dalam satu kajian terkawal yang diterbitkan dalam Journal of Medical Internet Research , Chelli dan rakan-rakannya menguji ChatGPT dan Bard berbanding ulasan sistematik standard emas dan mengukur kekerapan setiap model menghasilkan rujukan halusinasi. Kajian tersebut melaporkan kadar halusinasi yang ketara dan menyimpulkan bahawa alat-alat ini masih belum boleh diandalkan untuk menghasilkan rujukan yang tepat untuk penulisan saintifik (Chelli et al., 2024, JMIR, doi:10.2196/53164 ).

Satu kajian eksperimen pada tahun 2025 oleh Linardon dan rakan-rakannya, juga dalam JMIR Mental Health , mendorong GPT-4o untuk menghasilkan ulasan literatur dan meneliti petikan yang terhasil. Ia mendapati bahawa sebahagian besar rujukan yang bermakna telah direka-reka — tidak dapat dikesan kepada mana-mana penerbitan sebenar — dan kadar fabrikasi meningkat untuk topik yang kurang mantap. Secara kritisnya, penulis menyatakan bahawa petikan yang direka-reka sering membawa butiran yang kelihatan nyata, menjadikannya sukar untuk dikesan tanpa pemeriksaan sumber yang disengajakan (Linardon et al., 2025, JMIR Mental Health, doi:10.2196/80371 ).

Pengajaran praktikal daripada karya ini adalah konsisten: rujukan palsu selalunya tidak dapat dibezakan daripada rujukan sebenar pada halaman tersebut. Satu-satunya pembelaan yang boleh dipercayai adalah dengan menyemak setiap petikan terhadap sumber utama — artikel asal di jurnal atau laman web penerbit — daripada mempercayai rujukan yang dijana pada nilai muka. Itulah yang dilakukan oleh Shield.

Apa yang boleh menjadi salah dengan petikan yang tidak ditanda

Mod kegagalan yang kami saring adalah khusus:

  • Rujukan itu tidak wujud. Pengarang, tajuk, jurnal dan tahun yang munasabah yang tidak sepadan dengan kertas kerja sebenar.
  • DOI menunjukkan tempat lain. DOI sebenar yang boleh diselesaikan yang memautkan kepada kertas yang sama sekali berbeza daripada yang dinamakan.
  • Dakwaan itu tiada dalam sumbernya. Satu kertas kerja sebenar yang dipetik kerana dapatan yang tidak pernah dilaporkannya.
  • Sumber itu telah ditarik balik. Kertas kerja yang sebenar dan dipetik dengan betul yang telah ditarik balik dan tidak boleh diandalkan.

Mana-mana satu daripada ini boleh menyebabkan penolakan meja, ketidakpercayaan pengulas, pembetulan pasca penerbitan atau — dalam kes terburuk — penarikan balik yang direkodkan terhadap nama anda.

Empat peringkat pengesahan

Sebelum penghantaran, editor manusia mengambil setiap rujukan dan tuntutan melalui empat semakan:

Peringkat 1 — Semakan kewujudan. Setiap DOI dan PMID diselesaikan mengikut sumber rekodnya. Kami mengesahkan rujukan terhadap jurnal asal atau halaman penerbit — artikel rekod itu sendiri — dan menyemak silangnya melalui perkhidmatan pengindeksan seperti Crossref , PubMed dan pangkalan data penerbit sendiri. Pengarang, tajuk, jurnal, jilid dan tahun mesti sepadan dengan rekod. DOI yang diselesaikan mengikut kertas yang berbeza dianggap sebagai gagal, bukan lulus.

Peringkat 2 — Semakan tuntutan. Pernyataan khusus yang dikaitkan dengan setiap sumber dibaca berdasarkan abstrak kertas tersebut atau, jika akses membenarkan, teks penuhnya di laman jurnal asal. Jika sumber tersebut sebenarnya tidak menyokong tuntutan tersebut, tuntutan tersebut ditulis semula agar sepadan dengan apa yang dinyatakan dalam bukti, atau petikan digantikan dengan petikan yang menyokongnya.

Peringkat 3 — Pemeriksaan penarikan balik. Setiap kertas yang dipetik ditapis berdasarkan Pangkalan Data Pemerhatian Penarikan Balik dan notis penarikan balik PubMed, jadi kerja yang ditarik balik tidak akan dimasukkan ke dalam senarai rujukan anda secara senyap.

Peringkat 4 — Bacaan pakar. Ahli pasukan dengan kepakaran kedoktoran atau klinikal yang berkaitan menyemak bukti yang dipetik dalam konteks, mengesahkan bahawa rujukan tersebut benar-benar menyokong hujah yang dibuat — bukan sekadar ia wujud.

Contoh yang telah diusahakan

Katakan draf mengandungi ayat ini: “Intervensi X mengurangkan pengulangan sebanyak 38% dalam percubaan rawak (Pengarang A et al., 2021).”

  • Peringkat 1 mendapati DOI menyelesaikan — tetapi kepada artikel ulasan, bukan percubaan rawak, dan senarai pengarang tidak sepadan. Ditandai.
  • Peringkat 2 mengesahkan tiada angka pengulangan 38% muncul di mana-mana sahaja dalam kertas yang diselesaikan. Dakwaan itu tidak disokong.
  • Resolusi: Editor sama ada mencari percubaan utama tulen yang melaporkan kesan tersebut dan membetulkan petikan dan angka tersebut agar sepadan dengannya, atau, jika tiada sumber sedemikian wujud, mengalih keluar dakwaan yang tidak disokong. Ayat yang sampai ke jurnal ialah ayat yang nombor dan petikannya adalah nyata dan sejajar.

Ini adalah jenis ralat yang terbaca dengan sempurna pada halaman dan lulus semakan sambil lewa — itulah sebabnya pemeriksaan manusia yang disengajakan, berperingkat demi berperingkat adalah satu-satunya perkara yang dapat mengesannya dengan pasti.

Apa yang tidak dituntut oleh Shield

Kami tepat tentang skop, kerana melebih-lebihkannya akan menjadi bentuk tersendiri bagi masalah yang kami cuba selesaikan. Perisai mengesahkan bahawa rujukan wujud, bahawa dakwaan sepadan dengan sumbernya, dan bahawa karya yang dipetik tidak ditarik balik pada masa penghantaran. Ia tidak, dan tidak boleh, menjamin bahawa pengulas akan bersetuju dengan tafsiran anda tentang sumber, bahawa kertas kerja tidak akan ditarik balik pada masa hadapan, atau bahawa setiap keputusan penghakiman dalam literatur yang kompleks adalah satu-satunya keputusan yang boleh dipertahankan. Apa yang dijaminnya ialah tiada petikan dalam manuskrip anda yang direka, disalahgunakan, atau ditarik balik secara sengaja apabila kami mengembalikannya.

Bagaimana ini sesuai dengan pendekatan kita yang lebih luas

Perisai ini mencerminkan satu prinsip yang merangkumi semua kerja kami: di mana sebarang bantuan AI digunakan, ia sentiasa diletakkan di bawah pengawasan manusia dan berasaskan sumber utama, dan ia tidak pernah dibiarkan tanpa disemak. Pendirian penuh kami mengenai perkara ini dinyatakan dalam Dasar Penggunaan AI kami.

Apa yang anda terima

  • Manuskrip yang mana setiap petikan telah disahkan terhadap sumber asalnya — jurnal atau artikel rekod penerbit — bukan sekadar entri indeks.
  • Rujukan telah ditapis untuk penarikan balik sebelum penghantaran.
  • Dakwaan yang sepadan dengan sumber yang mereka petik.
  • Senarai rujukan yang boleh anda nantikan semasa semakan dan selepas penerbitan.

Perisai disertakan pada setiap manuskrip yang kami tulis atau tulis semula. Untuk membincangkan projek anda, hubungi pasukan kami.

Rujukan

Chelli M, Descamps J, Lavoué V, dkk. Kadar Halusinasi dan Ketepatan Rujukan ChatGPT dan Bard untuk Kajian Sistematik: Analisis Perbandingan. J Med Internet Res . 2024;26:e53164. doi:10.2196/53164

Linardon J, Jarman HK, McClure Z, dkk. Pengaruh Keakraban Topik dan Kekhususan Gesaan terhadap Pembuatan Petikan dalam Penyelidikan Kesihatan Mental Menggunakan Model Bahasa Besar: Kajian Eksperimen. JMIR Ment Health . 2025;12:e80371. doi:10.2196/80371