Ang AI Fabrication Shield ay ang aming tawag para sa proseso ng beripikasyon ng tao na sumusuri sa bawat sitasyon, estadistika, at mga pahayag na batay sa katotohanan sa iyong manuskrito laban sa orihinal nitong pinagmulan bago ihatid ang akda. Ipinapaliwanag ng pahinang ito ang problemang tinutugunan nito, kung ano mismo ang aming sinusuri at paano, isang tapat na salaysay ng kung ano ang maaari at hindi nito mahuhuli, at kung ano ang iyong matatanggap.

Ang problema, sa pangunahing ebidensya

Ang mga modelo ng malalaking wika ay kadalasang gumagawa ng mga sanggunian na mukhang awtoritatibo ngunit gawa-gawa lamang, maling ipinapalagay, o hinango mula sa mga binawi na akda. Ito ay dokumentado sa mga literaturang sinuri ng mga kapwa eksperto, hindi haka-haka.

Sa isang kontroladong pag-aaral na inilathala sa Journal of Medical Internet Research , sinubukan nina Chelli at mga kasamahan ang ChatGPT at Bard laban sa mga gold-standard systematic review at sinukat kung gaano kadalas nakagawa ang bawat modelo ng mga halusinasyon. Iniulat ng pag-aaral ang malaking antas ng halusinasyon at napagpasyahan na ang mga kagamitang ito ay hindi pa maaasahan upang makabuo ng mga tumpak na sanggunian para sa siyentipikong pagsulat (Chelli et al., 2024, JMIR, doi:10.2196/53164 ).

Isang eksperimental na pag-aaral noong 2025 nina Linardon at mga kasamahan, na nasa JMIR Mental Health din , ang nag-udyok sa GPT-4o na bumuo ng mga pagsusuri sa literatura at sinuri ang mga nagresultang sitasyon. Natuklasan nito na isang makabuluhang proporsyon ng mga sanggunian ang gawa-gawa lamang — hindi masubaybayan sa anumang totoong publikasyon — at tumaas ang mga rate ng paggawa-gawa para sa mga paksang hindi pa gaanong naitatag. Mahalagang tandaan, nabanggit ng mga may-akda na ang mga gawa-gawang sitasyon ay kadalasang nagtataglay ng mga detalyeng mukhang totoong-totoo, na nagpapahirap sa mga ito na matukoy nang walang sinasadyang pagsusuri sa pinagmulan (Linardon et al., 2025, JMIR Mental Health, doi:10.2196/80371 ).

Ang praktikal na aral mula sa kalipunan ng mga akdang ito ay pare-pareho: ang isang gawa-gawang sanggunian ay kadalasang hindi mapag-iiba sa isang tunay na sanggunian sa pahina. Ang tanging maaasahang depensa ay ang pagsuri sa bawat sitasyon laban sa pangunahing pinagmulan — ang orihinal na artikulo sa journal o site ng tagapaglathala — sa halip na magtiwala sa isang nabuong sanggunian sa totoong halaga. Iyan ang ginagawa ng Shield.

Ano ang maaaring maging mali sa isang hindi nasuring sitasyon

Ang mga failure mode na aming sinusuri ay tiyak:

  • Wala ang sanggunian. Isang kapani-paniwalang may-akda, pamagat, dyornal, at taon na hindi tumutugma sa anumang totoong papel.
  • May ibang nakaturo ang DOI. Isang tunay at nareresolbang DOI na naka-link sa isang papel na ganap na naiiba sa nabanggit.
  • Wala sa pinagmulan ang pahayag. Isang totoong papel na binanggit para sa isang natuklasan na hindi nito kailanman iniulat.
  • Binawi na ang source. Isang tunay at wastong nabanggit na papel na binawi na at hindi na dapat pang pagtiwalaan.

Alinman sa mga ito ay maaaring humantong sa pagtanggi ng desk, kawalan ng tiwala ng tagasuri, pagwawasto pagkatapos ng publikasyon, o — sa pinakamasamang kaso — pagbawi na naitala laban sa iyong pangalan.

Ang apat na yugto ng pagpapatunay

Bago ang paghahatid, sinusuri ng isang editor na tao ang bawat sanggunian at paghahabol sa pamamagitan ng apat na pagsusuri:

Yugto 1 — Pagsusuri ng Eksistensya. Ang bawat DOI at PMID ay tinutukoy batay sa pinagmulan ng talaan nito. Kinukumpirma namin ang sanggunian laban sa orihinal na journal o pahina ng tagapaglathala — ang mismong artikulo ng talaan — at sinusuri ito sa pamamagitan ng mga serbisyo sa pag-index tulad ng Crossref , PubMed , at sariling database ng tagapaglathala. Ang may-akda, pamagat, journal, tomo, at taon ay dapat tumugma lahat sa talaan. Ang isang DOI na tumutukoy sa ibang papel ay itinuturing na isang pagkabigo, hindi isang pagpasa.

Yugto 2 — Pagsusuri ng mga Paghahabol. Ang partikular na pahayag na iniuugnay sa bawat sanggunian ay binabasa laban sa abstrak ng papel na iyon o, kung saan pinahihintulutan ng pag-access, ang buong teksto nito sa orihinal na site ng journal. Kung ang sanggunian ay hindi talaga sumusuporta sa pag-aangkin, ang pag-aangkin ay muling isinusulat upang tumugma sa sinasabi ng ebidensya, o ang sitasyon ay pinapalitan ng isa na sumusuporta dito.

Yugto 3 — Pagsusuri sa pagbawi. Ang bawat nabanggit na papel ay sinusuri laban sa Retraction Watch Database at mga abiso sa pagbawi ng PubMed, kaya ang mga akda na binawi ay hindi tahimik na papasok sa iyong listahan ng mga sanggunian.

Yugto 4 — Pagbasa ng eksperto. Susuriin ng isang miyembro ng pangkat na may kaugnay na kadalubhasaan sa doktorado o klinikal ang binanggit na ebidensya sa konteksto, na kinukumpirma na ang mga sanggunian ay tunay na sumusuporta sa argumentong ginagawa — hindi lamang na umiiral ang mga ito.

Isang halimbawang ginamit

Ipagpalagay na ang isang burador ay naglalaman ng pangungusap na ito: “Binawasan ng Interbensyon X ang pag-ulit ng sakit nang 38% sa isang randomized trial (May-akda A et al., 2021).”

  • Stage 1 nalaman na nalutas ng DOI — ngunit sa isang artikulo ng pagsusuri, hindi sa isang randomized trial, at ang listahan ng mga may-akda ay hindi tugma. Na-flag.
  • Stage 2 Kinukumpirma nito na walang 38% na bilang ng pag-ulit na lumalabas kahit saan sa nalutas na papel. Hindi sinusuportahan ang pahayag.
  • resolution: hahanapin ng editor ang tunay na pangunahing pagsubok na nag-uulat ng epekto at itatama ang sitasyon at ang pigura upang tumugma dito, o, kung walang umiiral na ganoong sanggunian, aalisin ang hindi sinusuportahang pahayag. Ang pangungusap na makakarating sa journal ay isa na ang numero at sitasyon ay parehong totoo at magkatugma.

Ito ang uri ng pagkakamali na perpektong nababasa sa pahina at nakakapasa sa kaswal na pagsusuri — kaya naman ang isang sinadya, unti-unting pagsusuri ng tao ang tanging bagay na maaasahang nakakatuklas nito.

Ang hindi inaangkin ng Shield

Tumpak kami pagdating sa saklaw, dahil ang labis na paglalahad nito ay magiging sarili nitong anyo ng problemang sinusubukan naming lutasin. Pinatutunayan ng Shield na mayroong mga sanggunian, na tumutugma ang mga pahayag sa kanilang mga pinagmulan, at na ang mga binanggit na akda ay hindi binabawi sa oras ng paghahatid. Hindi nito ginagarantiyahan, at hindi nito magagarantiyahan, na sasang-ayon ang isang tagasuri sa iyong interpretasyon ng isang pinagmulan, na ang isang papel ay hindi babawiin sa hinaharap, o na ang bawat paghatol sa isang masalimuot na panitikan ang tanging maipagtatanggol. Ang ginagarantiyahan nito ay walang sitasyon sa iyong manuskrito ang gawa-gawa, maling naiugnay, o sadyang binabawi kapag ibinalik namin ito.

Paano ito umaangkop sa ating mas malawak na pamamaraan

Ang Shield ay sumasalamin sa isang prinsipyo na sumasaklaw sa lahat ng aming trabaho: kung saan ginagamit ang anumang tulong sa AI, ito ay palaging inilalagay sa ilalim ng pangangasiwa ng tao at nakabatay sa mga pangunahing mapagkukunan, at hindi ito kailanman pinababayaan. Ang aming buong posisyon dito ay nakasaad sa aming Patakaran sa Paggamit ng AI.

Kung ano ang iyong natanggap

  • Isang manuskrito kung saan ang bawat sitasyon ay na-verify laban sa orihinal nitong pinagmulan — ang artikulo ng talaan ng dyornal o tagapaglathala — hindi lamang isang entry sa indeks.
  • Sinuri ang mga sanggunian para sa pagbawi bago ang paghahatid.
  • Mga pahayag na tumutugma sa mga sangguniang kanilang binabanggit.
  • Isang listahan ng mga sanggunian na maaari mong bantayan sa pagsusuri at pagkatapos ng publikasyon.

Kasama ang Shield sa bawat manuskrito na aming isinusulat o muling isinusulat. Para talakayin ang iyong proyekto, makipag-ugnayan sa aming koponan.

Mga sanggunian

Chelli M, Descamps J, Lavoué V, et al. Mga Rate ng Halusinasyon at Katumpakan ng Sanggunian ng ChatGPT at Bard para sa mga Sistematikong Pagsusuri: Paghahambing na Pagsusuri. J Med Internet Res . 2024;26:e53164. doi:10.2196/53164

Linardon J, Jarman HK, McClure Z, et al. Impluwensya ng Pamilyaridad sa Paksa at Pagtitiyak ng Mabilisang Pagbanggit sa Paggawa ng Sitasyon sa Pananaliksik sa Kalusugang Pangkaisipan Gamit ang Malalaking Modelo ng Wika: Eksperimental na Pag-aaral. JMIR Ment Health . 2025;12:e80371. doi:10.2196/80371