Kako proveriti da li ChatGPT daje tačan odgovor?
ChatGPT može da zvuči ubedljivo, a da odgovor ipak bude nepotpun ili pogrešan. Zato ne proveravaj ton odgovora, već njegovu najvažniju tvrdnju: izdvoji je i proveri u odgovarajućem izvoru van ChatGPT-a. OpenAI savetuje proveru važnih činjenica, datuma, citata i tvrdnji pre upotrebe ili deljenja odgovora.
Koristi ovih pet koraka:
- Izdvoji tvrdnju.
- Odredi kakav izvor ti treba.
- Otvori izvor van ChatGPT-a.
- Proveri da li izvor stvarno podržava tvrdnju i da li je dovoljno aktuelan.
- Ako postoji važno neslaganje, proveri drugi relevantan izvor ili pitaj nastavnika ili profesora.
Ovih pet koraka pomažu ti da proveriš tvrdnje na kojima se tvoj zaključak, zadatak ili odluka zaista zasnivaju. Oni dopunjuju postupak za učenje uz ChatGPT bez prepisivanja, u kome provera dolazi posle sopstvenog pokušaja i objašnjenja.
Prvo izdvoji šta tačno proveravaš
Dug odgovor može da sadrži objašnjenje, primere, datume i zaključak. Ne proveravaj sve odjednom. Počni od tvrdnje koja bi napravila najveći problem ako je pogrešna.
To može biti datum ili školsko pravilo, definicija iz gradiva, citat, statistika, informacija koja se vremenom menja ili zaključak izveden iz objašnjenja. Na primer, naš vodič za malu maturu 2027 odvaja potvrđene datume ispita od rokova koji tek treba da budu objavljeni.
Problem nije uvek ista vrsta greške: možda nedostaje važan uslov, podatak je zastareo ili navedeni izvor uopšte ne potkrepljuje tvrdnju. Zato pitanje „Da li je ovo tačno?“ pretvori u preciznije: „Da li ovaj rok važi za moju školsku godinu?“ ili „Da li u navedenom tekstu zaista piše ovo što odgovor tvrdi?“
Šta proveravaš, gde proveravaš i šta porediš
Vrsta tvrdnje određuje gde je tražiš. Prvi rezultat na pretraživaču nije nužno i najbolji izvor.
| Šta proveravaš? | Gde treba da proveriš? | Šta tačno porediš? |
|---|---|---|
| Školski rok ili pravilo | Aktuelno obaveštenje škole ili nadležne institucije | Tačan rok ili pravilo, školsku godinu, grupu učenika i uslove na koje se informacija odnosi |
| Definiciju ili činjenicu iz školskog gradiva | Udžbenik, materijal nastavnika ili drugi pouzdan obrazovni izvor za taj predmet | Da li je pojam objašnjen u istom značenju i da li je izostavljen važan deo definicije |
| Citat | Originalni tekst, govor, knjiga ili pouzdano izdanje koje prenosi original | Da li citat zaista postoji, da li je verno prenet i da li je pripisan pravoj osobi |
| Statistički podatak | Originalni izveštaj ili baza ustanove koja je podatak objavila | Broj, period, grupu na koju se podatak odnosi i mernu jedinicu |
| Informaciju koja se menja, kao što su raspored ili funkcija digitalnog alata | Najnovija zvanična stranica ili aktuelno obaveštenje odgovorne ustanove ili proizvođača | Datum objave ili ažuriranja, verziju i da li informacija još važi |
| Zaključak zasnovan na objašnjenju | Izvor koji objašnjava relevantne činjenice ili korake, a po potrebi i drugi nezavisni stručni izvor | Da li su polazne činjenice tačno prenete i da li iz njih zaista sledi zaključak koji je ChatGPT dao |
Za rok ti treba aktuelna zvanična objava, za citat originalni tekst, a za statistiku izveštaj koji objašnjava šta je mereno. Ako tek biraš alat za dokumente, matematiku ili pronalaženje izvora, uporedi AI alate prema školskom zadatku; izbor drugog alata ipak ne zamenjuje proveru.
Izvor postoji — ali da li stvarno podržava tvrdnju?
ChatGPT može da navede naslov, autora ili link koji izgleda sasvim uredno. Čak i kada link vodi ka stvarnoj stranici, time još nije potvrđena tvrdnja iz odgovora.
Važno je razlikovati pet stvari:
- Odgovor zvuči ubedljivo. To govori o načinu pisanja, ne o tačnosti.
- Izvor postoji. Link se otvara ili dokument zaista postoji.
- Izvor je relevantan. Bavi se istim pitanjem, grupom, periodom i kontekstom.
- Izvor podržava tvrdnju. U tekstu postoji podatak ili obrazloženje koje zaista vodi do navedenog zaključka.
- Izvor je dovoljno aktuelan. Datum odgovara pitanju koje proveravaš.
Kada otvoriš izvor, pogledaj ko ga je objavio, kada je objavljen ili ažuriran i da li govori baš o tvom pitanju. Zatim pronađi deo izvora koji potvrđuje tvrdnju i pročitaj ga: da li stvarno podržava zaključak?
Biblioteka Univerziteta Ilinois savetuje da proveriš koliko je izvor relevantan, ko je autor, na kojim dokazima počiva i koliko je aktuelan. Zato ni poznat naziv ustanove ni ozbiljan izgled stranice nisu dovoljni ako konkretan sadržaj ne odgovara na pitanje koje proveravaš.
Zamisli da ChatGPT tvrdi da neki tekst dokazuje određeni zaključak i daje link ka stvarnom članku. Kada ga otvoriš, vidiš da članak govori o istoj široj temi, ali ne o pitanju iz odgovora. Link postoji i tema je slična, ali izvor ne podržava preciznu tvrdnju. Tek kada pročitaš relevantni deo, zaista proveravaš tvrdnju; samo navođenje izvora nije dovoljno.
Za informacije koje se menjaju proveri datum
Datumi, školski rokovi, pravila, rasporedi, statistike i funkcije programa mogu biti tačno preneti iz starog izvora, a ipak ne odgovarati na sadašnje pitanje.
Kod takve tvrdnje proveri na koji period se odnosi, kada je izvor objavljen ili poslednji put ažuriran, postoji li novija zvanična objava i da li ona menja prethodnu informaciju.
Ne pretpostavljaj da je odgovor zastareo samo zato što ga je dao ChatGPT. Proveri datum i verziju izvora. OpenAI takođe upućuje korisnika da proveri da li je korišćen odgovarajući i najnoviji izvorni materijal.
Da li je dovoljno pitati ChatGPT: „Jesi li siguran?“
Dodatno pitanje može biti korisno. Možeš tražiti da ChatGPT izdvoji glavne tvrdnje, objasni na čemu zasniva zaključak, pokaže koje informacije možda nedostaju ili predloži izvore koje zatim sam otvaraš.
Ali odgovor istog sistema na pitanje „Jesi li siguran?“ nije nezavisna potvrda. ChatGPT može da ponovi prvobitnu tvrdnju drugim rečima, da je ispravi ili da ponudi link, ali nezavisnu potvrdu imaš tek kada pogledaš odgovarajući dokaz van tog odgovora.
UNESCO smernice za generativnu veštačku inteligenciju u obrazovanju i istraživanju naglašavaju da generativna AI nije autoritativan izvor znanja i da njene rezultate treba kritički procenjivati. Zato ChatGPT može da pomogne u pregledu odgovora, ali potvrdu traži u izvoru koji odgovara konkretnoj tvrdnji.
Šta ako se ChatGPT i izvor ne slažu?
Prvo proveri da li zaista govore o istoj stvari. Dve informacije mogu delovati suprotno zato što se odnose na različite periode, uzraste, škole, države ili uslove.
Ako se i dalje ne slažu, vrati se na preciznu tvrdnju koju proveravaš. Proveri datum, autora i kontekst oba izvora, pa potraži drugi relevantan i nezavisan izvor. Za važno školsko pitanje koje i dalje nije jasno pitaj nastavnika ili profesora i pokaži mu tvrdnju i izvore koje si otvorio.
Najviše se osloni na izvor koji je nadležan za temu, govori baš o tvom pitanju i dovoljno je nov. Ipak, naziv ustanove sam po sebi ne rešava neslaganje: pročitaj konkretan deo na koji se pozivaš.
Proveri jedan stvarni odgovor sada
Uzmi ChatGPT odgovor koji nameravaš da upotrebiš. Izdvoji jednu tvrdnju bez koje ostatak odgovora nema smisla. Zatim odredi vrstu izvora, otvori ga van ChatGPT-a i pronađi tačan deo koji potvrđuje tvrdnju. Proveri i datum ako informacija može da se promeni.
Na odgovor se možeš osloniti tek kada znaš koji izvor, koji njegov deo i za koji period podržavaju ključnu tvrdnju. Za matematički rezultat primeni i provere iz vodiča kako koristiti ChatGPT za matematiku. Ako tvrdnju ne možeš da potvrdiš ili se važni izvori ne slažu, proveri još jedan izvor ili pitaj nastavnika ili profesora.