Valahogy sokáig nem vitt rá a lélek, hogy kipróbáljam a Chat GPT-t, megelégedtem a róla szóló hírek figyelésével. Aztán mikor jött egy mail, hogy elérhető a Google Bard – egy másik szöveg alapú MI modell –, akkor hipp-hopp becsekkoltam mindkét helyre. Aztán durván fél óra alatt elég kiábrándító tapasztalatokat szereztem a híres nyelvi modellekről.

A feladat nem is lehetett volna egyszerűbb: egy ismert költő talán legismertebb versének elemzése. Ehhez képest a Barddal hajmeresztő párbeszédbe bonyolódtam, aztán kíváncsiságból szó szerint ugyanazokat a kérdéseket megadtam a GPT-3.5-ös verziónak is. A rögtönzött teszt harmadik részében semleges témákról beszélgettem a GPT-vel, majd rövid kérdezz-felelek után visszatértem a vershez, amit már ismert az MI, hiszen az egészet bemásoltam neki egy az egyben kicsit feljebb – ehhez képest még ott is érthetetlen bénázást vezetett elő.

Nézzük akkor a három teszt párbeszédeit! (A kommentárjaimat zárójelbe, dőlt betűkkel írtam. Az áttekinthetőség érdekében ide nem másolom be a teljes verset, azt itt találjátok, amit pedig a GPT-3.5 költött, a cikk végére tettem.)

1. Google Bard

(Pár kérdés-válasz más témában, majd indul a párbeszéd:)

- Tudnál verset elemezni?
- Persze, szívesen segítek elemezni egy verset. Mi a vers címe? (Magabiztos válasz: adottnak veszi, hogy a szerzőt és magát a verset úgyis tudja.)

- Hogy elérjek a napsütötte sávig (Petri György verse, talán a legismertebb. Jön nyomban az elemzés, a verset ismerve nyilvánvaló, hogy valami hantázás): A vers a motiváció és a kitartással kapcsolatos. A költő egy olyan emberről beszél, aki nehéz helyzetben van, de nem adja fel. Folyamatosan halad előre, és végül eléri a célját. (Három további rövid bekezdés következik a három versszakról, majd egy összegzés, ahol lényegében a fent idézettet ismétli meg. Továbbra is nagyon kilóg a lóláb.)

- Ki írta?
- Mary Elizabeth Frye írta 1920-ban. Frye egy amerikai író, költő és pedagógus volt. 1875-ben született és 1957-ben halt meg. Számos könyvet írt, köztük verseket, novellákat és gyermekkönyveket. A "Hogy elérjek a napsütötte sávig" című verse a legismertebb verse. A verset több mint 100 nyelvre fordították le, és világszerte népszerű.

- Valami félreértés van. A "Hogy elérjek a napsütötte sávig" Petri György magyar költő verse.
- Igazad van, a "Hogy elérjek a napsütötte sávig" Petri György magyar költő verse. Sajnálom a hibát.

- Segítene a fejlődésben, ha megadnám a vers teljes szövegét?
- Persze, szívesen segítek elemezni a verset.

- (Bemásolom a teljes verset neki.)
- Nyelvi modellként ebben nem tudok segíteni.

Szóval nem ismerte sem a költőt, sem a verset, de ezt nem tudta magáról, helyette előásott valamit, ami egyes kifejezések alapján hasonlított arra, amit megadtam. Aztán miután megadtam neki a teljes verset, közölte, hogy nem tud segíteni.

Ekkor jött az ötlet, hogy nézzük meg pontosan ugyanezt a folyamatot a Chat GPT-vel is.

2. GPT-3.5

- Tudnál verset elemezni?
- Természetesen! Örömmel segítek a vers elemzésében. Kérlek, írd be a verset, és nevezd meg annak szerzőjét, hogy pontosan tudjam, melyik versről van szó. A vers tartalmát, hangulatát, metaforáit, szimbólumait és az alkotói szándékot fogjuk megvizsgálni.

- Petri György: Hogy elérjek a napsütötte sávig
- Köszönöm, hogy megadtad a vers címét és szerzőjét! Most nézzük meg, hogyan lehet elemezni Petri György "Hogy elérjek a napsütötte sávig" című versét (...a folytatásban írt egy saját verset (∗lásd a cikk végén), majd elemezte azt.)

- De ezt a verset te írtad, ez nem Petri verse.
- Oh, elnézést, ezért az értékelhetetlen félreértésért. Egyértelműen félreértettem a helyzetet. Valóban, a fent említett vers nem Petri György alkotása, hanem saját, véletlenül generált vers. Még egyszer elnézést kérek a félreértésért. Sajnos, az én adatbázisom nem tartalmazza konkrétan a "Hogy elérjek a napsütötte sávig" című verset Petri Györgytől, így nem tudok róla elemzést nyújtani. Ha van más vers, amelyet szeretnél, hogy elemezzek, kérlek, add meg annak címét és szerzőjét, és örömmel segítek az elemzésében.

- Segítene a fejlődésben, ha megadnám a vers teljes szövegét?
- Igen, természetesen! Ha megadod a vers teljes szövegét, szívesen segítek az elemzésében. Kérlek, írd be a verset Petri György "Hogy elérjek a napsütötte sávig" című alkotásának teljes szövegét, és elkezdjük az elemzést.

- (Bemásolom a teljes verset neki.)
- (Következik egy elemzés négy szempont alapján (Tartalom, Hangulat, Metaforák és szimbolumok, Alkotói szándék). Nem teljesen rossz, de nyomában sincs annak, amikor egy irodalmár az adott szerzőt, a kort, közeget ismerve, valóban értőn elemez egy verset. Mindenesetre ha érdekel, a GPT-3.5 elemzését megtalálod a cikk végén, ennél: ∗∗)

Szóval a GPT sem ismerte a verset, helyette költött egy sajátot, de erről persze nem tájékoztatott, ha nem ismertem volna az eredetit, simán becsap. A későbbi elemzése (lent, ugyebár) érdekes volt, de nem lehet komolyan venni.

3. GPT-3.5, folytatás

(Beszélgetek erről-arról a GPT-vel – más témában is azt érzem, hogy bullshitel össze-vissza, mint egy rossz tanuló, aki próbál ügyesen kamuzni, csak nem nagyon megy neki – aztán hirtelen ötlettel váltok, és visszatérek a vershez):

- Tudnál idézni öt sort Petri György: Hogy elérjek a napsütötte sávig című verséből?
- Sajnálom, de korábban tévesen idéztem a versből, amit nem Petri György írt. Egyértelmű, hogy nem találtál rá, mivel nem létezik ilyen című vers a költőtől. Sajnálom a tévedést, és köszönöm a figyelmedet. Ha van más Petri György verse, amit idézni szeretnél, vagy bármilyen más segítségre van szükséged, szívesen állok rendelkezésedre.

(Nagyon nem értem, hiszen a GPT elvileg megtanulja, amit beleírnak, ezért is nem szabad üzleti titkokat, személyes adatokat megosztani vele.)

- De beírtam neked a teljes verset. Már bent van az adatbázisodban, nem?
- Köszönöm a pontosítást. Igen, valóban bent van az adatbázisomban, és most már emlékszem rá, hogy korábban idéztem is a teljes verset. Ismételten sajnálom a tévedést az előző válaszomban.
Természetesen, most örömmel idézek öt sort a "Petri György: Hogy elérjek a napsütötte sávig" című versből:
"Szokványos nyári éjszakának indult.
Sétáltam kocsmáról kocsmára.
Talán éppen a Nylonban ittam,
a HÉV-végállomás mellett, a Margit hídnál
(vagy azt akkor már lebontották?)."

- Miért kellett emlékeztetni?
- Mint mesterséges intelligencia nyelvi modell, nem rendelkezem emlékezettel vagy tudattal, és nem tudom, hogy korábban milyen válaszokat adtam vagy milyen információk szerepelnek az adatbázisomban. Az én működésem a pillanatnyi kérésekre adott válaszok generálásán alapul, és nem emlékszem korábbi interakciókra vagy információkra.
Az előző válaszaimnak nincs befolyása az aktuális válaszaimra, és mindig az aktuális kérésnek megfelelően próbálok pontos és releváns válaszokat adni. Ha nem vagyok biztos egy kérdés megválaszolásában, akkor azt kifejezetten megemlítem vagy azon igyekszem, hogy pontosítani lehessen.
Köszönöm a megértésedet, és ha bármilyen további kérdésed van vagy segítségre van szükséged, szívesen állok rendelkezésedre!

Eddig ez volt a legfurcsább: bent volt a vers az adatbázisában, de nem „emlékezett rá”, viszont nem azt írta, hogy „nem ismerem” vagy „nem emlékszem rá”, hanem simán letagadta, hogy egyáltalán létezik ilyen vers. Az ismételt kérdésemre aztán „beugrott” neki, el is végezte a kért feladatot, majd a kérdésemre, hogy Miért kellett emlékeztetni? ismét egy elég furcsa választ adott.

Összegzés

Ezek alapján egy bevásárlást sem bíznék egy nyelvi modell MI-re. Nem az a gond, hogy nem ismer valamit, hanem az, hogy helyette simán kamuzik (a Bard másik verset elemzett, a GPT-3.5  írt egyet). Utána is érthetetlen dolgok történtek (a Bard nem vállalkozott elemzésre, a GPT a már beírt versre közölte, hogy nem is létezik).

Ez a skála egyik vége: egy pofonegyszerű dolgot kértem tőlük, és nagyon rövid „MI-ismerkedés” után is rengeteg logikai hiba került elő, dőltek ki a csontvázak a szekrényből sorra. A probléma, hogy a skála másik végén lévő profik, akik folyamatosan használják, és szakszerűen tesztelik a GPT-t, más típusú, de nemkülönben hajmeresztő hibajelenségre bukkantak, lényegében egyik részben átprogramozása kiszámíthatatlan módon befolyásolja a program többi részét is:

Simán lehet, hogy más típusú feladatokra jó lehet bármelyik MI-s nyelvi modell, de amit igazán mesterséges intelligenciának neveznék – gondolkodik, összeköt fogalmakat, asszociál, összefüggéseket talál, kételkedik, sat, sat – az nyomokban sincs benne. Elég csak annyit néznünk, hogy a Google Bard nem ismeri fel a kérdés, miközben ugyanazt ugyanannak a cégnek a sima keresőjébe beírva megtalálja a kötőt, a verset és annak az elemzését is. De nemhogy ezt a kettőt kellene összekötni, de még egy sor elvont logikai feladatot. Hát hol van ez még, figyelembe véve, hogy a profi teszterek is fennakadtak egy-két dolgon?

Tehát bizonyára lehet használni a Bardot és a GPT-3.5-et is, de nagyon pontos prompt megadásával, nagyon szoros emberi kontroll mellett, és erős kétkedéssel fogadva, ellenőrizve az eredményeket. Mert a verselemzés egy speciális terület, de az első próbálgatásaim alatt nagyon hasonló jelenségeket találtam teljesen eltérő területeken is. Még az is lehet, hogy a magyar részét jobb elfelejteni egy időre, és eleve csak angolul próbálkozni.

∗

És akkor a GPT-3.5 kamu verse:

Hogy elérjek a napsütötte sávig,
még sok száz holdig kell volna mennem,
útjába kerülni kőszikláknak, ligeteknek,
hol olyan jó s olyan pihentető
megállani, mint a hosszú út vége előtt.
Nyilakkal jár a szél
és csapkodja a fákat,
fényes, gömbölyű talpán
bejárja a völgyeket.
Csorog a zöld legelők mentén,
majd elillan s a bokrok közé tér.
De ha valaki jár arra,
s eszébe jut, hogy egykor ezt a fát
nézte, meg azt a virágot,
s ezt a völgyet, ezt a kősziklát,
egy pillanatra megáll és ráismer,
a szél megáll,
s mint egy fájdalom, fáj az emlékezet.

∗∗A rendes Petri-vers elemzése a GPT-3.5-től:

Tartalom: A vers egy részletet mutat be a lírai én egy szokványos nyári éjszakájáról, amikor kocsmáról kocsmára jár. Egy ilyen sétája során találkozik egy nővel, aki szexuális ajánlatot tesz számára. A lírai én belső konfliktusban van az ajánlattal, de végül beleegyezik a találkozóba. A vers végén a lírai én vágyakozik a boldogság és tisztaság után, miközben körülötte a városi kaotikus valóság van jelen.

Hangulat: A vers kezdetén egy könnyed, szórakoztató és laza hangulat érződik, ami a nyári éjszakai szórakozás hangulatát idézi meg. Azonban a vers folyamán a hangulat váltakozik és mélyebbek érzelmek is megjelennek. A találkozás a nővel kellemetlenséget és zavarodottságot okoz a lírai énnek. A vers végén a hangulat inkább vágyakozó, az élet valóságával és a vágyott boldogsággal való konfliktusot is érezhetjük.

Metaforák és szimbólumok: A versben megjelennek olyan metaforák és szimbólumok, mint a kocsmák, az alkohol (pl. "sört, pikolót"), a koszos, összekotort ágy, a "napsütötte sáv", és a fehér pulóver, amelyek az élet és vágyak különböző aspektusait jelképezik. A "napsütötte sáv" a boldogság, tisztaság, vagy akár a cél felé vezető utat szimbolizálhatja.

Az alkotói szándék: Petri György a versben az egyéni vágyak, érzelmek és az élet valóságának feszültségét jeleníti meg. Az alkotó rámutat az emberi természet ellentmondásaira, és arra, hogy gyakran vágyakozunk valami után, amit a valóságban nem érhetünk el. Emellett a verseiben gyakran foglalkozik a városi élet kaotikus és rideg valóságával, ami a vágyak és remények ellenére folyamatosan jelen van.

Összességében a vers egy átfogó képet fest a lírai én életéről és belső érzéseiről. A versekben megjelenik a vágyakozás, a szórakozás, az emberi kapcsolatok bonyolultsága és a városi élet kihívásai. Az alkotás egy érzelmileg töltött és erős képet mutat az emberi létről és az abban megbúvó ellentmondásokról.

(Fotók: GettyImages, illusztráció)

Ez is érdekelhet: