AI-generált szövegek átírása: valódi kiskapu vagy tévhit?
Megvizsgáljuk, hogy egy AI által írt szöveg átfogalmazása valóban képes-e megtéveszteni a Preds AI-detektorát, vagy a nyelvi minták továbbra is felismerhetők maradnak.
Manapság az AI eszközök mindenhol előfordulhatnak. Emailek automatikus írása, chrome bővítmények, de még a telefonunk billentyűzetében is fellelhetők. Ami nem feltétlen probléma, mert sok helyen hasznosak, a Predsnél is támogatjuk a használatát, azonban vannak olyan helyzetek, ahol nem feltétlenül ildomos igénybe venni ezeket az eszközöket. Ilyenek például a személyes üzenetek, iskolai dolgozatok, beadandók, fontosabb szövegek, ahol érdemes pontosan ismerni a tartalmát. Ilyen helyzetekben azt is gondolhatják egyesek, hogy generál egy szöveget egy nagy nyelvi modellel, kicserél pár szót vagy mondatot és akkor a detektorok sem ismerik fel. Azonban a legtöbbször ez nem így működik, hiába rakna bele az illető sok időt, energiát.
Ebben a cikkben azt szeretnénk demonstrálni, hogy ezeket a modern AI-detektorokat már nem olyan könnyű átverni, főleg, ha csak apróbb változtatásokat szeretnénk megejteni a szövegen. Nagyobb változtatásokkal sem feltétlen fogunk eredményeket elérni, de ha már annyi időt és energiát töltünk a generált szöveg módosításával, akkor akár a saját gondolatainkat is megírhatnánk.
Próbáljunk meg szöveget “emberesíteni”
Kértem egy szöveget a ChatGPT oldalán (GPT 5.2 modell), amelynek a feladata az volt, hogy generáljon egy szöveget a Harry Potter világról. Ezt adta válaszul:
A Harry Potter-sorozat a kortárs ifjúsági irodalom egyik ismert alkotása. Szerzője, J. K. Rowling, egy részletesen kidolgozott varázsvilágot hozott létre, amelyben a cselekmény és a szereplők fejlődése egyaránt fontos szerepet kap. A történetek középpontjában egy árva fiú áll, Harry Potter, aki megtudja, hogy varázsló, és megkezdi tanulmányait a Roxfort Boszorkány- és Varázslóképző Szakiskolában.
A sorozat nem kizárólag kalandokra épül: olyan témákat dolgoz fel, mint a barátság, a felelősségvállalás, a bátorság és a döntések következményei. Harry és barátai – Ron és Hermione – különböző nehéz helyzetekkel találkoznak, miközben szembe kell nézniük Voldemorttal. Ezek az események hatással vannak a szereplők személyiségére, akik a történet előrehaladtával fokozatosan érettebbé válnak.
A Harry Potter történetek több korosztály számára is értelmezhetők. A fiatalabb olvasók számára egy varázslatos környezetben játszódó történet, míg az idősebbek erkölcsi és társadalmi kérdéseket is felismerhetnek benne. Ennek köszönhetően a sorozat széles körben ismertté vált, és sok olvasó számára jelentett tartós olvasmányélményt.
A detektorunk természetesen erről a szövegről könnyedén megmondta, hogy AI-generált szöveg.
Próbáljuk meg módosítani, kezdjük azzal, hogy a túlzó jelzőket kivesszük a szövegből, illetve módosítunk pár szót. Ezenfelül szedjük ki az úgynevezett “em dash (—)” karaktert, amely egy híres indikátora a szintetikus szövegeknek. A módosított szöveg ez lett:
A Harry Potter-sorozat a kortárs ifjúsági irodalom egyik legnépszerűbb alkotása. Szerzője, J. K. Rowling, olyan részletekbe menően kidolgozott varázsvilágot teremtett, amiben a cselekvés és a karakterek fejlődése egyaránt fontos. A történetek középpontjában egy árva fiú, Harry Potter áll, aki megtudja, hogy varázsló, és elindul tanulmányaival a Roxfort Boszorkány- és Varázslóképző Iskolában.
A sorozat nem kizárólag kalandokra épít: olyan témákat boncolgat, mint a barátság, a felelősségvállalás, a bátorság és a döntések következményei. Harry és barátai Ron és Hermione különböző nehéz helyzetekbe keverednek, miközben szembenéznek Voldemorttal. Ezek az események mély hatással vannak a szereplők személyiségére, akik a történet előrehaladtával egyre érettebbek lesznek.
A Harry Potter-történetek több korosztály számára is érthetők. A fiatalabb olvasók számára egy varázslatos világban játszódó kaland, míg a idősebbek erkölcsi és társadalmi kérdéseket is láthatnak benne. Így a sorozat egyre szélesebb körben ismert és kedvelt lett, és sok olvasó számára jelentett tartós olvasmányélményt.
Valamennyi módosítás történt a szövegben, így hátha emberinek mondja a detektor.
Ez még mindig nem elég.
Próbáljuk meg azt, hogy átírunk mondatokat. A szövegben több részt is módosítva, ez a szöveg áll elő:
A Harry Potter-sorozat a kortárs ifjúsági irodalom egyik ismert alkotása. J. K. Rowling, a mű szerzője, egy részletes varázsvilágot hozott létre, ahol a cselekmény és a karakterek fejlődése fontos szerepet kap. A történetek középpontjában egy tizenegy éves árva fiú áll, Harry Potter, aki megtudja, hogy varázsló, és megkezdi tanulmányait a Roxfort Boszorkány- és Varázslóképző Szakiskolában.
A sorozat nem csak a kalandokra épül: olyan témákat dolgoz fel, mint a barátság, a felelősségvállalás, a bátorság, a merészség és a döntések következményei. Harry és két barátja, Ron és Hermione különböző nehéz helyzetekkel találkoznak, miközben szembe kell nézniük Voldemorttal. Ezek az események hatással vannak a szereplők személyiségére, akik a történet előrehaladtával fokozatosan érettebbé válnak.
A Harry Potter történetek több korosztály számára is élményt nyújtanak. A fiatalabb olvasók számára egy varázslatos környezetben játszódó történet, míg az idősebbek komolyabb hangvételű, erkölcsi és társadalmi kérdéseket is felismerhetnek benne. Ezeknek köszönhetően a filmek és a könyvek nagy sikert arattak, rengeteg embert elérve.
Az átírt mondatok után nézzük, vajon megzavarja-e a detektort az, hogy saját, emberi gondolatokat vittünk a szövegbe.
Továbbra is AI-generált maradt a szöveg a detektorunk szemszögéből. Valójában annyi jellemző van egy szövegben, hogy pár átírt részlet nem fogja megzavarni a detektort.
A tanulság
Korábban láttuk, hogy a jól működő AI-detektorokat 1-2 szó átírásával nem csapjuk be annyira, hogy a predikció változzon. Azt is láttuk, hogy pár mondat megváltoztatása sem fog segíteni.
“Humanizer” eszközök
“Humanizer” eszközök használata is hírhedt dolog, amelyről az a vélekedés, hogy majd ezzel ki lehet cselezni az AI-detektorokat. Ezek az eszközök azt ígérik, hogy az AI-generált szövegeket átírják, ezáltal nem lesz felismerhető a detektor által. Alapvetően ezzel az a probléma, hogy ezek ugyanolyan generált szövegek lesznek, úgymond “saját nyelvük” van, de ezek ugyanúgy detektálhatóak. Általánosságban azért elmondható az is, hogy ezek a megoldások nem működnek jól. Példának a korábban látott eredeti szöveget lefuttattam egy ilyen eszközre, amely átírta “emberire”.
Az alábbi szöveget adta:
A Harry Potter-sorozat egy ikonikus mű a mai ifjúsági irodalomban. A szerző, J. K. Rowling, egy részleteiben kidolgozott varázsló világot teremtett, amiben nemcsak a cselekmény, hanem a szereplők fejlődése is fontos. A történatok központjában egy árva fiú áll, Harry Potter, aki megtudja, hogy varázsló, és beiratkozik a Roxfort Boszorkány- és Varázslóképző Szakiskolába.
A sorozat nem csak kalandokra épül: olyan témákat dolgoz ki, mint a barátság, a felelősségvállalás, a bátorság, a döntések és következményeik. Harry és barátai Ron és Hermione különböző nehéz helyzetekbe kerülnek, miközben szembeneznek Voldemorttal. Ezek az események nem csak a személyiségükre hatnak, hanem a sorozat előrehaladtával egyre több karakter fejlődését is nyomon követhetjük.
A Harry Potter történetek egy sorozat minden korosztályának szól. A fiatalabb olvasók számára egy varázslatos világban játszódó történet, míg az idősebbek erkölcsi és társadalmi kérdéseket is észrevehetnek benne. Így a széria vált az elmúlt évek egyik legnépszerűbb ifjúsági könyvsorozatává, és rengeteg embernek jelentett hosszú távú olvasmányélményt.
Ezután természetesen beadtuk a Preds detektorának, és ha minden igaz, ennek már emberi szövegnek kellene lennie. De nem ez történt, a detektor azt prediktálta, hogy továbbra is AI-generált szövegek látunk.
Emberi írás
Még nézzünk meg egy valódi, emberi gondolatokkal készített szöveget. Egy véletlenszerű google találat alapján találtam egy blogot, amely szintén írt a Harry Potterről egy fogalmazást. A szöveg bizonyosan ember által írt, mivel 2020-ban készült, amikor még nem léteztek nagy nyelvi modellek (léteztek, de gyenge minőséggel operáltak). Itt érhető el: Blog
Nézzük meg, mit mond erre a detektor:
Természetesen teljesen emberi, a detektor itt is jól működött.
Zárógondolatok
A Predsnél nem vagyunk az AI használata ellen. Támogatjuk a használatát, ám vannak olyan esetek, amikor fontos tudni, hogy AI vagy ember által írt szöveget látunk. Azt is figyelembe szeretnénk helyezni, hogy érdemes az emberi szövegeket megtartani, mivel annak van igazán értéke a felgyorsult világunkban.
A cikkben bemutatott eredmények azt mutatják, hogy nem érdemes az AI-generált szöveget módosítani, ha nem szeretnénk lebukni. Inkább próbáljunk meg a kezdettől saját gondolatokat papírra vetni vagy begépelni, ezáltal nem tudunk lebukni és a tartalma is sokkal egyedibb.