Amit a modell kihagy, nem amit kitalál
Az összefoglalás a legjobban mérhető AI-feladatok egyike, mert az eredmény összevethető a forrással. És a mérések következetesen ugyanazt mondják: a domináns hibatípus nem a hallucináció, hanem a hiányzó tény. Az egyik vizsgálat szó szerint így fogalmaz: „a hiányzó tények a hibák uralkodó forrása".
A számok ebből is kijönnek. Jogi szövegek összefoglalásánál a legjobb modellek az érvek 67-71 százalékát adták vissza, miközben az emberi referencia-összefoglalók 97-98 százalékon álltak. Nem téves állítások kerültek a szövegbe — egyszerűen kimaradt az érvek harmada, és a maradék teljesen hihetően olvasható.
Ez a gyakorlatban azért veszélyes, mert a kihagyást nem lehet olvasással észrevenni. Egy kitalált szám szemet szúr, ha ismered a témát. Egy ki nem mondott döntés vagy egy elfelejtett határidő viszont nem hagy nyomot: az összefoglaló kerek, olvasható és rövid — pontosan úgy néz ki, ahogy egy jó összefoglaló.
A közép, ahol eltűnik a lényeg
Van egy jelenség, amit először 2023-ban mértek meg, és azóta is tartja magát. Ha egy modellnek több dokumentumot adsz, és a keresett információ az elején van, a találati arány 75,8 százalék volt; ha a végén, 63,2; ha a közepén, 53,8. Húsz dokumentumnál. Harmincnál a középső érték 50,5-re esett.
A megdöbbentő összehasonlítás ugyanebből a mérésből jön: ugyanez a modell dokumentumok nélkül, pusztán a saját tudásából 56,1 százalékot ért el. Vagyis amikor a helyes válasz ott volt a szeme előtt, de a szöveg közepén, rosszabbul teljesített, mintha semmit nem kapott volna. A hosszabb kontextus nem oldja meg: az ezt vizsgáló 2026-os munka szerint a jelenség nem hiba, hanem a tanítás két egymással versengő nyomásából következik — tehát nagyobb ablakkal sem fog eltűnni. Neked ebből annyi számít, hogy a levélszál közepén hozott döntés a legveszélyeztetettebb pont.
Négy hibatípus, amit a meetingösszefoglalók termelnek
Húsz valódi meetingátiraton, háromezer kérdés-válasz páron ezer fölötti megalapozatlan állítást gyűjtöttek össze. A négy leggyakoribb típus mindegyike ugyanazt mutatja: a modell a szavakat eltalálja, a társas jelentést nem.
- A magabiztos átfogalmazás — a hibák 27 százaléka. Az elhangzott mondat árnyalata eltűnik: a „ezt még meg kell néznem" az összefoglalóban „megvizsgálja és visszajelez" lesz. Nem hazugság, csak határozottabb, mint az eredeti.
- A megalapozatlan mennyiség — 17 százalék. „A résztvevők többsége egyetértett", „többen felvetették". Az átiratban nincs semmi, amiből a többség vagy a többen következne. Ez a legalattomosabb, mert döntésnek látszik.
- A rossz beszélőhöz kötés — 16 százalék. A javaslat átkerül attól, aki mondta, ahhoz, aki utána beszélt. Meetingjegyzetben ez személyes következménnyel jár.
- A kitalált feladat. A modell odaír egy teendőt, amit senki nem vállalt el. Érdekesség, hogy ez a hibatípus a fejlettebb modellekre jellemző — a gyengébbek kevésbé próbálják kerekre zárni a történetet.
Az összkép: a mérés szerint a hibák nem a tényfelidézésből fakadnak, hanem abból, hogy a modell rosszul olvassa a beszélgetés szándékát. Ezért nem javít rajta az, ha jobb modellt választasz — a hibaarány csökken, de a típusa marad.
A hangfelvétel, ami már hibásan érkezik
Ha a bemenet felvételről készült átirat, egy hibaréteggel korábban kezdődik a baj. Egy 437 beszélőt vizsgáló kutatásban az átiratok nagyjából 1,4 százaléka tartalmazott teljesen kitalált mondatot — nem félrehallást, hanem a semmiből keletkezett szöveget.
A mechanizmus a fontos: a kitalálás a csenddel korrelál. Azoknál a felvételeknél, ahol több volt a beszéd nélküli szakasz, gyakoribb volt a hallucináció. Egy másik mérés ezt a végletekig vitte: tiszta környezeti zajon, ahol egyetlen kimondott szó sem volt, az egyik népszerű átíró modell a szakaszok 99,97 százalékára írt ki valamilyen szöveget. A gyakorlati tanulság egyszerű: a szünet, a gépelés, a folyosózaj és az egymásra beszélés a felvételen az a hely, ahol kitalált mondat keletkezik — és az összefoglaló ezt már tényként kapja meg.
A recept
Öt lépés. A harmadik az, amit a legtöbben kihagynak, és az viszi a hibák felét.
- Add meg a szerkezetet előre. Ne „foglald össze" legyen a kérés, hanem megnevezett rovatok: döntések, feladatok, nyitott kérdések, elhangzott számok. A strukturált kimenet itt nem kényelmi kérdés, hanem az egyetlen dolog, ami a kihagyást láthatóvá teszi.
- Írd elő a „nincs megadva" kötelező használatát. Ha egy rovat üres, azt ki kell írni. Enélkül a modell csendben kihagyja a rovatot, és te nem tudod, hogy hiányzik-e valami vagy tényleg nem volt.
- Kérj idézetet minden állítás mellé. Egy rövid szó szerinti részlet az átiratból. Ez a lépés önmagában megfogja a magabiztos átfogalmazást és a rossz beszélőhöz kötést, mert az idézet vagy megvan, vagy nincs.
- A hosszú anyagot darabold — de az összefésülést te csináld. A bemenet darabolása helyes, erről szól a hosszú dokumentumok darabolása részletesen. A darabok modellel való összefésülése viszont mérésekben rosszabb eredményt adott, mint egyetlen egyszerű kérés.
- Kérdezz rá külön a közepére. Egy második, rövid kérés: „mi hangzott el a beszélgetés középső harmadában?" Ez a leggyorsabb ellenszere annak, hogy a közép eltűnik.
A prompt, ami bünteti a kihagyást
Ez a kérés a recept első három lépését tartalmazza. A rovatokat cseréld a sajátodra.
Az alábbi átiratból készíts összefoglalót. CSAK azt írd bele, ami elhangzott.
Rovatok, mindegyiket kötelező kitölteni:
1. DÖNTÉSEK — mit döntöttek el véglegesen
2. FELADATOK — mit, ki, mikorra
3. NYITOTT KÉRDÉSEK — amit felvetettek, de nem zártak le
4. SZÁMOK ÉS DÁTUMOK — minden elhangzott szám, egy helyen
Szabályok:
- minden pont mellé tedd oda idézőjelben azt a max. 15 szavas részletet,
amiből következik. Ha nincs ilyen részlet, a pont nem kerülhet bele.
- ha egy rovatba semmi nem tartozik, írd oda: [nincs ilyen]
- ha egy feladatnál hiányzik a felelős vagy a határidő, írd oda: [nincs megadva]
- ne írd azt, hogy "többen", "a többség", "általános egyetértés" — nevezd meg,
ki mondta. Ha nem derül ki, írd oda: [nem azonosítható]
- ne vonj le következtetést, és ne javasolj semmit
Az átirat: [szöveg]
Az ellenőrzés, ami két percbe telik
Az összefoglalót nem elolvasni kell, hanem megtámadni. Négy kérdés, és mind a négy gyorsan megválaszolható.
- Megvan minden szám? Keress rá az átiratban a számjegyekre, és nézd meg, mindegyik szerepel-e az összefoglaló negyedik rovatában. Ez a leggyorsabb és a legtöbbet fogó ellenőrzés.
- Van-e „többen" vagy „a többség"? Ha igen, az szinte biztosan megalapozatlan — a mérés szerint ez a hibák hatoda.
- Stimmel-e a nevek és a mondatok párosítása? Elég két véletlenszerű pontot visszakeresni. A rossz beszélőhöz kötés ritkán jár egyedül.
- Mi hiányzik a közepéről? Nyisd meg az átirat középső harmadát, és olvasd el a szakaszcímeket vagy az első mondatokat. Ha valami ott fontosnak látszik és nincs az összefoglalóban, megvan a hiba.
Amit ne csinálj
- Ne kérj rövid összefoglalót először. A rövidség kényszere pontosan a kihagyást erősíti. Kérj teljeset rovatokkal, és utána húzd össze — vagy húzd össze te.
- Ne hagyd, hogy a modell fésülje össze a darabokat. Az összefoglalásoknál a hierarchikus összefésülés és a fokozatos frissítgetés mérésekben rosszabb eredményt adott a sima kérésnél, és a hibát is elrejti.
- Ne fogadd el a feladatlistát ellenőrzés nélkül. A kitalált teendő a fejlettebb modellek sajátja, és pont az a rovat, aminek alapján emberek dolgozni kezdenek. A számok és nevek ellenőrzésére a négylépéses ellenőrzés ad részletes módszert.
Amit érdemes elvinni
Az összefoglalónál a kihagyás a fő kockázat, nem a kitalálás, és a kihagyott rész a közepén van. Adj rovatokat, tedd kötelezővé a „nincs megadva" kiírását, kérj idézetet minden állítás mellé, és kérdezz rá külön a beszélgetés középső harmadára. A kész összefoglalót pedig ne elolvasd, hanem támadd meg négy kérdéssel — két perc, és a hibák nagy részét megfogja.