SZAKMAI INTELLIGENCIA * MI
4. Az MI, mint kritikai partner
Ellenvetések, alternatív értelmezések és szakmai stresszteszt
Műhelyesszé | 4. rész
Egy szakmai elképzelés továbbfejlesztéséhez gyakran kérünk támogatást az MI-től. Rendszerezze az érveket, egészítse ki a gondolatmenetet, keressen hozzá szakirodalmat, készítsen belőle koherens szöveget. Ugyanennek az együttműködésnek van egy másik lehetősége is: megkérhetjük az MI-t, hogy keresse meg az elképzelés gyenge pontjait. Milyen feltételezésekre építünk? Melyik állításunk túl erős? Milyen alternatív magyarázat lehetséges? Hol hiányzik bizonyíték? Melyik következtetésünk sérülne legkönnyebben egy szakmai bírálat során?
A SZAKMAI INTELLIGENCIA * MI negyedik műhelyesszéje ezt a szerepet vizsgálja. Az MI itt kritikai partnerként kapcsolódik be a munkába: ellenvetéseket keres, alternatív értelmezéseket állít elő, és segít stressztesztelni egy kialakuló szakmai álláspontot.
A megerősítés kényelmes helyzet
Ha van egy elképzelésünk, természetes módon szeretnénk továbbépíteni. Egy kutatási koncepcióhoz kereshetünk érveke, egy módszertani döntéshez indoklást, egy projektötlethez megvalósítási lehetőségeket, egy már elkészült szöveghez további szakmai szempontokat. Az LLM ebben rendkívül hatékony tud lenni. A megadott gondolatmenetet gyorsan strukturálja, új kapcsolódásokat javasol, és koherens érveléssé szervezheti. Ez azonban sajátos kockázatot is létrehoz.
Ha a feladatot úgy adjuk meg, hogy egy már kialakított elképzelést fejlesszen tovább, a párbeszéd könnyen ugyanazon kiinduló kereten belül marad. Az egyes fordulók egyre részletesebbé tehetik az eredeti koncepciót, miközben annak alapfeltevései kevés figyelmet kapnak. Egy jól kidolgozott gondolatmenet ettől még épülhet gyenge premisszára. A szakmai kontroll egyik fontos szempontja, mikor tesszük vizsgálat tárgyává magát a kiinduló elképzelést.
Kérjünk ellenvetést
A kritikai partner funkció legegyszerűbb formája az ellenvetés kérése. Egy kialakuló koncepció után feltehetjük például ezeket a kérdéseket:
Melyik három ponton támadható leginkább ez az érvelés?
Milyen adat hiányzik a következtetés alátámasztásához?
Milyen alternatív magyarázat fér össze ugyanezekkel az eredményekkel?
Mely állításokat kellene gyengébben megfogalmazni?
Milyen kérdést tenne fel egy módszertanilag szigorú reviewer?
Ezek a kérdések megváltoztatják az MI feladatát. Az előző gondolatmenet továbbfejlesztése helyett annak ellenálló képessége kerül előtérbe. A válaszok között természetesen lehetnek irreleváns vagy túlzott ellenvetések is. A kritika generálása ugyanúgy szakmai értékelést igényel, mint bármely más MI-OUTPUT. Célunk, hogy a saját álláspontunkat olyan nézőpontokkal ütköztessük, amelyek egyébként esetleg csak később, egy külső bírálat vagy a gyakorlati megvalósítás során jelennének meg.
Az ellenvetés még nem cáfolat
A kritikai munkában különösen fontos az állítások státuszának tisztázása. Ha az MI egy lehetséges problémára hívja fel a figyelmet, attól az eredeti elképzelés még nem válik hibássá. Egy alternatív magyarázat megjelenése sem bizonyítja automatikusan, hogy az eredeti értelmezés téves. Az MI által generált kritika vizsgálandó szakmai INPUT. Érdemes ezért minden jelentősebb ellenvetésnél megkérdeznünk:
Mire épül?
Van hozzá adat vagy forrás?
Logikai problémát azonosít, vagy más szakmai álláspontot képvisel?
Az adott probléma valóban releváns a mi esetünkben?
Módosítja a következtetésünket, vagy elegendő a korlátok között rögzíteni?
Ezek a kérdések megakadályozhatják, hogy az MI kritikájának ugyanazt a túlzott autoritást tulajdonítsuk, amelyet korábban esetleg az MI eredeti javaslatának adtunk volna. A kritikai partner szerep ezért kétirányú ellenőrzést kíván: vizsgáljuk az eredeti állítást, és vizsgáljuk az ellene felhozott érvet is.
Alternatív magyarázatok, mint módszertani eszköz
A második műhelyesszében a PM1_D kampányértékelés példáján már találkoztunk ezzel a problémával.
A kiemelkedő kattintási aktivitásra az első MI-értelmezés plauzibilis magyarázatot adott. A tárgysor számszerű konkrétsága lehetséges magyarázatként jelent meg. A további vizsgálat azonban megmutatta, hogy a tárgysor több elemében is különbözött az összehasonlítási alapként használt változattól. A „3” mellett szerepelt benne az „ingyenes” jelző, konkrétan megnevezte a szakmai promptokat és az óvodapedagógus célcsoportot is. Ezzel megnyílt az alternatív magyarázatok tere.
A nagyobb aktivitás összefügghetett a számszerű konkrétsággal. Szerepet játszhatott az ingyenesség hangsúlyozása. Hatással lehetett a tartalom egyértelmű megnevezése vagy a célcsoport közvetlen megszólítása. Több elem együttes hatása is elképzelhető. Az alternatív magyarázatok felsorolása ebben a helyzetben a következtetés határainak feltárását szolgálta.
Ez fontos kritikai funkció. Egyetlen plauzibilis magyarázat könnyen lezárhatja a gondolkodást. Több, az adatokkal összeegyeztethető magyarázat megjelenése láthatóvá teszi, milyen további információra lenne szükség az erősebb következtetéshez.
A saját módszertan stressztesztje
A ChildTech projektekben a kritikai partner szerep egy másik formában is megjelent: az általunk kialakított módszertani rendszerek ellenőrzése során. Egy saját módszertan létrehozása különösen érzékeny helyzet. Az alkotó ismeri a rendszer kialakulásának történetét, érti az egyes döntések indokait, és könnyen természetesnek tekint olyan kapcsolatokat, amelyek egy külső olvasó számára kevésbé egyértelműek. Ilyenkor hasznos lehet az MI-t arra kérni, hogy ideiglenesen változtassa meg a vizsgálati nézőpontot.
Ne a rendszer továbbfejlesztését keresse, helyette vizsgálja meg:
hol vannak belső ellentmondások;
mely fogalmak definíciója bizonytalan;
mely szabályok fedik át egymást;
mely következtetésekhez hiányzik megfelelő bizonyíték;
mely pontokon nehéz reprodukálni a folyamatot;
és mit kérdezne egy olyan szakember, aki először találkozik a rendszerrel.
Ez már közel áll egy belső szakmai audithoz.
Az MI előnye ebben a helyzetben részben a nézőpontváltás gyorsaságából származik. Ugyanazt az anyagot rövid időn belül több kritikai perspektívából is végig lehet vizsgálni. A szakértő feladata ezután az észrevételek súlyának megítélése.
Egy valós munkafolyamat: amikor az audit nem javítja ki az adatot
Az R01 ChildTech Research Summer 2026 pilotkutatás előkészítése során a kampányadatokból kutatási célú elemzési datasetet építettünk. A folyamat egyik lépése az adatminőség ellenőrzése volt. Ebben a munkafázisban az MI feladata megváltozott. Az adatok elemzése és értelmezése helyett kritikai ellenőrzést végzett: olyan eltéréseket kellett keresnie, amelyek később befolyásolhatják az elemzés megbízhatóságát.
Az audit négy ilyen esetet azonosított.
Az SU1_B sending unit esetében a címzettek száma az M5 mérési pontnál 195, a későbbi follow-up mérésnél 196 volt. Az SU1_A adataiban két leiratkozás mellett körülbelül 0,50–0,51 százalékos leiratkozási arány szerepelt. Az SU2_D M5 mérésében ugyancsak két leiratkozás jelent meg, az arány azonban 1,6 százalék volt. Az SU2_B esetében pedig a platformon rögzített leiratkozási arány az M5 mérés 0,52 százalékáról a későbbi follow-up mérésben 0,50 százalékra változott. Az audit ezzel elvégezte a kritikai partner egyik fontos feladatát: láthatóvá tett egy problémát.
A következő probléma már szakmai döntést igényelt.
Mit tegyünk azokkal az értékekkel, amelyek között eltérést találunk, miközben a rendelkezésünkre álló források alapján nem tudjuk teljes bizonyossággal rekonstruálni, melyik lenne a „helyes” érték? A legegyszerűbb megoldás valamelyik adat utólagos korrigálása lett volna. Ehhez azonban olyan információra lett volna szükségünk, amellyel nem rendelkeztünk. Ezért az audit eredményeit státuszokkal láttuk el. Az első három eltérés UNRESOLVED_NONCRITICAL, a negyedik DOCUMENTED minősítést kapott. Az analitikai kezelési szabály az eredeti platformértékek megőrzése lett. Az eltéréseket dokumentáltuk, és kizártuk az utólagos, feltételezésen alapuló visszarekonstrukciót. A kritikai vizsgálat eredménye így ebben az esetben a bizonytalanság pontosabb dokumentálása volt.
Ez fontos különbség. Egy audit során könnyen kialakulhat az az elvárás, hogy minden feltárt problémának javított adattal kell végződnie. Kutatási munkában azonban egy ismeretlen eredetű eltérés megőrzése és megfelelő jelölése módszertanilag erősebb döntés lehet, mint egy valószínűnek tűnő érték utólagos előállítása. A négy eltérés később a kutatási dokumentáció részévé vált. A végleges R01 kézirat módszertani fejezete már kifejezetten rögzíti őket, és azt is, hogy az értékeket forráshűen, utólagos visszakorrigálás nélkül tartottuk meg.
Ebben a munkafolyamatban jól elkülönült a kritikai partner és a szakértői döntés funkciója. Az MI-alapú audit feladata az eltérések azonosítása, összevetése és dokumentálhatóvá tétele volt. A szakmai döntés arra vonatkozott, milyen státuszt kapjanak ezek az eltérések, milyen következménnyel járjanak az elemzésben, és milyen mértékű bizonytalanságot őrizzünk meg a kutatási adatban.
A folyamat röviden így írható le:
adat - kritikai ellenőrzés - eltérés - bizonytalanság értékelése - szakmai döntés - dokumentált kezelési szabály
Az eset számomra azért különösen tanulságos, mert a kritikai partner szerepének egy kevésbé látványos eredményét mutatja meg. A szakmai érték időnként abból származik, hogy egy bizonytalanság látható marad, és nem építünk helyette mesterséges bizonyosságot a rendszerbe.
Kritikai szerepek
A „kritizáld ezt” instrukció gyakran túl tág. Pontosabb eredményt kapunk, ha meghatározzuk, milyen típusú kritikára van szükségünk. Egy módszertani audit más kérdéseket tesz fel, mint egy szerkesztési audit. Egy kutatási reviewer más szempontokat vizsgál, mint egy projektmenedzser vagy egy potenciális felhasználó. A kritikai szerep ezért több funkcióra bontható.
Az MI lehet logikai ellenőr, amikor az érvelés belső következetességét vizsgálja.
Lehet módszertani kritikus, amikor a mérés, az adat, a következtetés és az általánosíthatóság kapcsolatát ellenőrzi.
Lehet evidence checker, amikor azt vizsgálja, hogy az egyes állításokat milyen bizonyíték támasztja alá.
Lehet alternatív értelmező, amikor ugyanarra az eredményre több lehetséges magyarázatot keres.
Lehet reviewer-szimulátor, amikor egy külső szakmai bírálat várható kérdéseit próbálja előre azonosítani.
Lehet konzisztencia-ellenőr, amikor egy dokumentumot vagy döntést korábban rögzített szabályokhoz és fogalmakhoz viszonyít.
Ezek a funkciók különböző kérdéseket tesznek fel ugyanannak az anyagnak. A kritikai vizsgálat minősége ezért jelentősen javulhat, ha a feladat előtt pontosan meghatározzuk, melyik sérülékenységet szeretnénk tesztelni.
Amikor az MI velünk ért egyet
A kritikai partner funkció egyik érdekes problémája akkor jelentkezik, amikor kifejezetten ellenvetést kérünk, az MI mégis nagyrészt megerősíti az álláspontunkat. Ezt többféleképpen értelmezhetjük. Lehetséges, hogy az érvelés valóban erős. Elképzelhető, hogy a megadott kontextus túlságosan egy irányba terelte az elemzést. Az is előfordulhat, hogy a kritikai feladat meghatározása nem volt elég pontos. Ilyenkor további vizsgálati forduló segíthet.
Kérhetjük a legerősebb ellenérvet. Megadhatunk eltérő szakmai perspektívát. Kérhetjük, hogy külön kezelje az empirikus, módszertani és fogalmi problémákat. Megvizsgáltathatjuk vele azt is, milyen információ változtatná meg az aktuális következtetést. A cél itt sem az ellenvetés mindenáron történő előállítása. A szakmai stresszteszt akkor informatív, ha valós sérülékenységeket keres, és az ellenérvek erősségét is képesek vagyunk megítélni.
A kritika után döntenünk kell
Egy kritikai vizsgálat könnyen hosszú problémalistát eredményezhet. Ez önmagában még kevéssé használható szakmai OUTPUT. A következő lépés az észrevételek osztályozása.
A ChildTech porjektben erre praktikus megkülönböztetés lehet:
kritikus probléma - az eredeti következtetés vagy módszer módosítását igényli;
korlátozás - az eredmény használható, de alkalmazási vagy értelmezési határát rögzítenünk kell;
fejlesztési lehetőség - a jelenlegi munkát nem akadályozza, későbbi verzióban javítható;
nyitott kérdés - jelenleg nincs elegendő információ a megválaszolásához;
elvetett kritika - megvizsgáltuk, de az adott kontextusban nem tartjuk megalapozottnak vagy relevánsnak.
Ez a lépés visszaadja a kritikai munka döntési funkcióját. A kritika célja a szakmai döntés minőségének javítása. Ehhez meg kell határoznunk, mely észrevételek változtatják meg ténylegesen a további munkát.
A kritikai körnek is kell lezárási pont
A második műhelyesszében már szóba került a lezárás szerepe a többfordulós párbeszédben. A kritikai partner használatakor ez még fontosabbá válik. Szinte minden szakmai állítással szemben előállítható újabb kérdés. Minden módszertan tovább finomítható. Minden szöveghez található újabb szerkesztési szempont. A folyamatos kritika ezért önmagában nem jelent nagyobb szakmai szigorúságot. Egy ponton el kell döntenünk, hogy a feltárt problémák közül melyeket kezeltük megfelelően, mely korlátokat dokumentáltuk, és mely bizonytalanságokat fogadjuk el az adott munka keretei között. A lezárás ebben az esetben kontrollált döntés a fennmaradó bizonytalanságról.
Ez különösen fontos kutatási és módszertani munkában. A teljes bizonyosság elvárása könnyen végtelen ellenőrzési ciklushoz vezetne. A szakmai döntéshez azt kell tudnunk, hogy az adott bizonyítékok és korlátok mellett milyen erősségű állítás vállalható.
Kritikai partner vagy mesterséges ellenfél?
A kritikai szerep félreérthető, ha az együttműködést vitaként képzeljük el. Nem célunk annak eldöntése, hogy az embernek vagy az MI-nek van-e igaza. A kritikai partner funkció értéke abból származik, hogy olyan kérdéseket és alternatív nézőpontokat tesz elérhetővé, amelyek próbára teszik a kialakuló szakmai álláspontot. Az MI által felvetett ellenvetés lehet erős vagy gyenge. Elfogadhatjuk, részben beépíthetjük, további vizsgálatra tehetjük félre vagy elvethetjük. Ugyanez igaz az eredeti emberi álláspontra is. A kritikai vizsgálat után változatlanul maradhat, pontosabbá válhat, szűkebb érvényességi körrel folytatódhat, vagy alapvetően átalakulhat. A fontos változás az, hogy a döntés előtt több oldalról megvizsgáltuk ugyanazt a szakmai objektumot.
Mit tanultunk ebből?
A ChildTech eddigi projektjeiből öt tanulságot emelnék ki.
Az első: az MI kritikai partnerként akkor hasznos, ha világosan meghatározzuk, milyen típusú sérülékenységet keresünk. A logikai, a módszertani, az empirikus és a szerkesztési kritika eltérő vizsgálati feladat.
A második: egy MI által generált ellenvetés vizsgálandó szakmai INPUT. Az ellenérv megalapozottságát ugyanúgy ellenőriznünk kell, mint az eredeti állítást.
A harmadik: az alternatív magyarázatok segítenek meghatároznunk következtetéseink határait. Különösen fontosak olyan helyzetekben, ahol ugyanazok az adatok több értelmezéssel is összeegyeztethetők.
A negyedik: a kritikai vizsgálat eredményét osztályoznunk kell. A kritikus probléma, a korlátozás, a fejlesztési lehetőség és a nyitott kérdés eltérő szakmai választ kíván.
Az ötödik: a kritikai folyamat lezárása maga is szakmai döntés. Meg kell határoznunk, milyen bizonytalanság mellett tekintjük az adott eredményt, módszert vagy szöveget megfelelően ellenőrzöttnek.
Az MI kritikai partnerként így egy sajátos funkciót kap a szakmai munkában: segít növelni az ellenállást a saját első értelmezéseinkkel szemben. Ez az emberi szakértőre és az MI korábbi OUTPUT-jára egyaránt vonatkozik. Ekkor el kell tudnunk düntenünk, hogy egy szakmai állítás mit bír ki, ha más nézőpontból, más feltételezésekkel és szigorúbb bizonyítási igénnyel vizsgáljuk meg.
A műhelyesszé egy mondatban
Az MI kritikai partnerként azzal járulhat hozzá a szakmai munkához, hogy ellenvetéseket, alternatív értelmezéseket és ellenőrzési szempontokat tesz láthatóvá, amelyek segítségével még a döntés előtt stressztesztelhetjük saját állításainkat és módszereinket.
A következő rész
5. Amikor az MI téved
Hibák, bizonytalanság és szakértői kontroll
A következő műhelyesszében azt vizsgáljuk, milyen típusú hibák jelenhetnek meg egy hosszabb szakmai ember–MI munkafolyamatban, hogyan ismerhetők fel, és milyen ellenőrzési mechanizmusokkal csökkenthető annak kockázata, hogy egy meggyőzően megfogalmazott, de hibás MI-OUTPUT beépüljön a további szakmai munkába.
Transzparencia
A tartalom a ChildTech ember–MI együttműködési gyakorlatában, ChatGPT közreműködésével készült; szakmai tartalmáért és végleges formájáért Piróth István felel.
