Chat AI történelmi áttekintő

Röviden szeretnék írni a nyelvi model AI keletkezéséről, történetéről mielőtt belecsapnék a lecsóba. 🍅

Először is kezdjük tehát az alapoknál és csak röviden. Magával a chat azaz nyelvi modell AI-val már régen is próbálkoztak, az első chat alapú AI ELIZA igazából már 1966-ban létezett, de igazi áttörést nem ért el, hiszen ezek a kezdetlegesek még mindig mind csak szabályokra épültek, pont mint a sakk, vagy egy szótár program. Nem volt tanulás, vagy szövegértés, ha szlengben írtál valamit, már nem értették. Számos régi számítógépes játékban is próbálkoztak vele, sokan talán emlékeztek pl. c64-en azokra a kalandjátékokra, amikor beírtad hogy "Menj balra" és a főhős balra ment, de mikor azt írtad be, hogy "Lódulj balra!" 😀 már nem értette... ezek még nagyon kezdetlegesek voltak és csak fix szabályszerű mondatokra reagáltak.

Ezek után kissé le is hanyatlott az chat alapú AI. Talán idegesítette az embereket, hogy sokszor nem értette, nem tudni a pontos okát, de egy ideig háttérbe szorult az egész AI mizéria. A szöveges kalandjátékokat pedig felváltották a point and click kalandjátékok...

A nagy fordulat: gépi tanulás és mélytanulás, 2010 után kezdődött igazából. A chat alapú AI-k valódi áttörése csak azután történt meg, hogy hatalmas mennyiségű adat lett elérhető (internetes szövegek, közösségi média stb.) Erőteljes hardverek, főleg nagyon komoly GPU-k jelentek meg. Processzorok helyett inkább GPU lett az igazi erőforrás (Ahhoz is hogy pl. offline chat alapú AI-t futass, tehát nem jó processzor kell, hanem egy/több nagyon erős videókártya)

Később kifejlesztették a neurális hálókon és különösen a Transformer architektúrán alapuló nyelvi modelleket (pl. BERT, GPT stb.) Ezek már képesek valóban „megtanulni” a nyelvet statisztikai alapon, nem csak szimulálni sablonos válaszokat, mint ELIZA, vagy a c64-es játékok és elindult a folyamat egy igazán érdekes úton...

Ma már ott tartunk, hogy Turing teszten igazából már nagyon nehéz, vagy nem is lehet megmondani, hogy "nem ember" válaszol és ha szlegben írunk valamit, akkor is válaszolnak. Mindezek ellenére még mindig azt mondom, hogy rengeteget hibázik és gyerekcipőben jár az egész, ahhoz képest, hogy mit tud majd még elérni...

Szerintem történelmi áttekintés elég is ennyi, jöjjenek az érdekesebb dolgok... :)