Koncepty & teória
16 tém
AGI
AGI je koncept umelej inteligencie, ktorá dokáže všeobecne riešiť široké spektrum úloh na úrovni človeka (alebo nad ňou) — nielen v jednej úzkej oblasti. Na rozdiel od dnešnej „úzkej AI" (ANI), ktorá...
AI - Základné pojmy
Praktický slovník základných pojmov v AI. Zoznam je rozdelený do tematických blokov, aby sa dal rýchlo skenovať. Artificial Intelligence (AI) Odbor zameraný na systémy, ktoré vykonávajú úlohy...
Answer Thrashing
Answer Thrashing je jav, keď LLM „stráca stabilitu“ pri odpovedi: začne sa preklápať medzi viacerými kandidátnymi odpoveďami , často si protirečí , opakovane sa opravuje a niekedy sa ani nevie...
Context Drift
Context drift (rozpad kontextu) je jav, keď sa AI (najmä LLM v chate, asistenti na kódovanie alebo agenti s nástrojmi) postupne odkloní od pôvodného cieľa, faktov alebo pravidiel – a začne odpovedať...
Context Window
Context Window je limit, koľko textu (tvojich správ, systémových inštrukcií, priložených dát aj predchádzajúcej konverzácie) dokáže AI naraz „držať v hlave“ pri generovaní odpovede. Keď ho prekročíš,...
Emergent Properties
(keď sa schopnosti objavia „z ničoho nič“) Emergent properties (emergentné vlastnosti) sú schopnosti modelu, ktoré sa neprejavujú postupne po malých krokoch, ale zdanlivo sa „zjavia“ až po prekročení...
Evaluation Awareness
Evaluation awareness je schopnosť AI (najčastejšie veľkých jazykových modelov – LLM) rozoznať, že je práve testovaná alebo hodnotená , a následne tomu prispôsobiť správanie. Problém je, že výsledky...
Grokking
Grokking je fenomén pri tréningu neurónových sietí, kde model najprv vyzerá, že sa učí len naspamäť (dobrý výkon na tréningu, slabý mimo neho), a až po dlhšom čase sa zrazu „prepne“ do režimu...
Inductive Bias
Inductive Bias je sada „predpokladov“, ktoré má učící sa algoritmus zabudované, aby vedel z obmedzených dát odhadnúť niečo aj o prípadoch, ktoré ešte nevidel. Bez tohto biasu by sa model často...
Kolmogorovova komplexita
Kolmogorovova komplexita meria, aký krátky program stačí na presné vygenerovanie daného objektu (reťazca, súboru, obrazu). Formálne: komplexita je dĺžka najkratšieho programu, ktorý vypíše a skončí....
Konfabulácia
Konfabulácia je fenomén, kedy AI model vygeneruje informáciu, ktorá znie presvedčivo a gramaticky správne, ale je fakticky nesprávna alebo úplne vymyslená. Je to ako keď ti niekto s absolútnou...
Multimodálne AI agenty
Pojem „AI agent" sa v posledných rokoch stal jedným z najdiskutovanejších konceptov v oblasti umelej inteligencie. Na rozdiel od klasických chatbotov, ktoré len reagujú na otázky, AI agent je systém...
No Free Lunch Theorem
No Free Lunch Theorem hovorí (zjednodušene), že ak spriemeruješ výkon algoritmov cez všetky možné problémy, žiadny nemá výhodu. Inými slovami: ak niečo vyhráva často, je to preto, že „hrá“ na...
Reasoning Models
Bežné jazykové modely generujú odpoveď token po tokene, pričom každý ďalší token závisí od predchádzajúcich. Tento prístup funguje prekvapivo dobre na väčšinu úloh, no zlyháva pri problémoch...
Tokenizácia v AI
Tokenizácia je proces rozdelenia textu na menšie jednotky – tokeny – ktoré jazykový model dokáže spracovať. Je to prvý a jeden z najdôležitejších krokov v celom pipeline spracovania jazyka. Ako model...
Verbatim Recall
Verbatim recall je schopnosť (alebo problém) jazykového modelu reprodukovať úseky tréningových dát presne slovo za slovom. Je to ako keď model namiesto generovania novej odpovede "skopíruje" celé...