Techniky & tréning

41 tém

Agentic RAG: Keď AI sama rozhoduje, čo hľadá a ako
Klasický RAG dáva jazykovému modelu dokumenty na prečítanie. Agentic RAG mu dáva schopnosť rozhodnúť sa, čo a kde hľadať — opakovane, adaptívne, s vlastným úsudkom. RAG (Retrieval Augmented...
Attention Mechanism
Attention Mechanism je technika, vďaka ktorej sa model pri spracovaní textu (alebo obrazu, zvuku) dynamicky zameriava na tie časti vstupu, ktoré sú pre aktuálny krok najdôležitejšie. Predstav si to...
Context Engineering: Umenie formovať myseľ AI
Context engineering je disciplína, ktorá posúva prompt engineering na vyššiu úroveň — nejde len o to, čo napíšeš do promptu, ale o to, čo presne sa nachádza v celom kontextovom okne modelu pri každom...
Deep Learning
Deep Learning je prístup v strojovom učení, kde sa model učí z dát cez viacvrstvové neurónové siete. Prakticky to znamená, že namiesto ručného vymýšľania „pravidiel" necháš systém, aby si sám...
Diffusion Models
Diffusion models sú generatívne AI modely, ktoré vytvárajú nové dáta (najčastejšie obrázky, čoraz viac však aj video, audio a 3D) tak, že sa naučia postupne odšumovať náhodný šum až na zmysluplný...
DPO: Tréning AI na ľudské preferencie bez odmeňovacieho modelu
Direct Preference Optimization (DPO) je technika alignment jazykových modelov, ktorá nahrádza zložitý dvojstupňový proces RLHF priamejším matematickým prístupom — a dnes je de facto štandardom pre...
Federované učenie
Federované učenie je technika strojového učenia, v ktorej model trénuje na dátach distribuovaných naprieč zariadeniami alebo organizáciami — bez toho, aby sa samotné dáta kdekoľvek centralizovali. V...
Few-Shot Prompting
Few Shot Prompting je technika, pri ktorej modelu nedáš iba zadanie úlohy, ale aj niekoľko ukážkových dvojíc vstup → výstup . Model sa podľa nich prispôsobí očakávanému formátu, štýlu a rozhodovacím...
Flash Attention: Ako transformery zvládajú milióny tokenov
Flash Attention je algoritmická optimalizácia, ktorá zmenila spôsob výpočtu pozornostného mechanizmu v transformeroch — a práve vďaka nej dnes modely ako Claude, GPT 4 či Gemini zvládajú kontextové...
Flash-MoE: 397-miliardový model na bežnom notebooku
Jedným z najväčších obmedzení veľkých jazykových modelov bola vždy pamäť. Model s 397 miliardami parametrov tradične vyžadoval serverovú farmu s desiatkami GPU a mesačné cloudové náklady v tisícoch...
GAN
GAN (Generative Adversarial Network) je generatívna technika, kde sa dva neurónové modely „naťahujú" v hre: jeden vytvára falošné dáta a druhý sa ich snaží odhaliť. Výsledok je generátor, ktorý vie...
Gradient Descent
Gradient Descent je základná metóda, ako „učiť" model: opakovane upravuje svoje parametre tak, aby znižoval chybu (loss). Predstav si to ako zostup z kopca v hmle — nevidíš celé údolie, ale vieš,...
Graph Neural Networks
Graph Neural Networks (GNN) sú neurónové siete navrhnuté na prácu s grafmi – teda s dátami, kde sú objekty (uzly) prepojené vzťahmi (hrany). Namiesto toho, aby spracúvali dáta ako mriežku (obrázky)...
GraphRAG: Znalostné grafy pre hlbšie porozumenie kontextu NEW
GraphRAG je technika od Microsoft Research, ktorá rozširuje klasický RAG o explicitné znalostné grafy — umožňuje AI odpovedať nie len na faktické otázky o konkrétnom odseku, ale na analytické otázky...
Chain-of-Thought Prompting: Ako naučiť AI myslieť nahlas
Chain of Thought (CoT) prompting je technika, pri ktorej model pred záverečnou odpoveďou vygeneruje sériu medzikrokov uvažovania — namiesto toho, aby odpovedal priamo. Táto zdanlivo jednoduchá zmena...
Inference
Inference je fáza, keď už je AI model natrénovaný a ty ho reálne používaš: pošleš prompt a model začne generovať odpoveď token po tokene. Je to „prevádzka" modelu v praxi — a práve tu sa láme...
Knowledge distillation
Knowledge distillation (destilácia znalostí) je technika kompresie modelu, kde silný model ( teacher ) odovzdáva svoje správanie menšiemu modelu ( student ). Cieľ je dosiahnuť čo najlepší kompromis...
KV Cache: Pamäť transformera, ktorá zrýchľuje generovanie textu NEW
KV Cache (Key Value Cache) je optimalizačná technika inference, bez ktorej by moderné LLM nedokázali generovať text v reálnom čase — najmä pri kontextoch s desiatkami tisíc tokenov. Každý transformer...
Kvantizácia modelov — ako spustiť 70B AI na bežnom počítači
Kvantizácia je technika, ktorá redukuje presnos číselných reprezentácií váh neurónových sietí — vďaka nej dnes beží Llama 4 70B na laptope s 32 GB RAM bez potreby akéhokoľvek cloudového servera....
LLM-as-a-Judge: Keď AI hodnotí AI NEW
Technika, pri ktorej jazykový model hodnotí výstupy iného modelu, sa stala základom moderného trénovania aj nasadzovania AI — a zásadne mení to, ako meriame kvalitu generatívnych systémov. LLM as a...
LoRA
LoRA (Low Rank Adaptation) je technika, ako doladiť veľký model na konkrétnu úlohu tak, že necháš pôvodné váhy „zamrznuté" a učíš len malé doplnkové vrstvy — výsledkom je lacnejší, praktickejší a...
Machine Learning (ML)
Machine Learning (ML) je prístup, pri ktorom počítač nezíska „pevný návod" pravidiel, ale učí sa z príkladov v dátach. V praxi to znamená, že namiesto ručného programovania každej výnimky necháš...
Mixture of Experts (MoE)
Keď sa pozrieš na najväčšie AI modely posledných rokov — DeepSeek , Gemini , Llama 4 , Mixtral či GPT 4 — väčšina z nich má jedno spoločné: využíva architektúru Mixture of Experts (MoE) . V roku 2026...
Model Merging: Ako zlúčiť viacero AI modelov do jedného
Model merging je technika, ktorá umožňuje spojiť váhy dvoch alebo viacerých natrénovaných modelov do jedného — bez ďalšieho trénovania — pričom výsledný model zdedí schopnosti každého z nich....
Overfitting
Overfitting (preučenie) je stav, keď sa AI model počas tréningu „naučí naspamäť" tréningové dáta až príliš dobre — vrátane šumu a náhodných detailov — a potom zlyháva pri generalizácii na nové,...
Pokročilý Prompt Engineering
Prompt engineering nie je len o tom „napísať dobrú otázku". Na pokročilej úrovni ide o systematické riadenie myslenia jazykového modelu — od štruktúry úvah, cez sebakontrolu, až po celé meta systémy...
Process Reward Models: Ako AI hodnotí každý krok uvažovania
Process Reward Models (PRM) sú tréningová technika, ktorá AI hodnotí nielen správnosť finálneho výsledku, ale každý jednotlivý uvažovací krok — a práve toto je jeden z kľúčových pilierov dnešných...
Prompt Engineering
Prompt Engineering je disciplína zameraná na navrhovanie a optimalizáciu vstupov (promptov) pre veľké jazykové modely (LLM) s cieľom dosiahnuť čo najlepší výstup. Nejde len o „správne sa opýtať" — je...
RAG
RAG je technika, ktorá kombinuje vyhľadávanie informácií z externých zdrojov s generovaním textu pomocou LLM. Namiesto spoliehania sa na „pamäť" modelu z tréningu RAG v reálnom čase vyhľadá...
RLHF
RLHF (Reinforcement Learning from Human Feedback) je tréningový prístup, kde sa model učí z ľudských preferencií : ľudia porovnávajú odpovede a model sa nastaví tak, aby častejšie produkoval tie...
RLVR: Tréningová metóda, ktorá naučila AI naozaj myslieť
RLVR (Reinforcement Learning from Verifiable Rewards) je tréningová technika stojaca za revolúciou reasoning modelov — od OpenAI o1 cez DeepSeek R1 až po dnešné Claude a Gemini thinking modely. Na...
Spekulatívne dekódovanie
Spekulatívne dekódovanie je technika, ktorá umožňuje veľkým jazykovým modelom generovať text 2–4× rýchlejšie bez akejkoľvek straty kvality — a stala sa tichým štandardom produkčnej AI infraštruktúry...
Strojové unlearning — ako naučiť AI zabudnúť
Keď GDPR prikáže zmazať vaše dáta, nestačí vymazať riadok v databáze — treba aj odstrániť vplyv týchto dát z modelu, ktorý sa na nich naučil. Strojové unlearning je technika, ktorá to umožňuje bez...
Structured Outputs: Ako prinútiť LLM vrátiť spoľahlivé dáta NEW
Jazykové modely sú skvelé v generovaní textu — ale v produkčných aplikáciách potrebujete dáta, nie prózu. Structured Outputs je technika, ktorá zaručuje, že model vráti presne taký formát, aký vaša...
Supervised Fine-Tuning (SFT): Ako naučiť jazykový model počúvať
SFT je technika, ktorá premieňa „surové" jazykové modely na asistentov schopných sledovať inštrukcie — prvý a nevyhnutný krok pred RLHF alebo DPO v každom modernom AI asistentovi. Základné...
Syntetické dáta v AI
Svet umelej inteligencie čelí paradoxu: modely sú čoraz väčšie a schopnejšie, ale kvalitných tréningových dát je čoraz menej . Väčšina verejne dostupného textu na internete už bola použitá — niektoré...
Test-Time Compute Scaling: Keď AI myslí namiesto pamätá
Test time compute scaling je paradigma, pri ktorej model počas generovania odpovede investuje viac výpočtového výkonu do hľadania riešenia — namiesto toho, aby sa spoliehal výhradne na znalosti...
Tool Use: Ako LLM volajú nástroje a robia skutočné akcie NEW
Tool Use — volanie funkcií — je mechanizmus, ktorý umožňuje jazykovým modelom komunikovať s vonkajším svetom: volať API, spúšťať kód, čítať súbory a vykonávať reálne akcie namiesto len generovania...
Transfer Learning
Transfer Learning je technika, pri ktorej vezmeš model už natrénovaný na veľkej úlohe (alebo na veľkom množstve dát) a „prenastavíš" ho na svoju konkrétnu úlohu. V praxi je to dôvod, prečo dnes vieš...
Tree of Thoughts: Keď AI rozmýšľa v rozvetveniach
Tree of Thoughts (ToT) je technika promptovania, ktorá umožňuje veľkým jazykovým modelom systematicky skúmať viacero myšlienkových vetiev naraz — namiesto jednej lineárnej odpovede model vyhodnocuje...
U-Net
U Net je neurónová sieťová architektúra navrhnutá na „presné vystrihovanie" objektov z obrázka na úrovni pixelov (segmentáciu). Pôvodne sa preslávila v medicínskych snímkach, ale dnes ju v rôznych...