Ce înseamnă LLM (model lingvistic mare)
Un LLM (Large Language Model, în română model lingvistic mare sau model mare de limbaj) este un model de inteligență artificială antrenat pe cantități uriașe de text, ca să poată înțelege și produce limbaj natural. Poate răspunde la întrebări, scrie texte, rezuma documente, traduce, programa și purta conversații.
„Mare” se referă la două lucruri: numărul de parametri (de la câteva miliarde la sute de miliarde sau mai mult) și cantitatea de text din care a învățat (mii de miliarde de tokeni, din pagini web publice, cărți, articole și cod).
Exemple cunoscute sunt familiile GPT (OpenAI), Claude (Anthropic), Gemini (Google), Llama (Meta), Mistral și DeepSeek. Aplicațiile cu care discuți, precum ChatGPT, sunt construite peste astfel de modele.
Cum funcționează
În esență, un LLM face un singur lucru: dat fiind un text, estimează care este cel mai probabil următorul token (o bucată de cuvânt). Alege unul, îl adaugă la text și repetă. Răspunsurile lungi se formează astfel, token cu token. Arhitectura folosită aproape universal este transformer-ul, care îi permite modelului să țină cont de tot textul primit.
Antrenarea are două faze: pre-antrenarea, în care modelul învață limba și multe cunoștințe prezicând următorul token din cantități uriașe de text, și post-antrenarea (instruction tuning, RLHF), în care învață să urmeze instrucțiuni, să fie util și să evite răspunsurile dăunătoare.
Pe înțelesul tuturor
Un LLM seamănă cu sugestiile de cuvinte de pe tastatura telefonului, dar de mii de ori mai puternic: a „citit” atât de mult text încât, prezicând cuvânt cu cuvânt, poate scrie un eseu, un e-mail sau un program întreg.
Exemplu
O avocată din Timișoara îi dă unui LLM un contract de 20 de pagini și îi cere lista clauzelor despre penalități. Modelul extrage clauzele în câteva secunde. Avocata le verifică apoi în textul original, pentru că modelul poate omite sau interpreta greșit un detaliu.
De reținut
- Un LLM este un model antrenat pe foarte mult text, care generează răspunsuri token cu token.
- Poate scrie fluent și convingător chiar și atunci când greșește (halucinații).
- Cunoștințele lui se opresc la data limită a datelor de antrenare, dacă nu primește informații noi.
Nu confunda
- LLM vs. chatbot: LLM-ul este modelul; chatbotul este aplicația de conversație construită peste el.
- LLM vs. motor de căutare: un motor de căutare găsește pagini existente; un LLM generează text nou din ce a învățat, așa că poate greși și nu își indică sursele decât dacă e conectat la o căutare.
Termeni înrudiți
- Transformer: Arhitectura de rețea neuronală, prezentată de Google în 2017, pe care sunt construite aproape toate modelele de limbaj actuale.
- Token: Bucata de text (cuvânt, parte de cuvânt sau semn) cu care lucrează un model de limbaj; limitele și costurile se măsoară în tokeni.
- GPT: Familia de modele de limbaj creată de OpenAI, folosită în ChatGPT; numele înseamnă „transformer generativ pre-antrenat”.
- Chatbot: Program cu care poți conversa în scris sau vocal; azi, cei mai capabili chatboți sunt construiți pe modele lingvistice mari.
- Halucinație AI: Răspuns generat de AI care sună convingător, dar este fals sau inventat: fapte, cifre, citate sau surse care nu există.
- SLM (model lingvistic mic): Model de limbaj compact, cu relativ puțini parametri, care poate rula rapid și ieftin pe un laptop, pe telefon sau pe un server mic.