Ce înseamnă GPT
GPT vine de la Generative Pre-trained Transformer, adică „transformer generativ pre-antrenat”. Este numele familiei de modele lingvistice mari dezvoltate de compania americană OpenAI, care alimentează aplicația ChatGPT.
Fiecare cuvânt din nume spune ceva: generativ, pentru că produce text nou; pre-antrenat, pentru că învață întâi din cantități uriașe de text, înainte de a fi adaptat pentru sarcini concrete; transformer, după arhitectura de rețea neuronală pe care este construit.
Primul model GPT a apărut în 2018. GPT-2 (2019) a atras atenția prin textele surprinzător de coerente, GPT-3 (2020) a arătat că un model foarte mare poate rezolva sarcini noi doar din câteva exemple, iar ChatGPT, lansat în noiembrie 2022, a făcut tehnologia cunoscută publicului larg. Versiunile mai noi lucrează și cu imagini și sunet.
Cum funcționează
Ca orice LLM de acest tip, un model GPT primește un text și prezice următorul token, apoi pe următorul, până termină răspunsul. A fost antrenat întâi pe text general, apoi ajustat cu exemple de conversații și cu feedback de la oameni (RLHF), ca să urmeze instrucțiuni și să răspundă util.
Modelele GPT pot fi folosite direct în ChatGPT, în produse Microsoft precum Copilot sau, de către programatori, prin API-ul OpenAI.
Pe înțelesul tuturor
GPT este pentru ChatGPT ce este motorul pentru o mașină: motorul face treaba grea, iar mașina adaugă volanul, scaunele și bordul cu care interacționezi tu.
Exemplu
Când îi ceri lui ChatGPT să-ți scrie o cerere de concediu, aplicația trimite mesajul tău unui model din familia GPT. Modelul generează textul token cu token, iar aplicația ți-l afișează pe măsură ce apare.
De reținut
- GPT înseamnă Generative Pre-trained Transformer.
- Este familia de modele a OpenAI, folosită în ChatGPT.
- „GPT” nu este un termen generic pentru orice chatbot, deși mulți îl folosesc așa.
Nu confunda
- GPT vs. ChatGPT: GPT este modelul (sau familia de modele); ChatGPT este aplicația de conversație construită peste el.
- GPT vs. LLM: toate modelele GPT sunt LLM-uri, dar Claude, Gemini sau Llama sunt și ele LLM-uri, fără să fie GPT.
- GPT în AI vs. GPT la discuri: în informatică, GPT înseamnă și GUID Partition Table, o schemă de împărțire a hard diskului, fără legătură cu AI.
Termeni înrudiți
- ChatGPT: Asistentul conversațional al companiei OpenAI, lansat în 2022, care a făcut AI generativă cunoscută publicului larg.
- OpenAI: Organizația americană care a creat ChatGPT, modelele GPT, DALL-E, Sora și Whisper, fondată în 2015 cu misiunea declarată de a dezvolta AGI.
- Transformer: Arhitectura de rețea neuronală, prezentată de Google în 2017, pe care sunt construite aproape toate modelele de limbaj actuale.
- LLM (model lingvistic mare): Model AI antrenat pe cantități uriașe de text, care înțelege și generează limbaj; stă în spatele ChatGPT, Claude sau Gemini.
- Model fundamental (foundation model): Model AI mare, antrenat pe date foarte variate, care poate fi adaptat la multe sarcini diferite; GPT, Claude, Gemini sau Llama sunt astfel de modele.