Prompt Drift este degradarea neașteptată a comportamentului unui prompt stabil atunci când furnizorul de API (OpenAI, Anthropic, Google) actualizează versiunea internă a modelului (ex: trecerea de la GPT-4-0613 la GPT-4o sau actualizări silențioase de aliniere).
Bune practici pentru prevenirea Prompt Drift:
1. Folosiți versiuni de modele fixate (Pinned Model Versions, ex: gpt-4o-2024-08-06 în loc de gpt-4o).
2. Păstrați o suită de testare cu 50-100 de cazuri de referință (Golden Test Suite).
3. Rulați teste automate de regresie înainte de a modifica versiunea modelului în producție.
4. Măsurați rata de succes a formatării JSON și lungimea medie a răspunsurilor.Predictibilitate în producție: Protejează sistemele critice împotriva comportamentelor imprevizibile.
Întrebări & Discuții: Prompt Drift și Monitorizarea Stabilității la Schimbarea Versiunilor de Model
Ai o întrebare despre Prompt Drift și Monitorizarea Stabilității la Schimbarea Versiunilor de Model sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.