Un răspuns poate fi 100% factual din documente, dar complet irelevant dacă răspunde la altceva. Answer Relevance măsoară dacă răspunsul adresează punctual solicitarea inițială.
Mecanismul de calcul
- Pornind de la răspunsul generat, un model LLM încearcă să reverse-engineereze întrebarea inițială.
- Se calculează similitudinea vectorială între întrebarea originală și întrebarea dedusă.
- Dacă scorul este peste 0.85, răspunsul a adresat exact problema utilizatorului.
Asigură că utilizatorul primește informația cerută fără digresiuni inutile.
Întrebări & Discuții: Metrica Answer Relevance: Evaluarea Concordanței cu Întrebarea Utilizatorului
Ai o întrebare despre Metrica Answer Relevance: Evaluarea Concordanței cu Întrebarea Utilizatorului sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.