answer_relevancy evaluează dacă răspunsul răspunde direct întrebării adresate, generând întrebări artificiale din răspuns și măsurând similitudinea vectorială cu întrebarea originală.
Exemplu de utilizare
from ragas.metrics import answer_relevancy
# Evaluează dacă răspunsul este la obiect sau conține divagații inutile
rezultate = evaluate(dataset, metrics=[answer_relevancy])
print(f"Relevanță răspuns: {rezultate['answer_relevancy']:.4f}")Nu penalizează factualitatea, ci focalizarea pe cerința inițială a utilizatorului.
Întrebări & Exemple practice:
Metrica Answer Relevancy în Ragas: Concordanța Răspunsului cu Întrebarea UtilizatoruluiAi o întrebare despre Metrica Answer Relevancy în Ragas: Concordanța Răspunsului cu Întrebarea Utilizatorului sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.