Benchmark-ul GAIA (General AI Assistants) testează capacitatea agenților de a rezolva probleme practice din lumea reală:
Exemple de sarcini din benchmark:
- "Descarcă fișierul Excel de pe site-ul X, extrage linia 45 și calculează deviația standard."
- "Găsește adresa de contact a primăriei din localitatea Y pe baza imaginii stemei furnizate."
Magentic-One atinge scoruri de top datorită cooperării strânse dintre WebSurfer și Coder.
Întrebări & Exemple practice:
Evaluarea Performanței pe Seturi de Date GAIA și WebArenaAi o întrebare despre Evaluarea Performanței pe Seturi de Date GAIA și WebArena sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.