Una dintre cele mai mari probleme ale LLM-urilor în producție este emiterea de JSON invalid (ghilimele neînchise, virgule în plus la final de obiect). Gramatica json.gbnf inclusă în llama.cpp rezolvă definitiv această problemă:
# Rulare cu gramatica oficială JSON
./build/bin/llama-cli -m model.gguf --grammar-file grammars/json.gbnf -p "Returnează specificațiile tehnice ale unui server sub formă de obiect JSON:"
Rezultatul emis poate fi consumat în siguranță direct de API-uri automate fără blocaje de parsare.
Întrebări & Exemple practice:
Constrângerea Ieșirilor în Format JSON ValidAi o întrebare despre Constrângerea Ieșirilor în Format JSON Valid sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.