Metoda Top-K sortează toți cei peste 128.000 de tokeni din vocabular după probabilitate și îi elimină complet pe toți cei din afara primilor K candidați.
# Păstrare primii 40 de candidați probabili
./build/bin/llama-cli -m model.gguf --top-k 40 --temp 0.7Previne situațiile în care tokeni extrem de rari sau nepotriviți sunt selectați accidental în răspuns.
Întrebări & Exemple practice:
Filtrarea Primilor K Tokeni (–top-k)Ai o întrebare despre Filtrarea Primilor K Tokeni (–top-k) sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.