Endpoint-ul /v1/completions trimite promptul brut direct în model fără a aplica delimitatori conversaționali (ex: <|user|>), fiind ruta standard pentru autocompletion de cod în extensii IDE.
Exemplu de completare cod
curl http://localhost:8000/v1/completions \
-H "Content-Type: application/json" \
-d '{
"model": "Qwen/Qwen2.5-Coder-7B",
"prompt": "// Funcție TypeScript pentru inversarea unui string:\nexport function inverseaza(str: string): string {",
"max_tokens": 50,
"stop": ["}"]
}'
Oferă control absolut asupra secvențelor de tokeni de intrare.
Întrebări & Exemple practice:
Endpoint-ul REST /v1/completions în vLLM: Completare Text Brută fără Chat TemplateAi o întrebare despre Endpoint-ul REST /v1/completions în vLLM: Completare Text Brută fără Chat Template sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.