Puteți rula Llama Guard 3 local printr-o simplă comandă Ollama:
# Descărcare și rulare Llama Guard 3 în Ollama
ollama run llama-guard3:8b
# Sau rulare de înaltă performanță pe server GPU cu vLLM
vllm serve meta-llama/Llama-Guard-3-8B --port 8001
Asigură moderare gratuită, ultra-rapidă și complet confidențială în infrastructura proprie.
Întrebări & Exemple practice:
Rularea Llama Guard 3 Local prin Ollama și vLLMAi o întrebare despre Rularea Llama Guard 3 Local prin Ollama și vLLM sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.