Pachetul llama-index-embeddings-huggingface permite generarea locală a vectorilor de embedding folosind biblioteca sentence-transformers. Modelul rulează complet pe procesorul sau placa grafică a utilizatorului.
Exemplu cu BGE-M3 (Multilingual)
from llama_index.embeddings.huggingface import HuggingFaceEmbedding
from llama_index.core import Settings
Settings.embed_model = HuggingFaceEmbedding(
model_name="BAAI/bge-m3",
device="cuda" # sau "mps" pe Mac, "cpu"
)
Modelul BGE-M3 este considerat cel mai performant model open-source pentru limba română și căutări multilingve.
Întrebări & Exemple practice:
Clasa HuggingFaceEmbedding: Vectorizare Semantică LocalăAi o întrebare despre Clasa HuggingFaceEmbedding: Vectorizare Semantică Locală sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.