Metoda .from_language() configurează delimitatori specifici limbajelor de programare (clase, funcții def, acolade, docstrings), asigurându-se că funcțiile și metodele nu sunt tăiate brutal la jumătate în timpul fragmentării.
from langchain_text_splitters import RecursiveCharacterTextSplitter, Language
python_splitter = RecursiveCharacterTextSplitter.from_language(
language=Language.PYTHON,
chunk_size=1000,
chunk_overlap=100
)
docs = python_splitter.create_documents([cod_sursa_python])Acuratețe de cod: Modelele de coding răspund substanțial mai bine când fragmentele conțin definiția completă a funcțiilor.
Întrebări & Exemple practice:
CodeTextSplitter: Fragmentarea Codului Sursă (Python, JS, HTML) Respectând SintaxaAi o întrebare despre CodeTextSplitter: Fragmentarea Codului Sursă (Python, JS, HTML) Respectând Sintaxa sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.