Token Splitter folosește biblioteca tiktoken pentru a segmenta textele exact după numărul de tokeni ai arhitecturii țintă (OpenAI / Claude), garantând că niciun fragment nu va depăși limita modelului de embedding.
Parametri configurare
{
"parameters": {
"chunkSize": 500,
"chunkOverlap": 50
},
"type": "@n8n/n8n-nodes-langchain.textSplitterTokenSplitter"
}
Elimină complet erorile de tip maximum context length exceeded din timpul vectorizării.
Întrebări & Exemple practice:
Sub-nodul Token Splitter în n8n: Împărțirea Exactă după Limita de TokeniAi o întrebare despre Sub-nodul Token Splitter în n8n: Împărțirea Exactă după Limita de Tokeni sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.