Reduce chunk size to fit all-MiniLM-L6-v2 token limit (256 max)

FixRAGService
Expédié
18 mars 2026 à 02:54 UTC
Auteur
Kamo
Commite
a794078

Chunk target was 2000 chars (~512 tokens) but the embedding model only accepts 256 tokens, causing 413 validation errors. Reduce to 800 chars (~200 tokens) with 100 char overlap.

Tous les changements

Comme ce que tu vois expédier ?

Chacune de ces mises à jour atterrit automatiquement dans votre espace de travail. Commencez gratuitement et regardez-le grandir semaine après semaine.

Commencez gratuitement pour toujoursPrix de visualisation