Custom vs Chonkie: por qué construimos nuestro propio chunker para el DOF
Evaluamos 8 estrategias de chunking (5 de Chonkie, 2 pipelines, 1 custom) sobre 1,000 documentos del DOF. Ninguna opción de librería estándar respetaba tanto la estructura del documento como el límite de tokens.
Joaquín Bravo ContrerasLeer más