← CasosLegaltech · seguros

Extracción de sentencias judiciales en 4 jurisdicciones

En simple

Un equipo cargaba a mano datos de sentencias judiciales. Ahora un sistema los extrae solo y avisa cuando algo no cierra, así las personas revisan solo lo dudoso.

01 · Problema

Un equipo leía a mano sentencias laborales, cada jurisdicción con su propio formato, para cargar montos, fechas y resoluciones en un sistema.

02 · Enfoque

Golden set por jurisdicción antes de construir. Extracción estructurada con un LLM, pero las verificaciones (montos, fechas, plazos) se recalculan en código en vez de confiar en el modelo. Métricas por campo, no un accuracy global. Una suite CLI de LLMOps corre los controles en CI/CD antes de cada cambio.

03 · Arquitectura · para tu equipo técnico

evalúabloquea si empeora1Sentencias en PDF2Normalización yjurisdicción3Extracción con LLM4Verificaciones encódigo5Golden set y métricaspor campo6Regresión en CI/CD7Resultados validadosevalúabloquea si empeora1Sentencias en PDF2Normalización yjurisdicción3Extracción conLLM4Verificaciones encódigo5Golden set ymétricas porcampo6Regresión enCI/CD7Resultadosvalidados
  • Fuente
  • Procesamiento
  • Modelo
  • Control de calidad
  • Salida
  1. 1Sentencias en PDF de cuatro jurisdicciones
  2. 2Normalización de texto y detección de jurisdicción
  3. 3Extracción estructurada con LLM
  4. 4Verificaciones recalculadas en código
  5. 5Golden set y métricas por campo
  6. 6Suite de regresión en CI/CD
  7. 7Resultados validados para el equipo

Qué se mide

  • 4jurisdicciones con formatos distintos
  • 6campos verificados en código, no por el LLMDatos ilustrativos
Exactitud por campoDatos ilustrativosEl promedio global dice 94 %. El campo de honorarios, 71 %. Por eso se mide por campo.
Jurisdicción
99 %
Monto de condena
97 %
Fecha de sentencia
95 %
Resolución
88 %
Honorarios
71 %lo que el promedio esconde
Ver los datos
CategoríaValorNota
Jurisdicción99 %
Monto de condena97 %
Fecha de sentencia95 %
Resolución88 %
Honorarios71 %lo que el promedio esconde
Exactitud global por versiónDatos ilustrativosCada cambio de prompt o modelo corre contra el golden set. La v4 empeoró y CI la frenó antes de producción.
7580859095100v1v2v3v4v5v6v1: 82 %v2: 87 %v3: 90 %v4: 84 % (bloqueada por CI)v5: 92 %v6: 94 %84 % · bloqueada por CI94 %
Ver los datos
CategoríaValorNota
v182 %
v287 %
v390 %
v484 %bloqueada por CI
v592 %
v694 %

04 · Resultado

Procesa sentencias de cuatro jurisdicciones con controles de calidad automáticos que corren antes de cada cambio.

Servicio relacionado

Revisión LLMOps

“Si no lo medís, no sabés si funciona. Solo creés.”

Ver el servicio