← Volver al inicio

Extracción inteligente de campos en tickets

Visión documental · OCR · LayoutLMv3 · Mayo de 2026

Proyecto de visión por computador para convertir fotografías de tickets en datos estructurados. El sistema identifica el documento, corrige su perspectiva, lee el texto y localiza campos fiscales como el total, la base imponible y el desglose de IVA.

Este proyecto surgió de un compañero que tenía problemas en su empresa para conocer los gastos de los empleados durante los viajes. Los empleados mandaban los tickets mediante fotografías a un grupo de WhatsApp y una vez por semana un encargado pasaba las facturas a la base de datos de la empresa.

Mi compañero se dirigió a mí y me preguntó si habría alguna forma de automatizar este trabajo ya que habían llegado a un punto en el que apenas eran capaces de procesar manualmente tantísimos tickets.

Los modelos de inteligencia artificial locales están pensados exactamente para esto. Utilizando una base de datos de unos 2,000 tickets fui capaz de desarrollar una herramienta capaz de detectar con una precisión del 98 % todos los tickets del benchmark de 1,000 tickets.

El reto no era solo reconocer caracteres: los tickets llegaban con fondos, sombras, pliegues, inclinación y una impresión térmica de calidad irregular.

Comparación entre la captura de entrada y el documento corregido. Los rectángulos verdes proceden de las cajas del campo TOTAL detectadas por el modelo.

Cómo funciona

1. LocalizaciónYOLO detectaba el ticket y sus puntos de referencia en la imagen.
2. CorrecciónOpenCV rectificaba la perspectiva y aislaba el documento del fondo.
3. LecturaPaddleOCR recuperaba texto y posición de cada fragmento.
4. ExtracciónLayoutLMv3 clasificaba cada dato según contenido y contexto espacial.

Evaluación sobre tickets reales

1,000tickets evaluados en el benchmark comparativo.
890casos con acierto exacto del total en las rutas de recorte, corrección geométrica e híbrida.
953tickets evaluados correctamente con una confianza del 98.2 %. Los que se encuentran por debajo del 95 % se mandan a revisión humana.

Resultados

Se ha desarrollado una herramienta automática capaz de procesar un ticket en menos de 1 s ejecutándose desde un teléfono móvil. Liberando así a la empresa de la pérdida de tiempo del empleado y al trabajador de una tarea repetitiva y propensa a errores humanos.