SEGMENTACIÓN DE CARACTERES EN PANELES LED EN IMÁGENES NATURALES Álvaro Vilches Díaz Giulia Sabatinelli Pablo Alamo González

Motivación y Objetivos No hay ningún sistema de detección de texto capaz de segmentar texto LED Texto LED es discontinuo. 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 2

MÉTODO 1.Procesamiento previo de la imagen (procesamiento secuencial) imagen en binario. 2.Los mensajes siempre se encuentran en un panel rectangular de fondo negro horizontal 2.Canny para detectar los píxeles que forman los carácteres. 3.Segmentar los caracteres. Detección panel LED 1.Aislar 2.Extraer el panel LED 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 3

Procesamiento previo: escala grises IMAGEN INICIALESCALA DE GRISES Para reconocer texto no necesitamos información sobre el color. 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 4

Procesamiento previo: filtro mediana Suavizacion con el filtro de la mediana: ventana cuadrada de 5x5 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 5

Procesamiento previo: ecualización Mejora del contraste mediante una ecualización del histograma: mismo número de pixels para cada nivel de gris por una imagen monocroma (en gris) 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 6

Umbralización múltiple basada en Otsu Para separar objetos del fondo de la imagen Si los niveles de intensidad de los objetos y del fondo son suficientemente distintos, es posible segmentar la imagen usando un umbral global aplicable a toda la imagen. Como con todos los métodos de segmentación se asigna cada píxel a un cierto grupo, llamado comúnmente segmento La pertenencia de un píxel a un cierto segmento se decide mediante la comparación de su nivel de gris con un cierto valor umbral Método de segmentación completo (=cada pixel pertenece obligatoriamente a un segmento y sólo uno) 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 7

Procesamiento previo: umbralización múltiple Necesitamos binarizar la imagen Suponemos que existen 4 regiones de color diferenciadas 1. el fondo del panel 2. el fondo de la imagen 3. el primer plano de la imagen 4. las luces del panel Umbralización múltiple basado en Otsu con 4 umbrales: solo el primer umbral para binarizar la imagen Así los píxeles blancos son los más oscuros en la imagen original entre los que estará el fondo del panel. 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 8

Procesamiento previo: Apertura En la realidad no habrá exactamente cuatro regiones de color diferenciadas. Muchos píxeles blancos que no pertenecen al panel. Apertura Apertura con un elemento estructural rectangular K 5x14 Apertura de una imagen A por un elemento estructural K es la erosión de A por K,seguido de la dilatación del resultado por K 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 9

Procesamiento previo: binarización UmbralizaciónApertura 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 10

Bounding Box Para encontrar el panel: bounding box la caja de area minima que contiene a conjuntos de objectos muy cercano el uno del otro 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 11

Detección panel LED 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 12

Extracción puntos de interés 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 13

Extracción puntos de interés 13/01/2016PID Grado en Ingenería Informática-Tecnologías Informáticas 14