DESARROLLO DE UN SOFTWARE QUE INTERPRETE EL

LENGUAJE DE SEAS DE MANOS UTILIZADO POR

PERSONAS EN SITUACION DE DISCAPACIDAD AUDITIVA Y/O
VISUAL
1. ANTECEDENTES
La misin espacial de la NASA de 1964, donde se utilizaba en un
principio, cmaras que enviaban imgenes analgicas de vuelta a la
Tierra. Posteriormente, se cambi a la idea de usar una cmara digital y
enviar la informacin en bits desde el satlite Mariner 4, en 1964, esta
forma innovadora de aplicacin tuvo sus frutos y fue as que inicio el
campo de investigacin de la visin artificial.
Los sistemas de percepcin computacional, reconocen la imagen
captada a travs de sensores pticos sensibles, estos datos son
interpretados como una proyeccin bidimensional de objetos
tridimensionales; a lo largo de los aos se fueron desarrollando nuevas
tcnicas y paquetes de aplicacin de software libre, tales como Opencv,
que tuvo su primera aparicin en su versin alfa en el mes de enero de
1999, se ha utilizado en infinidad de aplicaciones, desde sistemas de
seguridad con deteccin de movimiento, hasta aplicativos de control de
procesos donde se requiere reconocimiento de objetos.
Hoy en daOpenCv es aplicable a numerosos lenguajes de
programacin, desde su origen en C, C++ hasta C#, java, python,
matlab, etc. Estos fueron los resultados de ser un software libre, que sea
de aplicacin para todo tipo de instituciones e investigadores, aportando
con mejoras y actualizaciones de la librera:
OpenCV ha sido usado en el sistema de visin del vehculo no
tripulado Stanley de la Universidad de Stanford, ganador en el
ao 2005 del Gran desafio DARPA.
OpenCV se usa en sistemas de vigilancia de vdeo.
OpenCV es la clave en el programa Swistrack, una herramienta
de seguimiento distribuida.
Aplicar esta tecnologa en nuestro medio para personas en discapacidad
auditiva y/o del habla puede mejorar bastante su comunicacin
permitiendo la posibilidad de potenciar el uso de la informacin visual.
Se considera que las races de la visin artificial estn en el programa
2. JUSTIFICACIN
2.1 JUSTIFICACIN TCNICA
Se aprovecharan las diferentes tcnicas de procesamiento digital de
imgenes en tiempo real con paquetes especiales tales como Opencv,
un software libre que sirve de herramienta y apoyo en el procesamiento
digital de imgenes, de esta forma lograr interpretar el lenguaje de seas

con las manos, obteniendo letras, nmeros, en una interfaz grfica

comprensibles para cualquier usuario.
2.2 JUSTIFICACIN SOCIAL
Los usuarios tendrn una comunicacin ms eficiente con personas
fuera de su entorno social, que desconocen el lenguaje de seas.
Adems considerar que el proyecto desarrollado proviene del uso de
software libremultiplataforma, con la finalidad de ser utilizado por
cualquier lenguaje de programacin y futuros desarrollos e
investigaciones.
2.3 JUSTIFICACIN ECONMICA
Desarrollar un software que pueda ser utilizado por cualquier usuario y
sea aplicado en diferentes tipos de computadora de gama intermedia
para el procesamiento de imgenes, sabiendo que un gran porcentaje
de las personas e instituciones poseen el equipo necesario para la
aplicacin del software.
3. OBJETIVO
Disear y desarrollar un software que permita la interpretacin del
lenguaje de seas aplicando tcnicas de tratado de imagen digital en
tiempo real, en un tiempo de 3 meses, dentro los cuales se realizaran las
pruebas correspondientes al funcionamiento del software, con el fin de
mejorar la comunicacin entre las personas en situacin de
discapacidad del habla y/o auditiva con personas que desconozcan el
lenguaje.

4. MARCO TEORICO
La visin artificial tiene como principio la extraccin de informacin del mundo
fsico a partir de la obtencin de imgenes digitales, utilizando un computador,
actualmente es algo que se encuentra en desarrollo, pensado para diversas
aplicaciones, de las cuales se puede obtener informacin de brillo, colores,
formas, texturas, entre otros.
4.1 VISION ARTIFICIAL
4.1.1 IMAGEN DIGITAL
Una imagen digital es un arreglo numrico matricial, que posee informacin a
base de bits sobre las variaciones de longitudes de onda de luz captadas por
componentes sensibles a la luz, dichos sensores estn compuesto por
millones de pequeos semiconductores de silicio, los cuales captan los fotones;
a mayor intensidad de luz, ms carga elctrica existir, por tanto estos fotones

desprenden electrones dentro del sensor, los cuales se transformarn en una

serie de valores digitales creando un pxel.
Una imagen acromtica, es aquella que no posee informacin de color, en la
que a cada punto se le asocia informacin relativa al brillo, se puede
representar como una superficie, en la cual la altura de cada punto indica su
nivel de brillo, como se puede mostrar en la figura:

La imagen de la derecha posee una coordenas de posicin (x,y) y la

coordenada z representada en la parte izquierda se puede cuantificar la
intensidad de brillo del objeto.
Por otro lado la imagen en color RGB se puede representar asociando a cada
punto una terna de valores que indica la intensidad de tres linternas (una roja,
verde y otra azul). Una imagen de color de espectro completo se puede
representar asociando a cada punto un diagrama espectral de emisin de color.
4.1.2 ETAPAS PARA LA ADQUISICION DE IMAGEN DIGITAL
El ser humano capta la luz a travs de dos receptores pticos, los ojos envan
esta informacin de variacin de ondas de luz por el nervio ptico con toda la
informacin necesaria para ser procesada en el cerebro, posteriormente se
elige los aspectos de inters, se descompone la imagen captada, y se procede
a dar una interpretacin de lo que se vio, lo que por consecuencia emitir una
respuesta; por tanto se utiliza esta analoga del funcionamiento de nuestra
capacidad visual para realizar un algoritmo optimo sobre la forma de captar una
imagen digital, como proceder con ella y que resultado esperar, teniendo como
conclusin los siguientes pasos :
Primera fase.- obtener la imagen digital por medio de algn receptor
ptico convencional.
Segunda fase.- consiste en el tratamiento digital de las imgenes, con
objeto de facilitar las etapas posteriores, donde mediante filtros y
transformaciones geomtricas, se eliminan partes indeseables de la
imagen o se discriminan elementos importantes de la misma.

 Tercera fase.- conocido como segmentacin, consiste en aislar los

elementos que interesan de una escena para comprenderla, quiere decir
preparar el elemento particular de anlisis sobre el cual se trabajara para
la siguiente etapa.
Cuarta fase.-reconocimiento y clasificacin, una vez preparada la
informacin se procede a distinguir la informacin bajo criterios
establecidos segn sea la aplicacin y el mtodo de anlisis.
Estas etapas no siempre proceden de forma secuencial, en algunos casos
hace falta la retroalimentacin de fases anteriores para completar, restablecer o
mejorar el resultado final.