aSISTA. Aplicación de Asistencia a Personas con Discapacidades Visuales en Dispositivos Móviles

Autores/as

  • Maikel Salas

DOI:

https://doi.org/10.65234/interaccion.86

Palabras clave:

aplicación, asistencia, discapacitado, inteligencia artificial, dispositivo móvil, reconocimiento

Resumen

La vista es uno de los sentidos de mayor importancia para el ser humano por lo que las personas con discapacidad visual afrontan dificultades para su desenvolvimiento día a día. Sin embargo, muchas de estas personas poseen dispositivos móviles, que, si bien su forma de interacción no está explícitamente diseñada para estas ser utilizado por estas personas, logran interactuar con ellos gracias a tecnologías de accesibilidad como lectores de pantalla y sintetizadores de voz. Estos dispositivos en su mayoría poseen una cámara digital que permite capturar imagen y video, así como otros sensores. Haciendo uso de estas capacidades y mediante la aplicación de técnicas de procesamiento de imagen y reconocimiento de patrones, se ha desarrollado una aplicación móvil, que funcionando en móviles y tabletas de la plataforma Android, les permite a las personas con discapacidades visuales reconocer billetes, tarjetas bancarias, objetos, reconocer el entorno y navegarlo, así como colores y niveles de iluminación. Toda la interacción con la aplicación se realiza mediante toques y deslizamientos y la realimentación es mediante voz sintetizada, sonidos o reacciones táctiles. De esta manera estas personas ganan en independencia y mejora su inserción social.

Referencias

World Health Organization, (2012), Factsheet on visual impairment and blindness, world health organization, World Blind Union, http://www.who.int/mediacentre/factsheets/fs282/en/

World Health Organization, (2019). World report on vision. Executive Summary. Department of Non communicable Diseases.

Bourne, R. R. A. et al (2017). Magnitude, temporal trends, and projections of the global prevalence of blindness and distance and near vision impairment: a systematic review and meta-analysis. Lancet Global Health, 5(9): e888–97

Ecured, (2021). Asociación Nacional del Ciego. https://www.ecured.cu/Asociaci%C3%B3n_Nacional_de_Ciegos_y_D%C3%A9biles_Visuales

Augustin, A. et al. (2007). Anxiety and depression prevalence rates in age-related macular degeneration. Investigative Ophthalmology and Vision Science, 48, 1498–1503 DOI: https://doi.org/10.1167/iovs.06-0761

Rodríguez, A., Nicolau, H., Montague, K., Guerreiro, J., Guerreiro, T. (2020). Open Challenges of Blind People Using Smartphones. International Journal of Human–Computer Interaction, 36:17, 1605-1622 DOI: https://doi.org/10.1080/10447318.2020.1768672

W3C, (2018). Web Content Accessibility Guidelines (WCAG) 2.1. W3C Recommendation 05 June 2018. https://www.w3.org/TR/WCAG21/

W3C. (2023). Mobile Accessibility. https://www.w3.org/WAI/standards-guidelines/mobile/

Sagale, A. A., Chaudhari, A. (2018). Assistive Technologies for Visually Impaired Users on Android Mobile Phones, International Journal of Computer Applications, Vol. 182 No. 32 DOI: https://doi.org/10.5120/ijca2018918238

Dobosz, K. (2017). Designing Mobile Applications for Visually Impaired People. Visually Impaired: Assistive Technologies, Challenges and Coping Strategies (pp.103-126), Nova Science Publishers

IDEAL (2023). Currency Identifier. http://Ideal-group.org

LookTel (2023). Money Reader. http://www.looktel.com/moneyreader

ViaOptaDaily (2020). http://viaopta-apps.com/ViaOptaDaily.html

Mirwebsistem. Blind-Droid Wallet (2020). http://droid.mirwebsistem.com/en/en-blind-droid-wallet/

EyeNote (2018). https://www.eyenote.gov/

Google (2023a). Lookout. https://play.google.com/store/apps/details?id=com.google.android.apps.accessibility.reveal

Microsoft Corp. (2023). Seeing AI. https://www.microsoft.com/en-us/ai/seeing-ai

CloudSight Inc. (2023). TapTapSee. https://desarrollarinclusion.cilsa.org/tap-tap-see/

Cruz, F., Yumang, A., Manalac, J., Canete, K., Milambiling, J. (2018). Smart backpack for the blind with light sensors, zigbee, rfid for grid-based election. AIP Conference Proceedings. vol. 2045, p. 020054. AIP Publishing DOI: https://doi.org/10.1063/1.5080867

Sato, D., Oh, U., Naito, K., Takagi, H., Kitani, K., Asakawa, C. (2017). Navcog3: An evaluation of a smartphone-based blind indoor navigation assistant with semantic features in a large-scale environment. Proceedings of the 19th International ACM SIGACCESS Conference on Computers and Accessibility. pp. 270–279. ACM. DOI: https://doi.org/10.1145/3132525.3132535

AlAbri, H. A., AlWesti, A. M., AlMaawali, M. A., AlShidhani, A. A. (2014). Naveye: Smart guide for blind students. 2014 Systems and Information Engineering Design Symposium (SIEDS). pp. 141–146. IEEE. DOI: https://doi.org/10.1109/SIEDS.2014.6829872

Hossain, E., Rahman, M., Qaiduzzaman, K. (2020). Sightless Helper: An Interactive Mobile Application for Blind Assistance and Safe Navigation DOI: https://doi.org/10.1007/978-3-030-52856-0_46

Be My Eyes (2023). https://play.google.com/store/apps/details?id=com.bemyeyes.bemyeyes

BlindSquare, https://www.blindsquare.com/about/

SuperSense. https://play.google.com/store/apps/details?id=com.mediate.supersense

Salas, M. (2021). Asistencia a discapacitados visuales para reconocer billetes mediante aplicación móvil. Revista Cubana de Ciencias Informáticas, Vol. 15, No. Especial UCIENCIA II, septiembre, 2021, ISSN: 2227-1899, RNPS: 2301 (IX Taller Internacional de Software Libre. Android y sistemas operativos libres para móviles. Desarrollo de aplicaciones empleando tecnologías híbridas y/o nativas para móviles)

Salas, M. (2022). qBillete. Asistencia en dispositivos móviles a personas con discapacidades visuales. Memorias de la Convención y Feria Informática 2022. InfoTIC. ISBN 978-959-7255-02-4

Rashid, A., Prati, A., Cucchiara, R., (2013). On the design of embedded solutions to banknote recognition. Optical Engineering 52(9), 093106. DOI: https://doi.org/10.1117/1.OE.52.9.093106

Solymar, Z., Stubendek, A., Radvanyi, M., Karacs, K. (2011). Banknote recognition for visually impaired. 20th European Conference on Circuit Theory and Design. DOI: https://doi.org/10.1109/ECCTD.2011.6043828

Open Handset Alliance, (2023). Industry Leaders Announce Open Platform for Mobile Devices. http://www.openhandsetalliance.com/press_110507.html

Statcounter MobileOS Global (2023a). https://gs.statcounter.com/os-market-share/mobile/

Statcounter MobileOS Cuba (2023b). https://gs.statcounter.com/os-market-share/mobile/cuba

Cubadebate, (2020). ¿Qué teléfonos móviles se usan más en Cuba?, http://www.cubadebate.cu/noticias/2020/03/16/que-telefonos-moviles-se-usan-mas-en-cuba-infografia-y-top-10/

Google, (2023b). Android Studio, https://developer.android.com/studio

OpenCV for Android, (2023). https://opencv.org/android/

Gould, J.D., Lewis, C., (1985). Designing for usability key principles and what designers think. Commun. ACM 28(3), 300–311 DOI: https://doi.org/10.1145/3166.3170

Qureshi, H.H., Wong, D.H.T., (2019). Requirements of a Mobile Application Design Model for Visually Impaired People. Open International Journal of Informatics (OIJI), Vol. 7 Special Issue 2

Qureshi, H.H., Hooi-Ten Wong, D., (2020). Usability of user-centric mobile application design from visually impaired people’s perspective. Universal access in human-computer interaction. Design approaches and supporting technologies. HCII 2020. Lecture notes in computer science, vol. 12188. Springer 311–322 DOI: https://doi.org/10.1007/978-3-030-49282-3_22

Leo, M., Medioni, G., Trivedi, M., Kanade, T., Farinella, G.M., (2016) . Computer vision for assistive technologies. Computer Vision and Image Understanding 154, 1–15 DOI: https://doi.org/10.1016/j.cviu.2016.09.001

NIST, (2023), The NIST Reference on Constants, units and Uncertainty, https://physics.nist.gov/cuu/Units/units.html

dog-qiuqiu, (2021). Yolo-Fastest v1.1.0, Zenodo, http://doi.org/10.5281/zenodo.5131532

Ooms, J., (2023). tesseract: Open Source OCR Engine. https://docs.ropensci.org/tesseract/ (website) https://github.com/ropensci/tesseract (devel).

Rogers, J., Sharp, Y., Preece, H., Interaction design: beyond human computer interaction, 6th Edition, Wiley, 2023.

Google, (2009). An introduction to Text-To-Speech in Android. Android Developers Blog, https://android-developers.googleblog.com/2009/09/introduction-to-text-to-speech-in.html

Nickolay, V. S., et al, (2020). Vosk Speech Recognition Toolkit: Offline speech recognition API for Android, iOS, Raspberry Pi and servers with Python, Java, C# and Node. https://github.com/alphacep/vosk-api

Sulieman, N. A., Celsi, L. R., Li, W., Zomaya, A., Villari, M., (2022). Edge-Oriented Computing: A Survey on Research and Use Cases. Energies, 15(2), 452 DOI: https://doi.org/10.3390/en15020452

OmenTec Web (2023). https://www.omentec.cubava.cu

Apklis (2023). https://apklis.cu

Descargas

Publicado

2023-06-26

Número

Sección

Jornadas de HCI 2022