Sistema para detecção de sonolência e fadiga com inferência visual em dispositivo embarcado utilizando Edge Impulse e ESP32-CAM
🔍 Buscar
PDF

Palavras-chave

sonolência ao volante
visão computacional embarcada
segurança veicular
rede neural convolucional

Como Citar

DE SOUZA CAMARGO, L.; DE CARVALHO JUNIOR, A. Sistema para detecção de sonolência e fadiga com inferência visual em dispositivo embarcado utilizando Edge Impulse e ESP32-CAM. Revista de Ciência e Inovação, v. 11, n. 1, p. 1-22, 12 dez. 2025.

Resumo

Este trabalho apresenta o desenvolvimento de um sistema computacional embarcado para detecção de sonolência e fadiga em condutores, com base em visão computacional e aprendizado de máquina. Motivado pelos altos índices de acidentes causados por cansaço e desatenção ao volante, o estudo propõe uma solução de baixo custo e fácil implementação, com foco na prevenção de comportamentos de risco. O principal objetivo foi criar um sistema capaz de identificar, de forma autônoma, sinais visuais de sonolência e acionar alertas em tempo real. A metodologia envolveu a coleta e refinamento de imagens da região do rosto, utilizadas para treinar uma rede neural convolucional na plataforma Edge Impulse. O modelo resultante, com acurácia de 94,7%, foi embarcado em um microcontrolador ESP32-CAM, responsável por capturar as imagens e realizar inferência local. Em testes práticos, o sistema se mostrou eficaz ao detectar padrões de sonolência com base em critérios como tempo contínuo de olhos fechados e frequência de fechamento em determinado intervalo. Os resultados demonstraram a viabilidade da proposta, evidenciando sua aplicabilidade como ferramenta de apoio à segurança veicular.

https://doi.org/10.26669/2448-4091.2025.585
PDF

Referências

USER. ESP32 CAM case for AI Thinker, Thingverse, 2021. Disponível em: https://www.thingiverse.com/thing:4714663. Acesso em 10 out. 2024.

AL, H. Driver Fatigue Detection Sleep, Yawn, Kaggle, 2024. Disponível em: https://www.kaggle.com/datasets/mhdalhafez/driver-fatigue-detection-sleepyawn. Acesso em: 10 out. 2024.

ALI, Y. Y. Driver Drowsiness Detection, Kaggle, 2024. Disponível em: https://www.kaggle.com/code/youssefyasserali/driver-drowsiness-detection-pytorch/notebook. Acesso em: 22 nov. 2024.

ALSHAQAQI, B. et al. Driver drowsiness detection system. In: International Workshop on Systems, Signal Processing and their Applications (WoSSPA), 8., 2013, Algiers, Algeria: IEEE, 2013. Disponível em: https://ieeexplore.ieee.org/document/6602353. Acesso em: Acesso em: 22 nov. 2024

BOSCH. Bosh analysis: driver assistance systems continue their strong advance, 2018. Disponível em: https://www.bosch-presse.de/pressportal/de/en/bosch-analysis-driver-assistance-systems-continue-their-strong-advance-148032.html. Acesso em: 10 out. 2024.

BOVOLATO, G. G.; DOMINGUEZ, G. A. R. Desenvolvimento de sistema para identificação de nível de fadiga e sonolência em condutores de veículos por redes neurais artificiais. 2023.Trabalho de Conclusão de Curso (Graduação em Engenharia e Controle de Automação) - Instituto Federal de São Paulo, Cubatão, 2023. Disponível em: https://repositorio.ifsp.edu.br/items/f254df9f-fdbf-452c-b612-fe272b8ea26e . Acesso em: 10 out. 2024.

CHENGULA, T. J. et al. Enhancing advanced driver assistance systems through explainable artificial intelligence for driver anomaly detection. Machine Learning with Applications, v. 17, p. 100580, 2024. Disponível em: https://www.sciencedirect.com/science/article/pii/S2666827024000562. Acesso em: 10 out. 2024.

DINGES, D. F.; GRACE, R. PERCLOS: A valid psychophysiological measure of alertness as assessed by psychomotor vigilance. Washington, D.C.: U.S. Department of Transportation, Federal Highway Administration, 1998. Disponível em: https://rosap.ntl.bts.gov/view/dot/113. Acesso em: 23 out. 2025.

DIPU, M. T. A. et al. Real-time driver drowsiness detection using deep learning. International Journal of Advanced Computer Science and Applications, v. 12, n. 7, 2021. Disponível em: https://thesai.org/Publications/ViewPaper?Volume=12&Issue=7&Code=IJACSA&SerialNo=94. Acesso em: 22 nov. 2024.

DJERARDA, I. E. MRL Eye Dataset, kaggle, 2023. Disponível em: https://www.kaggle.com/datasets/imadeddinedjerarda/mrl-eye-dataset. Acesso em: 22 nov. 2024.

EDGE IMPULSE. Edge Impulse – development platform for edge AI [s.d.]. Disponível em: https://www.edgeimpulse.com. Acesso em: 6 ago. 2025.

HEITMANN, A. et al. Technologies for the monitoring and prevention of driver fatigue. In: INTERNATIONAL DRIVING SYMPOSIUM ON HUMAN FACTORS IN DRIVER ASSESSMENT, TRAINING AND VEHICLE DESIGN. I., 2021. Proceedings… Aspen, Colorado, Iowa City, Public Policy Center of Iowa, 2021. Disponível em: https://core.ac.uk/download/pdf/129642767.pdf. Acesso em: 10 out. 2024.

HOSSAIN, M. D. U. et al. Automatic driver distraction detection using deep convolutional neural networks. Intelligent Systems with Applications, v. 14, p. 200075, 2022. Disponível em: https://doaj.org/article/86bf287d3e404143a03313e06f47e9e9. Acesso em: 10 de outubro de 2024.

INSTITUTO BRASILEIRO DE GEOGRAFIA E ESTATÍSTICA. Censo Demográfico. Rio de Janeiro: IBGE, 2022. Disponível em: https://www.ibge.gov.br/estatisticas/sociais/rendimento-despesa-e-consumo/22827-censo-demografico-2022.html. Acesso em: 10 out. 2024.

INSTITUTO DE PESQUISA ECONÔMICA APLICADA. Estudo aponta aumento de 13,5% em mortes no trânsito. 2023. Disponível em: https://www.ipea.gov.br/portal/categorias/45-todas-as-noticias/noticias/13899-estudo-aponta-aumento-de-13-5-em-mortes-no-transito. Acesso em: 22 nov. 2024.

MAIS DE 40% DOS ACIDENTES DE TRÂNSITO ACONTECEM POR SONOLÊNCIA, AFIRMA A ABRAMET. Autopapo, 6 set. 2019. Disponível em: https://autopapo.uol.com.br/noticia/mais-de-40-dos-acidentes-de-transito-acontece-por-sonolencia-afirma-a-abramet/. Acesso em: 10 out. 2024.

MASALA, G. L.; GROSSO, E. Detecting driver inattention by rough iconic classification. In: IEEE INTELLIGENT VEHICLES SYMPOSIUM, 4., 2012. Proceedings...Sassari, IEEE, 2013. Disponível em: https://iris.uniss.it/retrieve/e1dc1a2c-f62c-1507-e053-3a05fe0ac7a3/Masala_G_Detecting_driver_inattention_by.pdf. Acesso em: 10 out. 2024.

MINISTÉRIO DOS TRANSPORTES. Estudo aponta que mais de 50% dos acidentes de trânsito são causados por falhas humanas. 2018. Disponível em: https://www.gov.br/transportes/pt-br/assuntos/noticias/ultimas-noticias/estudo-aponta-que-mais-de-50-dos-acidentes-de-transito-sao-causados-por-falhas-humanas765. Acesso em: 10 out. 2024.

NATIONAL HIGHWAY TRAFFIC SAFETTY ADMINISTRATION. Drowsy Driving Research and Program Plan. U.S. Dept. of Transportation, 2016. Disponível em: https://www.nhtsa.gov/sites/nhtsa.gov/files/drowsydriving_strategicplan_030316.pdf. Acesso em: 10 out. 2024.

PICOT, A., CHARBONNIER, S., CAPLIER, A. On-line detection of drowsiness using brain and visual information. IEEE Transactions on Systems, Man, and Cybernetics, v. 42, n. 3, p. 764-775, 2012. Disponível em: https://doi.org/10.1109/TSMCA.2011.2164242. Acesso em: 20 out. 2024.

ROCHA, M. T.; DOMINGUES, D. W. B. P. Aplicação de detecção de sonolência em motoristas utilizando Deep Learning. Trabalho de Conclusão de Curso (Graduação em Engenharia Mecatrônica) – Universidade de São Paulo, São Paulo, 2022. Disponível em: https://bdta.abcd.usp.br/directbitstream/7a44fe00-e260-480a-9791-cc222d5eab45/MARCELO%20TEIXEIRA%20ROCHA%20TCC-PMR.pdf. Acesso em: 10 out. 2024.

SANCHEZ-IBORRA, R.; SKARMETA, A. F. TinyML- enabled frugal smart objects: challenges and opportunities. IEEE Circuits and Systems Magazine, v. 20, n. 3, p. 4-18, 2020. Disponível em: https://scispace.com/papers/tinyml-enabled-frugal-smart-objects-challenges-and-3aznu26pld. Acesso em: 15 out. 2024.

SILVA, T. M. Controle automático do mecanismo de frenagem de um veículo não tripulado. Projeto Final de Curso (Graduação em Engenharia de Controle e Automação) - Universidade Federal de Minas Gerais, Belo Horizonte, 2009. Disponível em: http://www.coro.cpdee.ufmg.br/publications/tiago_mendonca.pdf. Acesso em: 10 out. 2024.

WIERWILLE, W. W. et al. Research on vehicle-based driver status/performance monitoring; development, validation, a refinement of algorithms for detection of driver drowsiness. Technical report n. DOT HSs 808 247. Virginia: Department of Transportation, 1994. Disponível em: https://rosap.ntl.bts.gov/view/dot/2578. Acesso em: 22 nov. 2024.

WORLD HEALTH ORGANIZATION. Death on the roads: based on the WHO Global Status Report on Road Safety 2018. Brazil: WHO, 2018. Disponível em: https://extranet.who.int/roadsafety/death-on-the-roads/#country_or_area/BRA. Acesso em: 22 nov. 2024.

Creative Commons License
This work is licensed under a Creative Commons Attribution 4.0 International License.

Copyright (c) 2025 Leonardo de Souza Camargo, Arnaldo de Carvalho Junior

Downloads

Não há dados estatísticos.