Comparativa entre RESNET-50, VGG-16, Vision Transformer y Swin Transformer para el reconocimiento facial con oclusión de una mascarilla

Brenda Xiomara Tafur Acenjo,Martin Alexis Tello Pariona,Edwin Jhonatan Escobedo Cárdenas

DOI: https://doi.org/10.26439/interfases2023.n017.6361

2023-06-23

Interfases

Abstract:En la búsqueda de soluciones sin contacto físico en espacios cerrados para la verificación de identidad en el contexto de la pandemia por SARS-CoV-2, el reconocimiento facial ha tomado relevancia. Uno de los retos del reconocimiento facial es la oclusión por mascarilla, ya que representa una oclusión de más de 50% del rostro. La presente investigación evaluó cuatro modelos preentrenados por aprendizaje por transferencia: VGG-16, RESNET-50, vision transformer (ViT) y swin transformer, los cuales se entrenaron en sus capas superiores con un conjunto de datos propio. Para el entrenamiento sin mascarilla, se obtuvo un accuracy de 24% (RESNET-50), 25% (VGG-16), 96% (ViT) y 91% (Swin). Mientras que con mascarilla se obtuvo un accuracy 32% (RESNET-50), 53% (VGG-16) , 87% (ViT) y 61% (Swin). Estos porcentajes de testing accuracy indican que las arquitecturas más modernas como los Transformers arrojan mejores resultados en el reconocimiento con mascarilla que las CNN (VGG-16 y RESNET-50). El aporte de la investigación recae en la experimentación con dos tipos de arquitecturas: CNN y transformers, así como la creación del conjunto de datos público que se comparte a la comunidad científica. Este trabajo robustece el estado del arte de la visión computacional en el reconocimiento facial por oclusión de una mascarilla, ya que ilustra con experimentos la variación del accuracy con distintos escenarios y arquitecturas.