Ученые создали систему определения выражения лица на базе камеры смартфона
Метод определения выражения лица с помощью камеры ближнего инфракрасного светового поля, совмещенной с технологией искусственного интеллекта (ИИ), разработали ученые с кафедры биологии и инженерии мозга KAIST, 21 января сообщает TechXplore.
Камера со световым полем, которая устанавливается в мобильных устройствах, содержит матрицы микрообъективов. Это позволяет получать пространственную и направленную информацию о свете с помощью одного снимка.
Однако оптические перекрестные помехи между тенями, вызванными внешними источниками света, и микрообъективом ограничивают возможности существующих камер со световым полем обеспечивать точную контрастность изображения и 3D-реконструкцию.
Для решения этой проблемы ученые применили лазер с вертикальным резонатором, излучающий поверхность (VCSEL) в ближнем ИК-диапазоне, чтобы стабилизировать точность реконструкции 3D-изображения, которая ранее зависела от внешнего освещения.
Благодаря этой технике ученые смогли преодолеть ограничения существующих камер со световым полем и смогли разработать свою камеру на основе NIR (NIR-LFC), оптимизированную для 3D-реконструкции изображений выражений лица.
Используя NIR-LFC, команда получила высококачественные изображения 3D-реконструкции выражений лица, выражающих различные эмоции, независимо от условий освещения окружающей среды.
Выражения лица на полученных 3D—изображениях распознаются с помощью машинного обучения со средней точностью 85%.
«Миниатюрная камера со световым полем потенциально может стать новой платформой для количественного анализа выражений лица и эмоций людей», — профессор Ки-Хун Чжон.
