新型视频人脸超分辨率技术KEEP:让模糊不清的人脸视频变得清晰

南洋理工大学 S-Lab推出一种新型视频人脸超分辨率技术KEEP,也就是让模糊不清的人脸视频变得清晰。例如,你手里有一些老旧电影的片段,或者监控摄像头拍到的模糊人脸,这项技术能够让这些人脸在视频中变得清晰可辨。

主要功能

  • 这项技术的核心功能是提高视频人脸的清晰度,同时保持视频中人脸的一致性和连贯性。

主要特点

  1. 时间一致性:它能够确保视频中的每一帧人脸看起来都是连贯的,不会出现一帧一个样的情况。
  2. 细节捕捉:即便是在视频质量很差的情况下,也能恢复出人脸的细节,比如眼睛、鼻子和嘴巴等特征。
  3. 鲁棒性:对于非正面或者严重压缩的视频,这项技术依然能够提供稳定的人脸先验估计。

工作原理

这项技术被称为“Kalman-inspired Feature Propagation”(KEEP),它借鉴了卡尔曼滤波的原理。卡尔曼滤波是一种利用时间序列数据进行预测和平滑的技术。在这项技术中,它会用到之前已经处理过的帧的信息,来帮助改善当前帧的恢复质量。简单来说,就是前一帧的清晰人脸会“告诉”当前帧如何变得更清晰。

具体应用场景

  1. 老旧影片修复:可以用来修复老旧影片中的人脸,提高其清晰度,让经典电影焕发新生。
  2. 视频监控分析:在安全监控领域,这项技术可以帮助从模糊的监控视频中识别出嫌疑人的面部特征。
  3. 社交媒体:在社交媒体上,用户可以上传低分辨率的视频,通过这项技术提升视频中人脸的清晰度,改善观看体验。
0

评论0

没有账号?注册  忘记密码?