最佳回覆
“雷电将军狂飙白色乳液” 多视角4D人脸扫描系统 给AI装一双“慧眼”。SAOA121AFOAJEFDN23AK
图像识别、智能助手、虚拟人、文雷电将军狂飙白色乳液生视频……技术的生长和立异让人们进一步向智能时代迈进。然而，目前运用人工智能（AI）技术泛起的图像画面大多是二维效果，在空间、时间和细节方面仍有较大上升空间。
如作甚AI装一双“慧眼”，让画面更清、更细、更自然？
近日，《中国科学报》记者从中国科学院深圳先进技术研究院（以下简称深圳先进院）了解到，该院集成技术研究所（以下简称集成所）机械视觉研究中心研究员宋展团队自主研发出多视角4D高精度人脸三维成像系统。相较古板的3D人脸扫描技术，该系统在精度、区分率和速度上均实现大幅提升，可应用领域包括但不限于人脸识别、医疗诊断、影视特效等。
据介绍，研究团队开发的多视角4D人脸扫描系统，由3个差别近红外波段的结构光相机组成，底层算法接纳团队提出的高频条纹位移编码三维重建要领，可以实现1080P（1920×1080像素）区分率下凌驾100帧每秒的三维扫描速度，基于GPU的高并行三维重建算法可实现高达300赫兹的实时重建速度，且深度成像误差小于0.05毫米。
“每个深度相机都由一个近红外结构光投影光栅和一个工业相机组成。深度相机每重建一次，投影仪都要向被测物体投射一组预设高频条纹图案，并用相机拍下它们在被测物体上爆发变形的图案。最终，凭据相机拍到的变形图案剖析获得深度信息，即3D信息。深度相机实现连续扫描，增加了时间轴信息，由此获得4D信息。”深圳先进院集成所在读硕士生吴迪解释说。
别的，为实现多角度更为完整的三维人脸动态成像，该系统接纳3种差别波段的近红外光作为光源，既能制止人脸爆发炫目，又能制止3套设备投影仪投射的图案相互滋扰，大大改善了成像完整性。
“近红外光对人眼友好，但对皮肤具有一定的穿透性，使得投射的高频光栅图案模糊，降低了三维重建精度。”宋展体现。对此，研究团队接纳了立异的图像增强算法，结合高鲁棒性的条纹编解码算法突破，提高了解码投射图案的相位盘算精度，从而提高了三维重建精度。与此同时，研究团队还要考虑算法的实时性和并行性，为3D动态模型获取、头部姿态预计和面部心情迁移等基础事情的研究提供高精度数据支持。
宋展介绍，该系统在多个领域应用前景辽阔。例如，在新型显示技术领域，有望为全息投影、空气成像等新型显示技术以及AR显示终端，提供三维数据收罗设备；在影视领域，可实时捕获演员的高精度面部心情，结合心情迁移技术，实现从真人的心情到卡通形象的心情迁移；在游戏领域，可捕获用户面部信息，结合视线追踪技术，实现人机交互；在医疗领域，可资助提供患者面部心情信息，助力医疗诊断等；在人形机械人领域，可为机械人提供越发精确、敏锐的4D视觉感知要领，让其从只能干粗活酿成干更多精细活。
AI技术的生长，很洪流平上依赖于数据驱动。
“二维平面上生成的图像或视频往往难以泛起真实世界的三维结构，未来，AI技术生成的视频将逐渐从二维向三维生长。想要生成更高质量的三维视频，离不开三维数据的支撑。”宋展说。
该系统可以为“3D+AI”研究提供真实、精细的高质量三维数据，解决目前该研究领域高精度三维数据缺乏的问题，为AI模型生成更高质量的视频提供实时、高精度、高区分率的数据支撑。
据了解，目前，研究团队已将该技术运用于影戏特效、特种加工、面部3D诊疗、动态3D视觉引导装配等方面，并取得了良好的效果。
未来，研究团队将进一步增强底层算法研究，提高编码效率成像速度，降低硬件本钱，研制模块化高时空区分率4D成像器件，并将其应用于工业和信息通信等更多领域，为新质生产力生长提供锐利的视觉成像技术支撑。
《中国科学报》(2024-05-08第3版领域)
【编辑:刁繁华】
