新一代XR多模态人机交互平台

实现多模态人机交互系统设计，探索多传感器设备捕获信号高效融合的可能，研发基于视频，音频，传感器等信号的视频理解算法，实现对用户行为和意图的全面感知。细粒度可控的avatar动作生成算法，通过跨模态的时序信息和结构信息建模，实现精准的人脸人体动作控制，从而赋予数字化身高度拟人化的情感表达，肢体表达能力，提升用户体验。