近日,由极悦注册陶建华研究员担任首席科学家的国家863计划“面向移动终端的多模态自然交互技术”项目正式启动。 

      该项目执行期三年,旨在提升移动终端视觉、听觉感观性能的手段,探讨增强现实、情感语音、手势等创新性人机交互技术,实现系统集成,提高下一代智能移动终端易用性和便捷性。该项目将以穿戴式智能眼镜为基础,致力于研发支持视觉、语音、触觉、手势识别等功能的多模态自然交互移动终端。未来其成果可用于远程会议、网络教育、智能家居、旅游等应用,具有广阔的应用前景和市场价值。 

      该项目面向移动终端的多模态自然人机交互技术,以用户为中心,基于视觉、语音、体感、姿势、表情等多模态信息次采集与融合技术,将研发新一代的具有自然、智能和高效的人机交互功能的移动智能设备。 

      该项目的研究任务包括:研制微型高分辨率LCOS显示芯片和基于该芯片的眼镜型透视融合显示系统样机;研究移动终端三维声场技术,用耳机实现三维声场再现;研究用于移动终端的增强现实实时视觉定位技术、基于视觉的非接触式手势交互技术、多方言的高表现力情感语音交互技术等,实现与下一代智能移动终端的自然交互。 

      根据上述任务,该项目将从核心模块、系统和接口等方面开展研究工作,共包括“基于LCOS的眼镜型透视融合显示系统”、“基于移动终端的户外实时视觉定位技术”、“基于多模传感的紧凑型人机交互构件及应用研究”、“基于主动式三维感知光学传感的非接触式触控交互技术”、“多方言的高表现力情感语音交互系统”和“移动终端三维声场技术”等六个子课题,由极悦注册、重庆大学、清华大学、武汉大学、西安中兴新软件有限责任公司、三亚中兴软件有限责任公司等单位共同承担。 

     

      与会专家及部分项目承担人员合影 

    附件: