研究利用计算机视觉、自然语言处理、深度学习、群体智能算法等技术，研究以非侵入的方式模拟人对人机交互软件的感知、决策与控制，建立测试机器人集群，替代测试人员实现对人机交互软件系统的半实物仿真测试。

研究子方向：

• 基于机器视觉的人机交互智能感知与识别技术

• 复杂人机交互行为智能仿真技术

• 基于机器视觉的人机交互软件智能测试方法

• 分布式多人协同群体智能仿真方法