基于OpenCV与MediaPipe的面部动作控制鼠标操作技术

王骏祥; 马健为; 宋笛秋; 朱思哲

doi:10.16339/j.cnki.jsjsyzdh.202402029

计算技术与自动化 ›› 2024, Vol. 43 ›› Issue (02) : 177 -181. DOI: 10.16339/j.cnki.jsjsyzdh.202402029

基于OpenCV与MediaPipe的面部动作控制鼠标操作技术

王骏祥, 马健为, 宋笛秋, 朱思哲

作者信息 +

Author information +

文章历史 +

PDF

摘要

为丰富人机交互模式，基于OpenCV和Mediapipe在面部识别中的应用，在个人电脑上实现通过面部动作进行常用的鼠标控制。具体的方法是通过捕捉摄像头传入视频帧中用户脸部的关键点，并根据关键点的位置变化来执行对应鼠标操作。实际测试结果表明：该程序仅通过简单的面部动作就可以较好地实现诸如移动光标、单击鼠标左右键以及拖动滚动条等常用鼠标操作，且识别准确率高，是一种针对特殊用户和特定环境条件下替代鼠标操作的低成本实用技术。