随着计算机科学技术的不断发展，人机交互技术越来越得到人们的关注，如何提高用户对产品使用的舒适度、自然度，是当今很多厂商的重要研究方向。在PC机、手机、游戏机等等领域内，已经有了很多符合人们使用习惯的优秀人机交互产品，如：iphone、kinect等等。但是在传统电视及智能电视的人机交互上，还缺乏进一步的研究。手势识别作为人机交互技术中的一项关键技术，如何使用这个技术对智能电视进行虚拟操控将是一个很有吸引力的研究课题。基于上述情况，对基于视觉的手势识别系统进行了研究分析以后，基于已有的静态手势识别方法设计了本系统的流程。本系统分为以下几个模块：手势图像采集模块、预处理模块、边缘检测与特征提取模块以及手势图像识别模块。图像采集阶段，通过USB摄像头进行手势图像的输入；预处理部分主要对自适应阀值分割与整体固定阀值分割进行了对比；接着对预处理以后的二值化图像采用Canny算法检测其边缘并绘制出轮廓图，然后提取轮廓图中基于几何不变矩的七个特征参数，组成了特征向量；最后，选择基于欧式距离的模板匹配方法进行识别。在实际的系统测试中，选用五种示例手势建立了样本模板库，并且在两种不同的背景条件下对样本进行了识别，实时性及系统识别率均达到了比较好的效果，达到了系统预期目标。