html5摄像头手势识别,HTML5手势检测原理和实现_weixin_28922087的博客-程序员秘密

技术标签: html5摄像头手势识别  

前言

随着 Hybrid 应用的丰富,HTML5 工程师们已经不满足于把桌面端体验简单移植到移动端,他们觊觎移动原生应用人性化的操作体验,特别是原生应用与生俱来的丰富的手势系统。HTML5 没有提供开箱即用的手势系统,但是提供了更底层一些的对 touch 事件的监听。基于此,我们可以做出自己的手势库。

手势

常用的 HTML5 手势可以分为两类,单点手势和两点手势。单点手势有 tap(单击),double tap(双击),long tap(长按),swipe(挥),move(移动)。两点手势有 pinch(缩放),rotate(旋转)。

接下来我们实现一个检测这些手势的 javaScript 库,并利用这个手势库做出炫酷的交互效果。

0cbaf4b9d176e8eebb5a793a39544a0d.png

移动

关于移动手势检测我们这里不再赘述。总结一下就是在每次touchmove事件发生时,把两个位移点之间的坐标位置相减,就可以了。

单击(tap)

手势检测的关键是用 touchstart,touchmove,touchend 三个事件对手势进行分解。

那么怎么分解单击事件呢?

在 touchstart 发生时进入单击检测,只有一个接触点。因为单击事件限制为一个手指的动作。

没有发生 touchmove 事件或者 touchmove 在一个很小的范围(如下图)。限制 touchmove 在一个很小范围,是为了给用户一定的冗余空间,因为不能保证用户手指在接触屏幕的时候不发生轻微的位移。

730e5398e30367407269f7fbb49e1c75.png

touchend 发生在 touchstart后的很短时间内(如下图)。这个时间段的阈值是毫秒级,用来限制手指和屏幕接触的时间。因为单击事件从开始到结束是很快的。

f4e8cc66629259ee25ac48bbafc4f6f1.png

有了上面的流程,就可以开始实现 tap 事件监测了。

_getTime() {

returnnewDate().getTime();

}

_onTouchStart(e) {

//记录touch开始的位置

this.startX = e.touches[0].pageX;

this.startY = e.touches[0].pageY;

if(e.touches.length > 1) {

//多点监测

...

}else{

//记录touch开始的时间

this.startTime = this._getTime();

}

}

_onTouchMove(e) {

...

//记录手指移动的位置

this.moveX = e.touches[0].pageX;

this.moveY = e.touches[0].pageY;

...

}

_onTouchEnd(e) {

let timestamp= this._getTime();

if(this.moveX !== null&& Math.abs(this.moveX - this.startX) > 10 ||

this.moveY !== null&& Math.abs(this.moveY - this.startY) > 10) {

...

}else{

//手指移动的位移要小于10像素并且手指和屏幕的接触时间要短语500毫秒

if(timestamp- this.startTime 

this._emitEvent('onTap')

}

}

}

双击(double tap)

和单击一样,双击事件也需要我们对手势进行量化分解。

双击事件是一个手指的行为。所以在 touchstart 时,我们要判断此时屏幕有几个接触点。

双击事件中包含两次独立的单击行为。理想情况下,这两次点击应该落在屏幕上的同一个点上。为了给用户一定的冗余空间,将两次点击的坐标点距离限制在10个像素以内。

732f6cc376a6921eeb20eaf5199765a8.png

双击事件本质是两次快速的单击。也即是说,两次点击的间隔时间很短。通过一定的测试量化后,我们把两次单击的时间间隔设为300毫秒。

754b0d70f36ac985a26b910cc3733905.png

注意双击事件中我们检测了相邻两个 touchstart 事件的位移和时间间隔。

_onTouchStart(e) {

if(e.touches.length > 1) {

...

} else{

if(this.previousTouchPoint) {

//两次相邻的touchstart之间距离要小于10,同时时间间隔小于300ms

if( Math.abs(this.startX -this.previousTouchPoint.startX) 

Math.abs(this.startY - this.previousTouchPoint.startY) 

Math.abs(this.startTime - this.previousTouchTime) 

this._emitEvent('onDoubleTap');

}

}

//保存上一次touchstart的时间和位置信息

this.previousTouchTime = this.startTime;

this.previousTouchPoint = {

startX : this.startX,

startY : this.startY

};

}

}

长按(long press)

长按应该是最容易分解的手势。我们可以这样分解:在 touchstart 发生后的很长一段时间内,如果没有发生 touchmove 或者 touchend 事件,那么就触发长按手势。

长按是一个手指的行为,需要检测屏幕上是否只有一个接触点。

如果手指在空间上发生了移动,那么长按事件取消。

如果手指在屏幕上停留的时间超过800ms,那么触发长按手势。

如果手指在屏幕上停留的时间小于800ms,也即 touchend 在 touchstart 发生后的800ms内触发,那么长按事件取消。

608230da3b0578008fa74addfa5a0b9b.png

_onTouchStart(e) {

clearTimeout(this.longPressTimeout);

if(e.touches.length > 1) {

}else{

this.longPressTimeout = setTimeout(()=>{

this._emitEvent('onLongPress');

});

}

}

_onTouchMove(e) {

...

clearTimeout(this.longPressTimeout);

...

}

_onTouchEnd(e) {

...

clearTimeout(this.longPressTimeout);

...

}

缩放(pinch)

缩放是一个非常有趣的手势,还记得***代iPhone双指缩放图片给你带来的震撼吗?虽然如此,缩放手势的检测却相对简单。

缩放是两个手指的行为,需要检测屏幕上是否有两个接触点。

缩放比例的量化,是通过两次缩放行为之间的距离的比值得到,如下图。

4aa75c51b1da8fcc390be68c5ddae639.png

所以缩放的核心是获取两个接触点之间的直线距离。

//勾股定理

_getDistance(xLen,yLen) {

returnMath.sqrt(xLen * xLen + yLen * yLen);

}

这里的xLen是两个接触点x坐标差的绝对值,yLen相应的就是y坐标差的绝对值。

_onTouchStart(e) {

if(e.touches.length > 1) {

let point1 = e.touches[0];

let point2 = e.touches[1];

let xLen = Math.abs(point2.pageX - point1.pageX);

let yLen = Math.abs(point2.pageY - point1.pageY);

this.touchDistance = this._getDistance(xLen, yLen);

} else{

...

}

}

在_onTouchStart函数中获取并且保存 touchstart 发生时两个接触点之间的距离。

_onTouchMove(e) {

if(e.touches.length > 1) {

let xLen = Math.abs(e.touches[0].pageX - e.touches[1].pageX);

let yLen = Math.abs(e.touches[1].pageY - e.touches[1].pageY);

let touchDistance = this._getDistance(xLen,yLen);

if(this.touchDistance) {

let pinchScale = touchDistance / this.touchDistance;

this._emitEvent('onPinch',{scale:pinchScale - this.previousPinchScale});

this.previousPinchScale = pinchScale;

}

}else{

...

}

}

旋转(rotate)

旋转手势需要检测两个比较重要的值,一是旋转的角度,二是旋转的方向(顺时针或逆时针)。

其中旋转角度和方向的计算需要通过向量的计算来获取,本文不再展开。

ab7c65e5bf70cc6a9e56f54d1d7a4cbb.png

首先,需要获取向量的旋转方向和角度。

//这两个方法属于向量计算,具体原理请阅读本文***的参考文献

_getRotateDirection(vector1,vector2) {

returnvector1.x * vector2.y - vector2.x * vector1.y;

}

_getRotateAngle(vector1,vector2) {

let direction = this._getRotateDirection(vector1,vector2);

direction = direction > 0 ? -1 : 1;

let len1 = this._getDistance(vector1.x,vector1.y);

let len2 = this._getDistance(vector2.x,vector2.y);

let mr = len1 * len2;

if(mr === 0) return0;

let dot = vector1.x * vector2.x + vector1.y * vector2.y;

let r = dot / mr;

if(r > 1) r = 1;

if(r 

returnMath.acos(r) * direction * 180 / Math.PI;

}

然后,我们在手指发生移动时,调用获取旋转方向和角度的方法。

_onTouchStart(e) {

...

if(e.touches.length > 1) {

this.touchVector = {

x: point2.pageX - this.startX,

y: point2.pageY - this.startY

};

}

...

}

_onTouchMove(e) {

...

if(this.touchVector) {

let vector = {

x: e.touches[1].pageX - e.touches[0].pageX,

y: e.touches[1].pageY - e.touches[0].pageY

};

let angle = this._getRotateAngle(vector,this.touchVector);

this._emitEvent('onRotate',{

angle

});

this.touchVector.x = vector.x;

this.touchVector.y = vector.y;

}

...

}

实战

好了,我们的手势系统到这里就完成了。接下来要在实战中检验这套系统是否可靠,做一个简单的图片浏览器,支持图片缩放,旋转,移动,长按。

首先,做好DOM规划,和“之前”一样,我们的事件监听机制并不直接作用在图片上,而是作用在图片的父元素上。

9471b00f0c38cc9173908810b49db830.png

然后,可以开始使用上面的手势检测系统了。

render() {

return(

![](http://upload-images.jianshu.io/upload_images/2362670-f8b44d4b9101e8d6.jpg?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

);

}

由于我们的手势系统检测的增量,因此不能直接把增量应用在对象上,而是需要把这些增量累加。以旋转为例:

onRotate(event) {

//对增量进行累加

this.angle += event.angle

this.setState({

angle:this.angle

});

}

至此,我们的手势检测就完成了。

【编辑推荐】

【责任编辑:未丽燕 TEL:(010)68476606】

点赞 0

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/weixin_28922087/article/details/117879005

智能推荐

技术文章总结__changeme的博客-程序员秘密

前言现阶段想要了解的自己虽然整理不出来,但是有无数优秀的文章能帮我们解答!Java 8系列之重新认识HashMap

开发自测?开发与测试的战争_piooix的博客-程序员秘密_为什么要开发自测

做测试的都会遇到过:开发提交的版本质量太差!开发人员提交测试后发现大部分主要功能都不通,后续告知修复完成,测试人员又去验证,结果还是大部分功能不通,这样的效率实在让人无法忍受。 开发自测自然在测试人员心中出现!质量的提升不只是测试团队的事情,这句话貌似都在说,跟在喊口号一样,并不能带来实际的效果。开发自测,也是在质量提升方面占着重要的一环。 开发自测,按照比较理想的情况下,开发人员

cpu性能测试那个软件准,cpu对比测试软件 CPU性能测试软件推荐_玄袂临风的博客-程序员秘密

CPU测试软件组合:(1)信息测试:CPU-Z 1.24使用这个软件可以查看CPU的信息。软件使用十分简单,下载后直接点击文件,就可以看到CPU 名称、厂商、内核进程、内部和外部时钟、局部时钟监测等参数。选购之前或者购买CPU后,如果我们要准确地判断其超频性能,就可以通过它来测量CPU实际设计的FSB频率和倍频。(2)频率测试:Intel Processor Frequency ID Utilit...

cocos2dx源码分析之一:大体运行流程_dd950125的博客-程序员秘密

引擎版本为3.13,从入口开始一点点看。iOS平台的入口在RootViewController.m文件的loadView方法中,app->run()开始。run方法调用了一个名叫startMainLoop的方法,从名字就能知道这是要开启游戏主循环。注意这个CADisplayLink,详细介绍看这里简单来说,CADisplayLink是一个能让我们以...

关于Qt Kits 的设置_geek123520的博客-程序员秘密

构建套件出现了红色的叹号具体我也不知道为什么,但是原因是编译器的选择可以尝试选择其他编译器就好了

汽车标志及意义_tomotayuki的博客-程序员秘密

奥迪AUDI奥迪轿车的标志为四个圆环,代表着合并前的四家公司。这些公司曾经是自行车、摩托车及小客车的生产厂家。由于该公司原是由4家公司合并而成,因此每一环都是其中一个公司的象征。奔驰BENZ 1909年6月申请戴姆勒公司登记了三叉星做为轿车的标志,象征着陆上、水上和空中的机械化。1916年在它的四周加上了一个圆圈,在圆的上方镶嵌了4 个小星,下面有梅赛德斯“

随便推点

软考信息安全工程师考试大纲第二版_月梦工作室的博客-程序员秘密_信息安全工程师考试大纲

软考信息安全工程师考试大纲第二版电子版链接: https://pan.baidu.com/s/1xUOEzcX9lXYPgJqMdCnQtg 密码: qoo9一、考试说明1.考试目标通过本考试的合格人员能够掌握网络信息安全的基础知识和技术原理;根据国家网络信息安全相关法律法规及业务安全保障要求,能够规划、设计信息系统安全方案,能够配置和维护常见的网络安全设备及系统;能够对信息系统的网络安全风险进行监测和分析,并给出网络安全风险问题的整改建议;能够协助相关部门对单位的信息系统进

'自定义简单查询SQL赋值到数组_胜发的博客-程序员秘密_sql查询结果赋值给数组

'自定义简单查询SQL赋值到数组'Public JLH As Long '长整数变量;工作表记录所在行'Public JLL As Long '长整数变量;工作表记录所在行Function SQL_JDCX(F_Url As String, F_strSQL As String) As Variant 'F_Url '定义数据库链接字符串,连接方法、服务器名称、数据库名称、数据库账...

Maven项目连接Oracle数据库坐标无法导入问题_却水的博客-程序员秘密

问题:maven项目连接oracle数据库时,由于版权问题,依赖导入失败解决方案:1. 下载jar包(由于官网下载速度较慢,附百度云连接)链接:oracle6.jar 提取码: 8sic2. 将jar包放在maven仓库,在项目的maven cmd line中执行下面的命令。install:install-file -Dfile=E:\maven_repository\ojdbc6.j...

P2852 [USACO06DEC]牛奶模式Milk Patterns 后缀数组(poj3261)_Cruiying的博客-程序员秘密

题意: 找出现至少k次的子串的最大长度.思路:据贪心策略,子串变长答案不会减小,所以可以看做是求k个后缀的LCP.因为要求LCP的最大值,而LCP(suffix(sa[i]),suffix(sa[j]))=min{height[k]}(i<j,k∈[i,j]),显然当这k个后缀在排名上连续的时候可以取得最小值.因为若排名不连续,那么涵盖的取最小值的范围一定会变大,而当取值范围变大最小值只会...

解决ubuntu20.10 休眠耗电问题_cheng3100的博客-程序员秘密_ubuntu耗电严重

最近在新买的thinkpad x13 amd版本上安装了ubuntu20.10, kernel verison 5.8, 所有功能基本正常,但发现合盖后休眠状态耗电稍高,大概一个晚上会耗电15%左右,这样休眠状态大概只能放置两天多,而我另外一台thinkpad t490s intel版本大概只有4~5%左右,经过一些研究后基本解决这个问题,目前休眠一天大概耗电3%左右,基本待机放置一两周都没有问题。...

Unity+ECS框架(Entity Component System)学习(图文详细+源码)——总目录_水光涵月的博客-程序员秘密_unity ecs框架

这是总目录,该系列持续更新中。。。。。。。。Unity+ECS框架(Entity Component System)学习(图文详细+源码)——总目录????总结欢迎大佬多多来给萌新指正,欢迎大家来共同探讨。如果各位看官觉得文章有点点帮助,跪求各位给点个“一键三连”,谢啦~声明:本博文章若非特殊注明皆为原创原文链接https://blog.csdn.net/Wrinkle2017/article/details/120655865——————————————————————————————

推荐文章

热门文章

相关标签