Unity+SenseAR教程 | 用手势发射爱心2:加入发射方向【源码】

摘要:Unity+SenseAR2.3开发的AR应用,基于手势识别同时计算手势方向,发射你的爱心~

洪流学堂,让你快人几步。你好,我是你的技术探路者郑洪智,你可以叫我大智。

这篇教程是为了填上一篇教程给你留的坑,上一篇《Unity+SenseAR教程:用手势发射爱心【源码】》如果你还没学习的话,先去学习哈!

上一节最后给你挖的坑是:如何计算出手势的发射方向,让粒子的发射方向和手势一致呢?

上一节只给你留了个思路,这节课咱们一起来把这个坑填一填。

填坑后最终效果

上节最后的效果是全屏显示心心:

最终效果.gif

这节最后的效果是这样的,定向发射你所有的爱哦:

加入方向计算的最后的效果

这节咱们主要解决几个问题:
1、改造粒子让它朝着一个方向发射
2、计算GUN手势的枪口的位置和方向
3、隐藏手上的那些DEBUG的点(很多伙伴问如何隐藏掉,其实就一行代码哈哈哈)
4、发布

1、改造粒子让它朝着一个方向发射

默认的粒子系统创建出来其实就是朝着一个方向发射的,咱们主要需要改一改它的默认参数,让它发射的范围小一点,像是从指尖发射出来的。

注意下图中的几个属性:

为什么还要你注意Rotation呢?因为待会咱们要让粒子的发射方向和手的方向一致,粒子有旋转的话计算起来麻烦一些,所以最好给他清零。

2、计算GUN手势的枪口的位置和方向

接着上一节讲的,ARStandGuesturePainter.cs中,先放出代码:

if (guestureInfo.HandGestureType == ArHandGestureType.GUN ||
            guestureInfo.HandGestureType == ArHandGestureType.I_LOVE_YOU ||
            guestureInfo.HandGestureType == ArHandGestureType.FINGER_HEART)
        {
            HeartParticles.SetActive(true);

            // m_Points中包含了手势识别出来的点的位置,食指的关节分别是4,5,6,7(指尖)
            if (m_Points.Count > 8)
            {
                // 使用SenseAR给的一个工具方法,转为viewport的坐标(0,1)
                // 注意在这旋转屏幕时有BUG,大智没有过多去调试,如果你想搞得完美一些,可以完善一下它的源码
                var startViewport = ARStandGestureUtil.TrasnPosition2D(m_Points[4], image.width, image.height);
                var endViewport = ARStandGestureUtil.TrasnPosition2D(m_Points[7], image.width, image.height);
                
                // 设置z值,下面转换为世界坐标时代表与相机的距离
                // 这个z其实是随便填的,但是会影响粒子距离相机的远近,填一个合适的值
                startViewport.z = 1f;
                endViewport.z = 1f;
                
                // 转为世界坐标
                var start = m_camera.ViewportToWorldPoint(startViewport);
                var end = m_camera.ViewportToWorldPoint(endViewport);

                // 设置粒子的位置和方向
                HeartParticles.transform.position = end;
                HeartParticles.transform.forward = end - start;
            }
        }
        else
        {
            HeartParticles.SetActive(false);
        }

代码里注释写的很详细了,不过还有几点需要说明一下:
1、m_Points中的点与手关节的对应关系如下图:

图中是1-20,但是数组中是0-19,所以注意转换一下。可以看到咱们食指的之间是P8,数组中的索引是7。食指的根部是P5,数组中的索引是4。

2、为什么要设置startViewport和endViewport的z值呢?
提前设置好z值后,在下面调用ViewportToWorldPoint后,就能直接得到与相机距离为z的世界坐标结果了。你要是还不清楚可以去看一下这个API的文档:https://docs.unity3d.com/ScriptReference/Camera.ViewportToScreenPoint.html

其实手势识别出来的手指关节位置本身是没有深度的,相当于是一张照片。我们只是让3D的粒子系统和2D的背景相机图像融合在一起看起来好像都是3D的。

3、HeartParticles.transform.forward = end - start;这句代码是啥意思?
这句代码是个设置物体旋转的简便写法,可以将物体的transform的forward向量,设置为对应的方向。比如在这就是将粒子的forward(z轴)设置为食指指向的方向。

所以第一步制作粒子的时候让你最好不要有旋转,否则设置forward可能得不出来你想要的结果。

为什么用forward向量,而不是用right或者up呢,这个要根据你的粒子的发射方向决定。大智做的粒子发射方向是forward,也就是z轴的方向。

3、隐藏手上的那些DEBUG的点

(很多伙伴问如何隐藏掉,其实就一行代码哈哈哈)
手上的DEBUG点是在ARStandGuesturePainter代码的PostRender方法中通过GL画的,所以只要在PostRender方法的第一行加上个return;就好了。

大智用的编辑器是Rider

啥?你说为啥不直接删掉?删掉你以后想再加上不就找不到了。

4、发布

发布不多说了,上一节课已经讲过了,好多同学卡到gradle中的maven库被墙的问题,可以到我之前的一篇文章看一下:《SenseAR常见问题总结》https://www.jianshu.com/p/435a3f90a6e2

源码及更多探索

由于源码后续会更新,就不直接打包传在这里了。
本工程的持续更新源码可以在洪流学堂公众号回复爱心获取。

这节课只是处理了食指,但是对于ILOVEYOU和比心手势来说,这样可能不够精确,剩下的交给你来做咯!

扩展阅读

Unity+SenseAR教程:用手势发射爱心【源码】
SenseAR常见问题总结
【视频】商汤SenseAR全功能初体验(含填坑经验)
【视频】商汤SenseAR全功能初体验(含填坑经验):B站


好了,今天就絮絮叨叨到这里了,没讲清楚的地方欢迎评论。

我是大智,你的技术探路者,下次见!

别走!点赞收藏哦!

好,你可以走了。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,744评论 6 502
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,505评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 163,105评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,242评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,269评论 6 389
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,215评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,096评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,939评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,354评论 1 311
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,573评论 2 333
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,745评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,448评论 5 344
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,048评论 3 327
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,683评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,838评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,776评论 2 369
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,652评论 2 354

推荐阅读更多精彩内容