![AR与VR开发实战](https://wfqqreader-1252317822.image.myqcloud.com/cover/160/846160/b_846160.jpg)
第2章
SDK开发AR应用
2.1 准备Vuforia开发环境
1.Vuforia简介
Vuforia是一款能为现实世界物体带来互动体验的AR开发平台,旨在帮助开发者打造全新级别的真实世界物品与虚拟物品的互动。它使用计算机视觉技术来实时地识别和跟踪平面图像以及简单的3D物体,使开发者能够在现实世界和数字体验之间架起桥梁。
Vuforia通过Unity游戏引擎扩展提供了C、Java、Objective-C和 .NET语言的应用程序编程接口,能够同时支持iOS和Android的原生开发,使得开发者在Untiy引擎中开发的AR应用很容易移植到iOS和Android平台上。
2.注册成为Vuforia用户
(1)打开Vuforia官网https://developer.vuforia.com/。
(2)如果你已经是Vuforia 注册用户 ,就可以直接输入邮箱和密码登录Vuforia管理后台;如果你还没有注册过Vuforia用户,则需要点击注册并填写相关注册信息。
(3)在完成注册信息填写后,Vuforia会给注册邮箱发送一封激活邮件,登录邮箱按照提示操作即可激活Vuforia账户。
(4)在激活Vuforia账户后就可以点击登录进入Vuforia管理后台了,如下图所示。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0013_0001.jpg?sign=1739288941-2Ht3poYezu09ipEd3kAbwNpdsaF4h11T-0-65a9eb909c39e6a2101129e7ac9da959)
3.下载Vuforia SDK for Unity
(1)点击上图中的Downloads链接并按照下图所示完成操作,注意在下载列表中选择Download for Unity。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0014_0001.jpg?sign=1739288941-x9NRAMpl51a60tTShSaIpPdDgB18p8c3-0-2e8a7ac01eb5924f45dde1d8e8b99ef3)
(2)本节下载的Vuforia SDK版本为vuforia-unity-5-0-5。下载解压完成后会得到后缀名为.unitypackage的Unity插件包。
4.Vuforia 5.0.5 SDK支持的环境
(1)Android平台支持的最低版本是Android 4.0.3。
(2)Unity支持版本为4.6.7—5.1.3p1(本节使用的Unity版本为5.0.2f1)。
5.新建Unity工程
运行Unity程序,按照步骤创建一个新的Unity工程,也可以直接打开已有的Unity工程来进行Vuforia SDK导入。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0014_0002.jpg?sign=1739288941-SkVBOy5xwIqNg9vRKNiA9Mx7IMxK1cHP-0-0352f87194dbefff4d744c9a1b527c6f)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0015_0001.jpg?sign=1739288941-Lr20YGVIOWABtdwL318hAqV9Yjn2Gsje-0-58f9c0ca117b4a5df3b1aea110c07a55)
6.导入Vuforia SDK for Unity插件
双击在步骤3中下载的.unitypackage插件包,弹出以下窗口后点击Import。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0015_0002.jpg?sign=1739288941-g1qLeuvMvYW244Q7FXKcxlW1GbruJ3J1-0-27b5e01a373337ce287d189c864e8474)
也可以在菜单栏中选择Assets→Import Package→Custom Package,然后再选择.unitypackage文件来导入插件。
如果出现以下界面,点击“I Made a Backup.Go Ahead! ”按钮即可。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0016_0001.jpg?sign=1739288941-RIS1vAKPsMfjJ1fpPOvNl8bViX3sXIC4-0-ea6a89483652d8cd767bcb26548d9df6)
在导入完成后,Project 窗口中显示如下:
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0016_0002.jpg?sign=1739288941-JwjrUBQwvGcnmAbXMx6e1SojicyUe6mx-0-b9a5a93629eef0c81c3461f64a9acc18)
至此,Vuforia SDK已经成功导入了新建的Unity项目中,接下来可以创建开发Demo。
2.2 创建Vuforia案例
在开始本节内容之前,如果你还没有创建Vuforia账号,请先参照上一节完成注册,如果你已经是Vuforia开发者,请继续阅读接下来的内容。
1.获取License Key
在官网点击Develop,按照下图完成操作:
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0016_0003.jpg?sign=1739288941-XHEzIkA3bgHu02knk07BLx6FHmNOGLG7-0-249f75bcd77260112249cdafe444e7e7)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0017_0001.jpg?sign=1739288941-Do74VKtvM6q0mLwruLIJpK3J24O7cuLB-0-9b611b355205e0bab13485ac2a6da3be)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0017_0002.jpg?sign=1739288941-DdYNhrxbqVgy9AW2YSaxyTjbbMb0vYs4-0-4f0d9e21dd545e5bd31121699864ff93)
完成以上操作后,在License Manager中点击自己创建的应用名称,进入下面的界面:
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0017_0003.jpg?sign=1739288941-9Q8YWa2uWlGuYdSs3ReIW9g6z67Y0EM7-0-0acfb6c577f1e453e64e8a539957bdef)
2.导出新建应用的数据包
根据下图先创建一个新的数据库:
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0018_0001.jpg?sign=1739288941-gxHE8Ywal7O959CrQsUFNeuvPezU3hUF-0-3f3a4582a28fa54257c4fff32f13fa90)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0018_0002.jpg?sign=1739288941-IxPv3kNHM3CDZAoBFM2vlI0pbKz73AxS-0-65482aa5c7d04e253f25d5db07a7da53)
数据包名最好与新建的应用名相同,以便于后期查找和导出。创建好之后进入以下界面:
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0018_0003.jpg?sign=1739288941-gj2I4KQGSXnW8FTz1WUcOBfJn1YqgsAW-0-022859a85ffc11cde76ec2aaa1a9795c)
打开新建的数据包,添加识别目标:
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0018_0004.jpg?sign=1739288941-nCTHxSyIGo52hYWB3ioKmwNN0Rwo8vln-0-aad8c67f0e7943442dd832772d2c3586)
本书选择Single Image(单个图像)作为识别图:
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0019_0001.jpg?sign=1739288941-yoWqYYNIEkCZMoR3NZlLmire7lbninHy-0-3a373730860fea97de80792e490ee585)
添加成功后会显示如下界面:
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0019_0002.jpg?sign=1739288941-3YIamc8gArk7pCquT7epTEmwG2lYe3cS-0-851b17f3864fb19d3fffc5b88c84bd96)
上图中的星号表示该图片的识别度,星级越高则识别度越高。勾选已上传图片,下载并导入Unity工程中。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0019_0003.jpg?sign=1739288941-kMh3Mq2HPZ9owfUoGch33VAhPeW8qVyi-0-ecf8be0a24cb9c24baec75799430c6f4)
导入成功后如下图所示:
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0020_0001.jpg?sign=1739288941-NEAgS9hQRweBN3LoWGztOlNJiiMxKblS-0-395822a01bc34211857143cd9a52fefb)
3.创建Vuforia案例
在Unity Project视图下选择Vuforia→Prefabs文件夹,并将ARCamera和ImageTarget两个预制件拖入层级视图Hierarchy中,同时将场景自带的Main Camera删除。
预制件ARCamera上带有AR摄像机以及App相关设置;预制件ImageTarget代表一张识别图像,并且带有识别事件处理等相关脚本。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0020_0002.jpg?sign=1739288941-qCgXB93gY3Fr6wiqkN4O9N0So09uLJmv-0-48fddc924f99575a1f403d34a79a5cec)
点击ARCamera,在Inspector面板中找到License Key,将步骤1中创建应用时生成的License Key复制并粘贴到该区域。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0021_0001.jpg?sign=1739288941-0HlPsHRy3BOvkd4E9iOSWWbjzYDUY5zn-0-823dbfac0a734ee77b6e2d2ae4ca771a)
ARCamera设置完成后点击ImageTarget,按照下图进行设置:
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0021_0002.jpg?sign=1739288941-mO3QDxNasJSSvat3lmNADIIEqF8nEGPx-0-a8eefeab9dc46cbc7f7bf10635e4de7e)
右击ImageTarget创建一个三维物体模型,调整三维物体与识别图像的位置关系以使其外于合适位置。
最后,点击运行来测试效果。
至此,一个简易的Vuforia案例创建成功。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0022_0001.jpg?sign=1739288941-sBefXrDupgwBp4iXIkz1I4PBaL5KvEYr-0-74e61644c24061f53e2f379206939405)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0022_0002.jpg?sign=1739288941-87QyQQroRj3jXyis7yXQGOHIJlSK7jyr-0-f2f2e173bd6cdf4eabcedafda8e9f0ad)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0023_0001.jpg?sign=1739288941-zJ8p7rL2YCAZOfw9vUPVlZ4sU9vAoNLj-0-0e6140e43cf187f9645bc1e997531149)
2.3 创建AR视频
本节将介绍AR视频的创建,AR视频即识别某张图像并播放与所识别图像对应的视频文件,一般用于企业宣传册、广告、书籍等相关领域。我们将会继续使用Unity和Vuforia SDK来开发AR视频应用,关于Vuforia SDK的相关配置可参阅前面的章节。
Unity默认支持的视频格式分别有.mov、.mpg、.mpeg、.mp4、.avi和.asf,我们在项目应用中一般采用.mp4文件进行视频的播放。在本节中,我们将介绍一款用于移动手机视频播放的Unity插件,该插件名为Easy Movie Texture,通过简单的设置即可完成视频的播放。
1.插件导入
下载Easy Movie Texture 2.36插件并导入Unity中,在EasyMovieTexture文件夹下找到VideoManager预制件并将其放置到层级视图Hierarchy中,将VideoManager作为识别图像的子物体,该预制件可以将视频以当前面片(Plane)的大小比例进行播放。
注意:
在Assets文件夹中找到StreamingAssets文件夹,将视频文件放在该文件夹下。如果Assets中没有该文件夹,则需要手动创建该文件夹,如果视频放在其他文件夹下,将无法加载视频。
2.设置视频播放选项
选中VideoManager,在Inspector面板的Str File Name选项中填入视频名称,如a.mp4。该组件还可以设置是否自动播放(B Auto Play)、是否循环播放(B Loop)等属性。该预制件本质上是一个面片和控制播放的Media Player Ctrl组件,所以可以手动调整面片相对于识别图的大小和位置。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0024_0001.jpg?sign=1739288941-jOuCwquisrWZDys6GR0DxG7dXyPkT9Rj-0-7c2c5fe874a10a89ca00e3e5ee3bf287)
3.注意事项
(1)Easy Movie Texture插件不支持PC端的视频播放,只支持Android操作系统和iOS平台。
(2)如果需要从网络加载视频文件,则只需将视频文件的网络URL添加到Str File Name属性上,无需其他操作。
2.4 文字识别
本节介绍如何使用Vuforia和Unity实现文字识别功能。Vuforia对文字识别有一定的要求,首先,Vuforia能够识别的文字大多为英文,不能识别数字和中文。其次,默认能够识别的英文单词必须是官方词库中的单词(10万个),当然,还可以自定义添加英文单词。接下来我们通过Vuforia官方自带的案例来看一下文字识别的实现步骤。
1.插件导入
登录Vuforia官网,在下载页面中找到Samples,该页面中有Vuforia SDK提供的基本功能对应的案例,下载下图所示文件。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0025_0001.jpg?sign=1739288941-u3ZDacyRVxDBtvoFF69J0RIExzaOJfvx-0-fcd6d995c5fa6e943fd905785ef89fdd)
下载并解压之后找到下图所示Unity包并导入。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0025_0002.jpg?sign=1739288941-l7rAfXIK88Ot6m84eXoLiAAXmapWMHwq-0-dbc3cb5133be19f81851f6af08638a21)
如果在导入Unity插件包的过程中出现下图所示的对话框,点击“I Made a Backup. Go Ahead! ”按钮即可。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0025_0003.jpg?sign=1739288941-ABtwW7Ld7XBis9GXi7Qck96Qy40HG7u2-0-90bf7dd490b354ba0a9d7c299e2a0fb8)
2.实现文字识别
插件包成功导入Unity工程后删除场景自带的Main Camera,同时在Vuforia文件夹中找到如下文件,拖到层级视图Hierarchy中。
选择场景中新添加的TextRecognition物体,在Inspector面板中添加Text Event Handler脚本。
在Inspector面板中,Additional Word File表示添加自定义词库,类型为.vwl文件。上图中,在第二个线框标定区域可以自定义添加需要识别的单词,如ARinChina。MaxSimultaneous Words属性是指最大同时存在的物体的单词。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0026_0001.jpg?sign=1739288941-wL4JgB3twKPOZXIkSXuAYbCx7XraJnYv-0-36a5f28b5fc7bf9134a53d516f3dcb58)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0026_0002.jpg?sign=1739288941-l2FeKh6uSlGnF9kVGz4ZIfTJdSS4VgKy-0-421adafcf88bb902f1dfed6461699eac)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0026_0003.jpg?sign=1739288941-Yt2vaHrCJnn8EamOR8RP01Gm0IoOmR7v-0-109649cc1eb8fe9381908dc5b1a7f30e)
Black_List表示黑名单,即将某个单词加入该名单之后就无法再识别;相对应的White_List则表示白名单,加入该名单的单词会优先进行识别。
点开Word,将子对象Text文字改为我们自定义的文字ARinChina,并在场景中的Word物体下创建一个识别之后要显示的物体,然后调整其位置和大小,比如创建一个Cube,最后运行并查看识别效果。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0027_0001.jpg?sign=1739288941-vN1xP6f31KquvLn9vT8obSZeM9Gllyap-0-afd3c83236bf792d9062037a975648ee)
2.5 柱形识别
Vuforia SDK提供了带有图像的柱形物体识别功能,柱形识别只针对柱形物体,配合包裹在柱体表面的图像来进行识别,比如识别饮料瓶。本节将介绍柱形识别的实现步骤和方法。
1.Vuforia官方案例包
登录Vuforia官网,进入Downloads页面,点击Samples选项,然后下载如下插件并解压。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0027_0002.jpg?sign=1739288941-ZvqrLd6hNukcTvdw9Wtsp0FBPIJAIi4l-0-c62ae0ebe693f07460749958e618856e)
在解压完成后找到Cylinder Targets包并导入Unity工程。
在Project视图中的Vuforia文件夹下找到ARCamera预制件和CylinderTarget预制件,将这两个预制件拖至层级视图Hierarchy中,同时删除场景中的Main Camera。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0028_0001.jpg?sign=1739288941-EbA8MaZ2laxUpIxBqTDiXf0zxGPLfDP1-0-7678cda03a0242968a5ce83526ff90ca)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0028_0002.jpg?sign=1739288941-guk9ckGlM0cGYNShEu45Yl5HVqD63ifM-0-3903ea2cb9b25e474a7d9c175ffc5733)
2.创建数据库
在Vuforia官网的Develop页面下创建一个新的数据库,命名为CylinderTargets。
创建完成后打开CylinderTargets数据库,选择Add Target,在弹出的文件选项面板中选择第三种Cylinder,然后按照页面要求填写圆柱体的尺寸。其中的三个属性分别代表圆柱体的以下信息:
● Bottom Diameter:底面直径。
● Top Diameter:顶面直径。
● Side Length:边长。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0028_0003.jpg?sign=1739288941-mbwAESd6rQgdV6vl8vBQOXdmP336VO80-0-aa2dddc9e728ca5b1dba0bee8c22f1dd)
在创建好识别目标后,点击新创建的识别目标,然后选择Upload Image来上传图片,这个图片是指包裹在圆柱体上的识别图案。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0029_0001.jpg?sign=1739288941-R4m8L5tnQNqyBr5Tbg1TMKNAuvHBO1Sg-0-8d0409b675b1ee031a860baa013ce2b5)
图片上传标准:
● 长度:Top Diameter(或者Bottom Diameter)×π。
● 宽度:按照具体圆柱高度确定,本书使用可口可乐易拉罐,所以宽度为易拉罐高度11.5cm。
注意:
上传图片的长度一定要和上下两面图片的圆形周长相同,图片的宽度即圆柱的高,如果图片尺寸不合适,则无法成功添加。
3.实现柱形识别功能
这里我们使用官方自带的案例来做示范。在Unity工程中选中CylinderTarget,在Inspector面板中选择数据包为系统自带的数据包。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0029_0003.jpg?sign=1739288941-4V2s9Xukexmbk4QCqEs3QAB2EmKwnjcj-0-2e24ac55c302e0ac8bd9e3db78f32861)
接下来,在CylinderTarget下创建一个子物体模型,这里选择Shpere,然后调节到合适的位置及大小。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0030_0001.jpg?sign=1739288941-MPwAqHiKun8WfcOi4LMbAEZQY0WimwSa-0-098cbae014759b9c8f844ec093a6f459)
最后,点击运行以测试圆柱体识别的效果。
2.6 立方体识别
Vuforia SDK提供了立方体识别功能,该功能可以识别被图案包裹的立方体,常用于产品包装盒等物体的AR展示效果,本节我们将介绍通过Unity以及Vuforia SDK制作立方体识别的步骤和方法。
1.下载并导入插件
登录官网,点击下载如下插件并解压。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0030_0002.jpg?sign=1739288941-t3JgCnEw2OhSaKPg4Dmtg5TkQTcjInLi-0-e8f4ccd5781dae1df5763e2e63e57e95)
在解压完成后找到Multi Targets包并导入Unity工程。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0031_0001.jpg?sign=1739288941-CYt1MWAN0f0nX9uXv5qkIyLPIxcWEdVS-0-71443f6648388265e33326130a723c8a)
在工程视图Project中的Vuforia目录下找到ARCamera和MultiTargets两个预制件,将其拖到层级视图Hierarchy中,同时删除场景中的Main Camera。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0031_0002.jpg?sign=1739288941-gxMLV4cO84N5bnGohjD836Dk2hHrym74-0-18d7e237de322a3c822760c768a3dc95)
2.创建数据库
在官网的Develop页面下选择Target Manager并创建一个新的Database,命名为MultiTarget。点击新建的MultiTarget数据库,在弹出的文件选项面板中选择Cuboid。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0031_0003.jpg?sign=1739288941-7L8hHSkZEbPZBhAEggf2Ygue8UId8ylB-0-e1e9b75ec1821be86f2dad5f14c5dd85)
上图中,Dimension中的属性是为了确定立方体的尺寸,分别为宽、高、长三个维度的尺寸。相应的,物体的长度对应Front、Bottom、Top和Back识别图的长度,宽度对应Left、Top、Right和Bottom识别图的宽度,高度则对应Front、Left、Right和Back识别图的宽度。遵循上述步骤,各识别图上传时相对应位置的尺寸必须一致,否则会出现识别图无法上传的问题。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0032_0001.jpg?sign=1739288941-NnoFWdyO1HpX9alLBSNOfYzGPxqohZsK-0-afa85b9a54b1652ae4665fda3adf4d6e)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0032_0002.jpg?sign=1739288941-kzcFgB67dkorKKzPqARJtt5cU6R3bhbm-0-aac2e8f33939cb827db7431aa66288dd)
3.实现立方体识别功能
这里我们使用官方自带的MultiTarget,选中MultiTarget,调节下图所示属性。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0032_0003.jpg?sign=1739288941-oKts8vOXcF6Wbg0PYefvRswvAaQIR80m-0-c4c06a014d2c4e8c8be94260a96e41cf)
在MultiTarget下创建一个扫描后要显示的模型,我们可以创建一个Unity自带的Cube来显示识别之后的物体,调整好对应关系后点击运行即可实现立方体识别效果。
2.7 3D物体识别
2.5节和2.6节讲解了柱体识别和立方体识别,这两节的内容都只是针对简单几何体进行识别,在本节中,我们将介绍不规则三维物体的识别步骤和方法。
1.下载并导入插件
登录官网,点击Downloads下的Tools,下载Vuforia Object Scanner (Vuforia物体扫描器)。Vuforia Object Scanner是一个用于扫描物体表面识别点信息的App,只支持Android操作系统。根据官网规定,建议大家采用Samsung Galaxy S5和Google Nexus 5这两款安卓手机进行操作,当然也可以尝试使用其他Android手机。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0033_0001.jpg?sign=1739288941-7TuiUXzYcRkpnKILIa3lgvCrE5zGpYjV-0-4cf8cf3708bb2ed7d20c246ef96130e2)
下载完毕并解压后会得到以下两部分内容:
● Media文件夹:三维物体扫描图,需要采用A4纸打印出来。
● scanner.apk:用于三维物体扫描,需要安装在上述两款安卓手机中。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0033_0002.jpg?sign=1739288941-dBzAaQ2R6FRa60zSbZBFkxFZm3QNpNwt-0-0627613e0c285f8c76414e6438461e81)
接下来,我们依然按照之前介绍的方法下载Samples插件包并将其导入工程,下图中的Object Recognition表示对应的插件包中包含物体识别案例。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0034_0001.jpg?sign=1739288941-Sm4y5zFKfLA4It6Ma61Lwlqa6F2YZOio-0-900e8e0f6304d1b4f008b1eb474c145d)
2.扫描三维物体识别信息(点云数据)
将打印出来的纸张放在桌面上,在右上角坐标区域放置需要识别的三维物体。打开已经安装的扫描数据App,360°扫描物体后将生成后缀名为.od的数据文件。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0034_0002.jpg?sign=1739288941-epP9BG4cFRwsyUBvczuoqboSMR6lLGE4-0-8aee95b9b1166298a57dba76ff6e14a8)
3.创建数据库
接下来登录Vuforia开发者官网并创建数据库,这次我们选择3D Object,点击Browse按钮选择上一步中生成的数据文件。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0034_0003.jpg?sign=1739288941-GLVG13nxaMhQW09mH0xCYtjUQ4aG56Pp-0-eb4b44a93f439556676670cd0bf9ef95)
创建成功后点击下载数据包并将其导入Unity工程。
4.实现三维物体扫描
在Vuforia文件夹中找到ARCamera和ObjectTarget两个预制件并拖到层级视图Hierarchy中。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0035_0001.jpg?sign=1739288941-YVWTbieIP5Br5gx6ypFkk0nAVFi4lAgQ-0-d4f018615daa0a269097d372db9bb742)
选择ObjectTarget,在Inspector面板中选择三维数据包。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0035_0002.jpg?sign=1739288941-2W9FjZFp8KsXbZuMwvSPOIHY3Ux8FgBK-0-fb0f2d0f4652b4bacb8c852b0160c4ad)
然后在ObjectTarget下创建一个扫描成功后要显示的子对象,并调节到合适的位置及大小,在此我们直接创建Unity自带的三维模型Sphere。
最后点击运行以测试三维物体的识别效果。
2.8 云识别
在开发项目的过程中,当我们需要将识别图放置在服务器后台而不是App内部的时候,需要使用Vuforia的云识别功能,在本节中,我们将介绍Vuforia云识别的实现步骤和方法。
1.创建License Key
登录Vuforia开发者官网,点击Develop,在License Manager下面创建一个License Key,该License Key是为了验证App的合法性。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0036_0001.jpg?sign=1739288941-jAqtz1XsmWIKa7RPAUkh60zkVhv6CYZz-0-d62a3eaff23e1656ed503f047d78e937)
2.创建云数据库
选择上图中的Target Manager选项,然后点击Add Database来创建云识别数据库,在下图中选择Cloud即可添加云识别目标。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0036_0002.jpg?sign=1739288941-25DqzCNcAbcQkBogcNF0cG9LjKKFFkz4-0-bc672b1550e266dc32a903aed269f1fa)
选择刚才创建的License Key。
创建好之后打开,选择添加图片(与本地图片识别一样)。
3.下载插件
点击官网中的Downloads,下载下图所示的Unity包。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0036_0003.jpg?sign=1739288941-wQM2MG90fSVjdg02bl3xZTWLQtwG8aDJ-0-8a26503a2a2f56b044b1c9e74e87c568)
4.创建Unity工程
新建一个Unity工程,命名为CloudTest并打开,解压下载好的插件包,找到Cloud Recognition包并将其导入Unity工程。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0037_0001.jpg?sign=1739288941-Pj28kF7EsJTVELVD67TTanAs4eg8flZQ-0-caaffed1aaf25ed3ec15d6b1a2ca0671)
导入完成后在Assets文件夹中找到Scenes文件夹并打开Vuforia-3-CloudReco工程。
选择CloudRecognition,在Inspector面板中找到Access Key和Secret Key,通过这两个密钥可以找到云连接的图片。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0037_0002.jpg?sign=1739288941-8r5bfLsDGqheCuShoyKZ2m8f2cs9qKed-0-7c9a7fca203d2380871230f79575a3ba)
再次进入Vuforia开发者官网,在Develop选项下找到下图所示的页面选项。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0037_0003.jpg?sign=1739288941-Gk5y3sAoAUTDqCqQxRfx0B2sWHsK7gPo-0-faf819035b30944b4de8555fd968efd4)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0038_0001.jpg?sign=1739288941-O4YdDwPgCh3qeyFrPf4Ap1E4fyASrZ1h-0-cf7f9f3a62ff1d1b6104a0b720b64494)
将上图中的两个密钥分别复制到Unity工程中要求输入密钥的地方。
选择ARCamera,将刚才专为云识别创建的License Key复制进去。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0038_0002.jpg?sign=1739288941-NPaTTQD70eaKclkNRQ4UYV8ePcmsAYox-0-cd104d95a63aab8b3808720208ad3806)
最后运行以测试云识别效果,与本地识别的区别是,云识别测试需要设备处于连网状态。
2.9 智能地形
之前介绍了如何通过扫描单个识别图或物体来实现增强现实,可它们都是相对独立的,并且与现实场景没有互动。那么,如何使通过增强现实技术加载出的模型与现实场景互动呢?这就要用到本节介绍的SmartTerrain。
1.插件下载
访问https://developer.vuforia.com/downloads/sdk,进入如下界面,并下载Vuforia SDK的Unity版本。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0039_0001.jpg?sign=1739288941-EJ64zshx8AzKLBmzsbcSZjVJJI92OuAv-0-95d372c202d59bc336f43a961d00e9e6)
2.创建Unity工程
新建一个Unity工程并将下载好的插件导入Unity。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0039_0002.jpg?sign=1739288941-SRds8dHq9bHqgJK2pDwmprJjkBSS9f90-0-46c2ccac666c4c5fdd034bc874e0573c)
3.效果实现
将场景中的Main Camera删除,在Vuforia文件夹下的Prefabs里将ARCamera、ImageTarget以及SmartTerrain中的SmartTerrain拖入场景。
在Vuforia的Develop页面中的License Manager下获取License Key并填入下图所示的框内。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0040_0001.jpg?sign=1739288941-LtgVIB0njXilhXjyXmnN0rbcVghHZRmS-0-8a915b75ff088d761cde5167a894cb3b)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0040_0002.jpg?sign=1739288941-7R2Gcgx8cgPrxIagRxLSBDtevvzM6LN5-0-934dc40a8e65419dbbc46d8e025b6993)
然后在Target Manager页面中上传一张识别图,下载识别目标数据文件并将其导入当前工程(关于如何下载识别目标数据,之前的章节中有详细的介绍)。
在ARCamera的Inspector面板中进行如下设置。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0040_0003.jpg?sign=1739288941-qVMaI9UtP68TA3HKUQW3tCHUtB0sdF3Z-0-25d88d5572013235445acbc6948bcfce)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0040_0004.jpg?sign=1739288941-1OgSkMGtNcy7gpvfcTWzazxvwHjH0tsS-0-c0d78f5601de617b115c733727312b04)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0040_0005.jpg?sign=1739288941-DQLioOvTDt7GhzAxOIE30WWfMYV0d3tb-0-d0a00b8d1cbe8b38d9793ccd041abca1)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0040_0006.jpg?sign=1739288941-wb3IR8MgkfRyiA6jVG3Y3rDnwme9JMmu-0-3e0b217796248c15af4684bd3e1a3935)
在ImageTarget的Inspector面板下进行如下设置。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0040_0007.jpg?sign=1739288941-rfQRfpaw5G56Dto2gyU1menvnKsiMprk-0-8d6625384bb024a452bc13c2fae3b086)
在这里选择你的识别图。为了方便观察,我们改变一下SmartTerrain中组件的材质颜色,步骤如下。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0041_0001.jpg?sign=1739288941-9adnOjnCgxcguHiHSGkd41rSzD6vPFyJ-0-5361b82a5f64f50206b4bc999b7afc5d)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0041_0002.jpg?sign=1739288941-rpFRjgg4JwSfVQPsMgo422HEwLABhxy7-0-21e909321505b2b4dec6d7b2d2931a72)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0041_0003.jpg?sign=1739288941-RweeH8WG0ApHBJ1SKUEuNhmkdBV8cjfz-0-cb8d76c8e6543f674a9dce695e49330b)
将这个材质球赋给上面的Primary Surface,并设置如下。然后对PropTemplate的材质进行设置。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0041_0004.jpg?sign=1739288941-UAq5DySxvelIRRaQGiQeBB3cebbEgtcu-0-8b5cf02006af65d619ec087515b7b354)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0041_0005.jpg?sign=1739288941-s2mkPayXFULjjlGROYBrkQBWDRLrypnQ-0-2f69483cb958e41da267e67557cd3f1a)
注意:
颜色可自由选择,没有特殊规定。
运行Unity扫描识别图,并在场景中置入一个随机物体,效果图如下。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0041_0007.jpg?sign=1739288941-BxDK9Sr2DSvbpOjHupYD2RTVJVtPgIFm-0-6f06965e6118b4930161e5d6c048ac45)
扫描成功后会出现暗紫色的阴影部分,随后如果扫描出了场景中的三维物体,就会在该物体上生成一个浅绿色的立方体盒子(不同设置下的颜色不同)。
至此,Vuforia的SmartTerrain地形就创建完毕,大家可以根据自己的需求在出现浅绿色立方体盒子的地方添加相应的模型与交互事件,从而完善你的SmartTerrain应用。
注意:
若想实现更好的效果,还可以结合PrimeSense Capri进行开发。
2.10 虚拟按钮
使用Vuforia实现增强现实之后,有时需要与这些虚拟模型进行交互,同时为了使交互方式更加魔幻,我们期望可以在真实的识别图像上进行点击,从而触发App中的某些行为。Vuforia SDK为我们提供了Virtual Button功能来实现这样的交互,本节我们将带领大家使用这一特性实现两个模型之间的切换。
1.插件下载
访问https://developer.vuforia.com/downloads/sdk,进入如下界面,并下载Vuforia SDK的Unity版本。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0042_0002.jpg?sign=1739288941-mGF1Rclao6XmbIrBCOGdQTGtI1JoHSWA-0-e9c5146cdaf7e927e087f38de05329b9)
2.创建Unity工程
新建一个Unity工程并将下载好的插件导入Unity,同时将识别图数据包导入该工程。
3.场景搭建
首先删除场景中的Main Camera,接着从Vuforia→Prefabs中将ARCamera和ImageTarget拖入场景,在ARCamera的Inspector面板下添加App License Key,并激活当前识别图信息。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0043_0001.jpg?sign=1739288941-Qt0L1gnrcjX7OgiQZukAKhFhDfdyiOFJ-0-fc227384a628efd26539a2ab63921276)
然后在ImageTarget的Inspector面板下设置相应识别图信息。
接着在ImageTarget下分别创建一个Cube和一个Sphere,并将Project视图中Vuforia→Prefabs下的Virtual Button预制件拖入ImageTarget。这里将Cube的棱长设置为0.3,将Sphere的半径设置为0.4,然后使它们的位置相同。为了便于观察,我们新建两个材质球,分别将Cube和Sphere设置为不同的颜色。最后在Virtual Button的Inspector界面里分别设置两个Virtual Button的名字。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0043_0002.jpg?sign=1739288941-uyTPnlgUFsZi1HrcBP8Hyj97BVL6r8mX-0-099813f8fa2f244e047ad593671cd650)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0043_0003.jpg?sign=1739288941-F95PTlLcotCZMmYLoUSDjHV5LfnJ1XNb-0-4ba09010b634a7c31cdb9d7ddce3d252)
4.脚本编写
在Project下新建一个C#脚本,命名为VirtualButtonTest.cs,并在脚本中添加以下代码:
using UnityEngine; using System.Collections.Generic; using Vuforia; public class VirtualButtonTest: MonoBehaviour, IVirtualButtonEventHandler { void Start () { } public void OnButtonPressed(VirtualButtonAbstractBehaviour vb) { } public void OnButtonReleased(VirtualButtonAbstractBehaviour vb) { } }
该类的作用是实现IVirtualButtonEventHandler这个接口,该接口中定义了OnButton Pressed和OnButtonReleased两个方法,这两个方法能够监听虚拟按键的按下和释放事件。为了触发这两个事件,我们还需要将之前添加的两个VirtualButton对象注册到事件系统中,因此需要在Start()方法中查找这两个物体,并调用VirtualButtonBehaviour类中的RegisterEventHandler方法将当前对象作为参数传入,具体的代码实现如下:
void Start () { //在所有子物体类中找到所有VirtualButtonBehaviour组件 VirtualButtonBehaviour[] vbs = GetComponentsInChildren<VirtualButtonBehaviour>(); for (int i = 0; i < vbs.Length; ++i) { //在虚拟按钮中注册TrackableBehaviour事件 vbs[i].RegisterEventHandler(this); } }
接下来在当前类中创建两个GameObject类型的字段,分别对应之前创建的立方体和球体。
private GameObject cube; private GameObject sphere;
接着在Start方法中查找这两个物体并赋值给相应的字段。
cube = transform.FindChild("Cube").gameObject; sphere = transform.FindChild("Sphere").gameObject;
在程序开始的时候,我们希望它们都不显示,所以要先把它们藏起来。这就是Start方法的最后一步需要做的事情:
cube.SetActive(false); sphere.SetActive(false);
现在我们开始实现OnButtonPressed方法中的功能,此方法的唯一一个参数vb是VirtualButtonAbstractBehaviour类型。在这个参数中可以获取被按下的虚拟按键的名称VirtualButtonName,将传递的名称和场景中创建的名称进行对比,就可以知道我们具体按下的是哪一个虚拟按键,具体代码实现如下:
switch (vb.VirtualButtonName) { case "showCube": cube.SetActive(true); break; case "showSphere": sphere.SetActive(true); break; }
同理,OnButtonReleased实现方法基本相同,代码如下:
switch (vb.VirtualButtonName) { case "showCube": cube.SetActive(false); break; case "showSphere": sphere.SetActive(false); break; }
5.功能实现
运行Unity并扫描识别图,由于我们在最开始将两个物体隐藏起来了,所以看不到东西。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0045_0001.jpg?sign=1739288941-eNqT6AKUfBi4gTwgv9zrju5rgKBm8jW3-0-33a8e8cad64fd3cc2c54a2f6c665b221)
当我们“按下”左边的showCube按钮时,画面如下。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0045_0002.jpg?sign=1739288941-a2Ws1LhBT7MK2VKOkNwXZCoBvyxOKsKq-0-e29bd030b4800ff2b289afde5a27afc7)
接着,我们“按下”右边的showSphere按钮,效果如下。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0046_0001.jpg?sign=1739288941-pZTZCFhKDmATPsam1ShAd38N2nFcWxq3-0-a90f7ca6d50f7b1223453b8ca48001e6)
到此,VirtualButton功能实现完毕。
关于虚拟按钮,有以下几点需要注意:
● 本节只是实现了一个简单的功能,大家可以根据自己的需求自定义VirtualButton事件。
● 可以使用PS等图像处理软件给识别图加上虚拟按钮的图像,这样会更直观。
● 为了达到更好的体验效果,识别图可以复杂一些,尤其是在虚拟按钮的位置。
2.11 帧标记识别
在使用Vuforia进行开发时,我们总是强调识别图的识别度星级越高,越容易识别。那么假如在商业项目中,客户要使用的识别图的识别星级为0,该怎么办呢?这就是FrameMarker大展拳脚的时候了。本节我们将为大家介绍一个名叫FrameMaker的神奇功能。
1.插件下载
访问https://developer.vuforia.com/downloads/sdk,进入如下界面,并下载Vuforia SDK的Unity版本。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0046_0002.jpg?sign=1739288941-VEgnVkTWy94UYBhmiTeyUkXgUnnYGv7C-0-3a81d2c08df84f82291b44ba4bce299e)
2.创建Unity工程
使用插件,导入新建的Unity工程。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0047_0002.jpg?sign=1739288941-dX840094LYT60Bo4hf9wgPmOMkBL8sAy-0-4edc810d94514cb9a93686bc4de332ae)
然后拖入ARCamera和FrameMaker,并在FrameMaker下新建一个Cube作为识别后呈现的对象。
3.效果实现
在ARCamera里填写App License Key,识别效果如下。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0047_0003.jpg?sign=1739288941-6aSiBSwYz5ODFDYZ7IJqV21BPzp5vOuq-0-50e651b9e03348e86f85ccab6ac1109c)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0047_0004.jpg?sign=1739288941-dwYVFsafmzFep6HczMpZYZf7KAH0v0Sa-0-2950514674af4de3f30f67c1e38c1cb0)
这里要说明的是,其实FrameMaker和ImageTarget识别很像,但是,ImageTarget识别需要先将识别图上传到Vuforia,再从资源库中以.unitypackage格式下载并导入工程中使用。而FrameMaker则无需上传,官方提供了512张FrameMaker的识别图供使用。
所以当我们使用ImageTarget的时候要在ARCamera上勾选如下设置,而使用FrameMaker的时候则无需设置。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0048_0001.jpg?sign=1739288941-OX8KEdxWZPrXgxnJXd0BH3TDqlxaeKZj-0-319fca2490c82f331201e41832072531)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0048_0002.jpg?sign=1739288941-dwKBV1R0YL84mOcF0ieOobc2VSC7DZ9W-0-c6e93ebb0cb5c82506c194c77e19ea9b)
所以我们在制作的时候,只需使用PS将自己的识别图和官方提供的FrameMaker进行合成即可,因为所识别的是帧识别图,与底图内容无关。但要注意一点,你所使用的帧识别图的序号需在场景中的FrameMaker中进行设定,默认为0(即第一张)。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0048_0003.jpg?sign=1739288941-b3CgZCJMGkyumeKCY5EKBvXmZHusdxY7-0-9474ab65824a9d363c5eda2da495c04d)
官方提供的识别图已打包好,解压后可直接使用,路径如下。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0048_0004.jpg?sign=1739288941-kqXw3HNsUN0H1RMy2OwKi400J3MTWVyF-0-784899d29ca133e65076cb7ad922ac7e)
所以当我们遇到识别图不清楚、识别效果差或者识别图较多又相似的问题时,就可以考虑使用FrameMaker来解决这一问题,因为其主要是识别FrameMaker,而和底图没有关系。这就是帧标记识别,快使用它让那些0星级的识别图“重获新生”吧!
2.12 自定义目标识别
在AR开发过程中,很多人会觉得将识别图上传到官网数据库然后再从数据库下载这个过程难免有些繁琐,尽管有FrameMaker和云识别这些强大的功能,但还是会有人觉得麻烦。那么,如何在使用时实时创建识别图,就是本节我们要给大家介绍的新功能,自定义目标识别。
有必要提前介绍一下自定义目标识别的工作原理,打开摄像头开始扫描后,以扫描到的某一固定场景作为识别图,实现这一步骤的方法就是使用摄像头进行拍照,这时就需要一个触发拍照的指令,我们用一个Button来实现。所以最终的效果就是画面中会一直有一个Button,当我们扫描到我们要自定义的识别图时,按下Button,然后识别图创建完成,扫描该识别图,模型出现。
1.插件下载
访问https://developer.vuforia.com/downloads/sdk,进入如下界面,并下载Vuforia SDK的Unity版本。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0049_0001.jpg?sign=1739288941-vpg9U2iQSah6xxWbsWudTzYEe4FRNb1y-0-6f112cacbc7db5c0e8d8527d0ef6f29e)
2.创建Unity工程
新建一个Unity工程并将下载好的插件导入Unity。
3.场景搭建
删除场景中原有的Main Camera,接着从Vuforia→Prefabs路径下将ARCamera、ImageTarget以及UserDefi nedTargetBuilder拖入场景。
接着在ARCamera的Inspector面板下添加App License Key。随后在ImageTarge的Inspector面板下将ImageTarget类型设置为UserDefi ned。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0050_0001.jpg?sign=1739288941-3b83HehMuLSPfPKlRayomB10Xvpwki8u-0-6dc99b1d2dd4ac2e8d60a0ad4c75e9d5)
接下来需要添加模型,这里用Cube来代替,我们在ImageTarget下添加一个Cube。最后创建Button按钮,这也是我们创建自定义识别图时最重要的一步。
4.编写脚本
在Project下新建一个C#脚本,脚本主框架如下:
using UnityEngine; using System.Collections; using System.Collections.Generic; using System.Linq; using Vuforia; public class UDTTest: MonoBehaviour, IUserDefinedTargetEventHandler { void Start () { } public void OnFrameQualityChanged(ImageTargetBuilder.FrameQuality frameQuality) { } public void OnInitialized() { } public void OnNewTrackableSource(TrackableSource trackableSource) { } public void BuildNewTarget() { } }
这个类中比较关键的是IUserDefi nedTargetEventHandler这个接口,其中定义了OnFrame QualityChanged、OnInitialized和OnNewTrackableSource三个方法。我们实现这个接口中的三个方法,并将脚本附加到UserDefi nedTargetBuilder上。
首先需要声明一个UserDefi nedTargetBuildingBehaviour类型的变量,接着在Start函数里将当前类注册为该类型事件。
UserDefinedTargetBuildingBehaviour mTargetBuildingBehaviour; void Start () { mTargetBuildingBehaviour = GetComponent<UserDefinedTargetBuildingBehaviour>(); if (mTargetBuildingBehaviour) { mTargetBuildingBehaviour.RegisterEventHandler(this); Debug.Log("Registering User Defined Target event handler."); } }
接下来要实现接口中的三个函数,首先是OnInitialized,用来初始化一些数据,我们在这个函数里写入下面的代码:
public void OnInitialized() { mObjectTracker = TrackerManager.Instance.GetTracker<ObjectTracker>(); if (mObjectTracker ! = null) { mBuiltDataSet = mObjectTracker.CreateDataSet(); mObjectTracker.ActivateDataSet(mBuiltDataSet); } }
这里用到两个新的变量,需要提前声明,如下:
ObjectTracker mObjectTracker; // 新定义的数据集添加到DataSet里 DataSet mBuiltDataSet;
接着是OnFrameQualityChanged这个函数,用来更新当前帧质量。我们在函数里写入下面的代码:
public void OnFrameQualityChanged(ImageTargetBuilder.FrameQuality frameQuality) { mFrameQuality = frameQuality; if (mFrameQuality == ImageTargetBuilder.FrameQuality.FRAME_QUALITY_LOW) { Debug.Log("Low camera image quality"); } }
这里的mFrameQuality 是一个用来记录当前帧图像质量的枚举类型,声明如下:
ImageTargetBuilder.FrameQuality mFrameQuality = ImageTargetBuilder.FrameQuality. FRAME_QUALITY_NONE;
最后也是最重要的一个方法OnNewTrackableSource的代码如下:
public void OnNewTrackableSource(TrackableSource trackableSource) { mTargetCounter++; // Deactivates the dataset first mObjectTracker.DeactivateDataSet(mBuiltDataSet); // Destroy the oldest target if the dataset is full or the dataset // already contains five user-defined targets. if (mBuiltDataSet.HasReachedTrackableLimit() —— mBuiltDataSet.GetTrackables(). Count() >= 5) { IEnumerable<Trackable> trackables = mBuiltDataSet.GetTrackables(); Trackable oldest = null; foreach (Trackable trackable in trackables) { if (oldest == null —— trackable.ID < oldest.ID) oldest = trackable; } if (oldest ! = null) { Debug.Log("Destroying oldest trackable in UDT dataset: " + oldest.Name); mBuiltDataSet.Destroy(oldest, true); } } // Get predefined trackable and instantiate it ImageTargetBehaviour imageTargetCopy = (ImageTargetBehaviour)Instantiate(Imag eTargetTemplate); imageTargetCopy.gameObject.name = "UserDefinedTarget-" + mTargetCounter; // Add the duplicated trackable to the data set and activate it mBuiltDataSet.CreateTrackable(trackableSource, imageTargetCopy.gameObject); // Activate the dataset again mObjectTracker.ActivateDataSet(mBuiltDataSet); }
这个函数里需要提前声明的变量有两个,如下:
int mTargetCounter; //声明一个公开的ImageTargetBehaviour,然后在Unity中赋值 public ImageTargetBehaviour ImageTargetTemplate;
最后一个就是我们自定义的函数BuildNewTarget,代码如下:
public void BuildNewTarget() { mTargetBuildingBehaviour.BuildNewTarget("test", 50); }
然后还需要返回Unity中进行一些细微的设置调整,将我们的脚本拖到UserDefi ned TargetBuilder下,并为ImageTargetTemplate进行赋值。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0052_0001.jpg?sign=1739288941-MmNXRjVD7jN1o0yLc6UtfPUuUTDYE5CI-0-702abddf50e43eb3eead13a1c2c81589)
然后在Button上添加点击事件,步骤如下。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0053_0001.jpg?sign=1739288941-LaxsMdm1DbSokOTGQOcxZTCJKexPlqv0-0-8be5ffe0b19dd537eb2345234c5dd749)
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0053_0002.jpg?sign=1739288941-xJooc6IA5WP3gmgWNRDWltoJDB0wxYXK-0-229483cb70b17658d0ae355f5af05824)
然后在UserDefi nedTargetBuilder上勾选Start scanning automatically,表示开启自动扫描。
5.运行工程
首先拍摄一张图片,界面如下。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0054_0001.jpg?sign=1739288941-D9rCN5UFtk00pjAi3JmxT1I0XLck9cr0-0-cbcd42f70f0aaa283a84853dc6af4c5f)
将我们需要自定义的识别图置于取景框内,点击Button便可识别出Cube,将识别图移出摄像头取景范围,模型消失,再次扫描刚才的识别图,依然出现模型。
![](https://epubservercos.yuewen.com/BEF413/6218450103654901/epubprivate/OEBPS/Images/figure_0054_0002.jpg?sign=1739288941-E1vpntjpyYzZtNLFgf8GcYwJgZjOsMfz-0-5e4e8fcfb1b0c02b3c7a4b233554f079)
至此,Vuforia的自定义目标识别介绍完毕,大家可以根据自己的需求发挥想象力,制作出属于自己的炫酷AR产品。