Unity AR应用(人脸识别)手把手教程

news/2024/11/29 2:38:52/

Unity官方有个教程,照着一步一步操作,就能做出一个典型的AR应用:人脸识别+虚拟穿戴。其实,人脸识别和跟踪都是设备平台实现的功能(如Android的ARCore或iOS的ARKit),在Unity里只是进行配置工作。真是难以置信:整个制作过程不需要写任何代码!下面记录一些关键步骤。

  1. 使用官方模板配置一个AR初始工程(完整教程)。步骤如下:

  1. 下载模板工程,将AR_Template_Zip.zip在本地解压,然后将其中的AR_Template_Project文件夹拷贝到你的工作区,并将文件夹改名为你想要的工程名,比如ARFace。在主菜单Edit | Project Settings |Player,同步修改Product Name。

  1. 运行Unity Hub,打开上述ARFace工程。模板工程使用的编辑器版本是2021.3.1f1,如果本地安装的版本比它更新,直接选择你本地安装的编辑器打开即可。

  1. 必要的检查:打开主菜单的Window | Package Manager,在Packages: In Project下,确保AR Foundation、ARCore XR Plugin、ARKit XR Plugin、XR Plugin Management四个组件都已经安装好了。很喜欢下面这张图,一目了然:

  1. 创建一个新场景。打开主菜单的 File | New Scene,选择“AR”模板,创建后选择 File | Save As 保存到Assets\Scenes目录下。在Hierarchy里可以看到3个关键的GameObject:ARSession Origin、AR Camera和ARSession。其中,AR Session Origin代表设备在真实世界里的原点,也就是摄像头的位置,因此它包含AR Camera——选中AR Camera后,在Inspector面板找到AR Camera Manager (Script),通过Facing Direction可以指定使用前置摄像头(User)还是后置摄像头(World)。ARSession是应用与设备之间的通信渠道。

  1. 切换打包平台。打开主菜单的 File | BuildSettings,选择Android平台,勾选“DevelopmentBuild”和“Script Debugging”,然后点击“SwitchPlatform”。记得点一下“Add Open Scenes”。

  1. 打包验证。可以自动安装到手机上看看效果。执行菜单命令 File| Build And Run。第一次打包耗时比较长,可能超过30分钟哦。

  1. 人脸识别怎么做?步骤如下:

  1. 将上述样板工程中的Cube对象删除。

  1. 下载演示资源,将Basic_Face_Filter_Assets.zip在本地解压。然后在Project窗口的Assets目录下,右键菜单选择 Import Package | Custompackage,找到BasicFaceFilterAssets.unitypackage后打开。

  1. 创建AR Default Face预制体,用于覆盖在真实世界的人脸上。在Hierarchy窗口中,右键菜单选择 XR | AR DefaultFace。然后浏览Assets |_BasicFaceFilter |Materials目录,将其中的FaceDebug MAT拖到Hierarchy窗口的AR Default Face上。浏览至Project窗口的Assets| _BasicFaceFilter| Prefabs,将Hierarchy窗口的AR Default Face拖到这里进行保存。

  1. 配置AR Face Manager。选中Hierarchy里的AR Session Origin,需要告诉它,当在真实世界中检测到人脸后使用什么素材去覆盖。在Inspector面板中,点击Add Component按钮,找到AR Face Manager后将其加入。然后将 Project | Assets |_BasicFaceFilter | Prefab下的AR Default Face预制体拖到AR Face Manager的Face Prefab。

  1. 打包,跑在手机上看看效果吧。

  1. 进阶:使用UnityAR Foundation提供的人脸3D模型进行辅助设计。AR Default Face预制体有个问题:它只有在程序运行并且检测到人脸时才显示出来。这给“虚拟穿戴”的设计带来了不便!解决办法就是使用Unity的人脸模型来进行辅助设计。步骤如下:

  1. 浏览至Project窗口的Assets| _BasicFaceFilter| Prefabs,将Face_Reference_Mesh预制体拖到Hierarchy窗口里。

  1. 以Face_Reference_Mesh为演练场,比如给它调制一个新的人脸素材,调试完毕后,还是需要把新素材应用到AR Default Face才行:在Project窗口的Assets | _BasicFaceFilter | Prefabs下双击ARDefault Face预制体,在Inspector面板找到MeshRenderer组件,给Materials区域的Element0指定为新素材。

  1. 记住:Face_Reference_Mesh只是演练场,正式应用中是不需要它的,所以要在它的Inspector面板中将顶部的勾选去除。

  1. 进阶:怎么实现虚拟穿戴,比如在头顶戴上帽子?步骤如下:

  1. 给AR Default Face添加一个人脸3D模型进行辅助设计。浏览至Project窗口的Assets| _BasicFaceFilter| Prefabs,双击AR Default Face,然后将Face_Reference_Mesh预制体拖到Hierarchy窗口里。

  1. 将要穿戴的虚拟物件(比如帽子Props_HiHat预制体)拖到Hierarchy窗口的AR Default Face上,使其成为AR Default Face的子组件。然后调整该物件的尺寸以及相对于人脸的位置。设计完成后,记得将Face_Reference_Mesh隐藏,因为它只是一个辅助工具。然后将ARDefault Face预制体保存!

  1. 【可选】给穿戴物件配上动画。进入AR Default Face预制体的编辑界面,在Hierarchy窗口中选择虚拟物件(比如帽子),进入其编辑界面,在Inspector面板找到Animator组件,为Controller属性指定一个动画如Props_HiHat,然后保存。


http://www.ppmy.cn/news/32681.html

相关文章

RK3568平台开发系列讲解(网络篇)使用socket建立TCP连接

文章目录 一、服务端1.1、socket: 创建套接字1.2、bind: 设定电话号码1.3、listen: 接上电话线,一切准备就绪1.4、accept: 电话铃响起了二、客户端三、TCP 三次握手🚀返回专栏总目录 沉淀、分享、成长,让自己和他人都能有所收获!😄 📢本篇我们将分别从服务端和客户端的…

计算机网络的基本组成

计算机网络是由多个计算机、服务器、网络设备(如路由器、交换机、集线器等)通过各种通信线路(如有线、无线、光纤等)和协议(如TCP/IP、HTTP、FTP等)互相连接组成的复杂系统,它们能够在物理层、数…

普通Java工程师 VS 优秀架构师

1 核心能力 1.1 要成为一名优秀的Java架构师 只懂技术还远远不够,懂技术/懂业务/懂管理的综合型人才,才是技术团队中的绝对核心。 不仅仅是架构师,所有的技术高端岗位,对人才的综合能力都有较高的标准。 架构路线的总设计师 规…

朋友去华为面试,轻松拿到26K的Offer,羡慕了......

最近有朋友去华为面试,面试前后进行了20天左右,包含4轮电话面试、1轮笔试、1轮主管视频面试、1轮hr视频面试。 据他所说,80%的人都会栽在第一轮面试,要不是他面试前做足准备,估计都坚持不完后面几轮面试。 其实&…

ChatGPT-4震撼发布

3月15日消息,美国当地时间周二,人工智能研究公司OpenAI发布了其下一代大型语言模型GPT-4,这是其支持ChatGPT和新必应等应用程序的最新AI大型语言模型。该公司表示,该模型在许多专业测试中的表现超出了“人类水平”。GPT-4, 相较于…

chrome快捷键

Ctrl T:打开新标签页。Ctrl W:关闭当前标签页。Ctrl Shift T:重新打开最近关闭的标签页。Ctrl Tab:在打开的标签页之间切换。Ctrl Shift Tab:在打开的标签页之间反向切换。Ctrl N:打开新窗口。Ctrl…

Kaggle实战入门:泰坦尼克号生生还预测

Kaggle实战入门:泰坦尼克号生生还预测1. 加载数据2. 特征工程3. 模型训练4. 模型部署泰坦尼克号(Titanic),又称铁达尼号,是当时世界上体积最庞大、内部设施最豪华的客运轮船,有“永不沉没”的美誉&#xff…

推荐一款卸载软件的小工具-《UninstallToo》

目录 UninstallToo介绍 UninstallToo下载 UninstallToo使用 总结 UninstallToo介绍 Uninstall Tool 是一款可以用来替代“添加/删除程序”的工具。它允许您显示隐藏的安装程序,按名称过滤已安装程序的列表,强行写在程序,浏览注册表项目&a…