AR开发--(一)图片识别

2020-06-02 16:59:33 浏览数 (2)

这几天做AR的项目,所以用到了手势识别的功能,虽然之前已经通过相关的设计进行了相关的开发。但是本着技术的角度,我们需要更先进的技术支撑来满足以后需求。所以将代码贡献出来,作为参考!

摄像头淘宝货,28包邮!

那我们实现了什么功能? 第一:用户的手直接跟熊进行交互。 第二:点击多次后会有烟花喷洒 第三:在屏幕上位置能够不被后面的背景遮挡!

弊端: 第一:用户的交互是不可预知的。所以尽可能拓展用户点击效果的丰富性 第二:让熊实时跟随我们的手指移动,还没有实现。 第三:没有手势操作。不能够根据用户的手势进行更多的交互。

所以手势识别的必要性就展示出来了!我会在第二篇教程中一步一步教大家集成手势识别系统!

1、先说怎么实现这种效果:

我们使用的EasyAR SDK包。图片识别通过内置的案例进行复制,修改。核心就是内部的Json文本。

2、认知SDK

首先要了解SDK内部的核心代码脚本。

Paste_Image.png

此脚本中我自己添加了有一个bool值用来实现识别图片后,让模型的永留。

说说里面的方法: 首先根据目标寻找事件添加类似事件 在目标丢失事件中添加相关的类似事件 在目标加载事件中添加相关的类似事件 在目标不加载事件中添加相关类似事件

识别的本质实在Json中加载具体的图片,然后从SteamingAssets中获取里面图片的名字,这样就可以识别了!

Paste_Image.png

具体的SteamingAssets中添加了我们Json中的图片

紧接着给我们的游戏对象添加如下图脚本

Paste_Image.png

然后给其中添加我们的动画以及脚本控制,如果通过射线那么就需要添加碰撞器,关于碰撞器你可以查看我之前的Collider详解 关于射线检测可以加群找我获取相关资料(点击打开链接后面数字就是群号)

Paste_Image.png

然后运行(必须要有摄像头,淘宝自己找,20多,如果需要可以加群获取相关链接) 代码贴出如下

代码语言:javascript复制
  public Camera ARCamera;
    void Update () {
        if (Input.GetMouseButtonDown(0))
        {
            Ray ray = ARCamera.ScreenPointToRay(Input.mousePosition);
            RaycastHit hit;
            if(Physics.Raycast(ray, out hit))
            {
                if (hit.transform.tag == "Ground")
                {
                    Debug.Log(hit.point);
                    transform.position = new Vector3(hit.point.x,hit.point.y 25f,hit.point.z);
                }
            }
        }
    }
代码语言:javascript复制
using UnityEngine;

namespace EasyAR
{
    public class EasyImageTargetBehaviour : ImageTargetBehaviour
    {
        public bool isActive;
        protected override void Awake()
        {
            base.Awake();
            TargetFound  = OnTargetFound;
            TargetLost  = OnTargetLost;
            TargetLoad  = OnTargetLoad;
            TargetUnload  = OnTargetUnload;
        }

        protected override void Start()
        {
            base.Start();
            HideObjects(transform);
        }

        void HideObjects(Transform trans)
        {
            for (int i = 0; i < trans.childCount;   i)
                HideObjects(trans.GetChild(i));
            if (transform != trans)
                gameObject.SetActive(false);
        }

        void ShowObjects(Transform trans)
        {
            for (int i = 0; i < trans.childCount;   i)
                ShowObjects(trans.GetChild(i));
            if (transform != trans)
                gameObject.SetActive(true);
        }

        void OnTargetFound(ImageTargetBaseBehaviour behaviour)
        {
            ShowObjects(transform);
            isActive = true;
            Debug.Log("Found: "   Target.Id);
        }

        void OnTargetLost(ImageTargetBaseBehaviour behaviour)
        {
            if (isActive == false)
            {
                HideObjects(transform);
            }
            Debug.Log("Lost: "   Target.Id);
        }

        void OnTargetLoad(ImageTargetBaseBehaviour behaviour, ImageTrackerBaseBehaviour tracker, bool status)
        {
            Debug.Log("Load target ("   status   "): "   Target.Id   " ("   Target.Name   ") "   " -> "   tracker);
        }

        void OnTargetUnload(ImageTargetBaseBehaviour behaviour, ImageTrackerBaseBehaviour tracker, bool status)
        {
            Debug.Log("Unload target ("   status   "): "   Target.Id   " ("   Target.Name   ") "   " -> "   tracker);
        }
    }
}

0 人点赞