Unity 结合ARKit

主要类 UnityARCameraManager
调用顺序
//创建ARSerrion
m_session = UnityARSessionNativeInterface.GetARSessionNativeInterface();
//创建Configuration
ARKitWorldTrackingSessionConfiguration //6自由度

Paste_Image.png

ARKitSessionConfiguration //3自由度

Paste_Image.png

config.planeDetection //设置的话 会根据场景来寻找平面 ARKit会自动添加一个ARPlaneAnchor对象到该session
config.alignment //AR坐标系与真实坐标系转换
UnityARAlignmentGravity

Paste_Image.png

UnityARAlignmentGravityAndHeading

Paste_Image.png

UnityARAlignmentCamera
只根据当前设备的位置进行显示

config.enableLightEstimation //开启光照捕捉
config.getPointCloudData //获得帧数据点云信息

m_session.RunWithConfig(config); //运行
m_session.RunWithConfigAndOptions(config, option) //重置设备的角度位置信息

//设置AR场景中的虚拟摄像机位置
UnityARCamera scamera = new UnityARCamera ();
scamera.worldTransform = new UnityARMatrix4x4 (new Vector4 (1, 0, 0, 0), new Vector4 (0, 1, 0, 0), new Vector4 (0, 0, 1, 0), new Vector4 (0, 0, 0, 1));
Matrix4x4 projMat = Matrix4x4.Perspective (60.0f, 1.33f, 0.1f, 30.0f);
scamera.projectionMatrix = new UnityARMatrix4x4 (projMat.GetColumn(0),projMat.GetColumn(1),projMat.GetColumn(2),projMat.GetColumn(3));

    UnityARSessionNativeInterface.SetStaticCamera (scamera);

获得ar场景中设备的位置
在Update中调用m_session.GetCameraPose() 获得虚拟摄像机的位置 经过计算 转换成实际的 摄像机位置 设置到MainCamera上

在MainCamera中添加UnityARVideo脚本 并设置Clearmaterial为YUVMaterial 改脚本会将ARKit反悔的图片数据根据材质进行合成

调用UnityARSessionNativeInterface.GetARSessionNativeInterface ().HitTest（ARPoint, ARHitTestResultType）//由摄像机发射射线 将碰撞的anchor由近至远返回
ARHitTestResultType有五种碰撞类型
/** Result type from intersecting the nearest feature point. */
ARHitTestResultTypeFeaturePoint = (1 << 0), //基本的anchor点

    /** Result type from detecting and intersecting a new horizontal plane. */
    ARHitTestResultTypeHorizontalPlane  = (1 << 1), //无限的预估水平平面

    /** Result type from detecting and intersecting a new vertical plane. */
    ARHitTestResultTypeVerticalPlane    = (1 << 2), //无限的预估垂直平面

    /** Result type from intersecting with an existing plane anchor. */
    ARHitTestResultTypeExistingPlane    = (1 << 3), //无限范围的真实平面

    /** Result type from intersecting with an existing plane anchor, taking into account the plane's extent. */
    ARHitTestResultTypeExistingPlaneUsingExtent  = ( 1 << 4) //实际范围的真实平面

Paste_Image.png

如果之前config中设置平面捕捉（planeDetection ） 可以通过回调UnityARSessionNativeInterface.ARAnchorAddedEvent, UnityARSessionNativeInterface.ARAnchorUpdatedEvent, and UnityARSessionNativeInterface.ARAnchorRemovedEvent. 获得设置ARPlaneAnchor 信息
demo中是在UnityARAnchorManager中进行了实现

如果想要获得帧数据 添加UnityARSessionNativeInterface.ARFrameUpdatedEvent 回调 demo中是在PointCloudParticleExample中进行实现

如果设置了获取光照信息 可以通过arcamera.lightEstimation.ambientIntensity; 来进行获取 demo中在UnityARAmbient中 进行了设置

UnityARUserAnchorComponent。cs中 介绍了如何添加自定义Anchor 这样我们就可以在自定义的anchor平面上 使用session进行操作
UnityARSessionNativeInterface.ARSessionInterruptedEvent 添加session中断回调
UnityARSessionNativeInterface.ARSessionTrackingChanged 追踪中断回调即ARCamera tracking state