如何在跟踪平面上将对象对准SparkAR Studio 98中的相机?

问题描述

我正在寻找一种通过SparkAR Studio 98中的脚本将被跟踪平面上的场景对象朝向摄像机定向的方法。 这听起来微不足道,但是我很难找到摄影机的世界位置,然后从中产生旋转,可以将其应用于观察摄影机的对象。

我可以在跟踪的平面层次结构中使用它,以便一个对象始终可以看到另一个对象,但是由于相机位于该层次结构和坐标系之外,因此对我没有帮助。

与往常一样,我一直在努力应对SparkAR API的反应性,以及事物分散在多个坐标系中并且很难在网上找到信息并很快过时的事实。 我的代码如下:

const Scene = require('Scene');
const R = require('Reactive');
export const Diagnostics = require('Diagnostics');

(async function () {
    Diagnostics.log("Filter activated");

    const objectToOrient = await Scene.root.findFirst('object');
    const objectParent= await Scene.root.findFirst('objectParent');
    const target = await Scene.root.findFirst('target');

    const lookAtPt = R.point(
        target.worldTransform.x,target.worldTransform.y,target.worldTransform.z);

    const lookAtTransform = objectParent.transform.lookAt(lookAtPt);
})();

为了向读者说明概念,我设置了以下场景:

enter image description here

一旦跟踪了基础平面,就会出现“ S”。然后,它与被跟踪的平面一起保持在原位。 然后,它应始终朝相机/设备/用户旋转。 谢谢!

解决方法

工作原理

浪费了一个周末,在放弃十分钟后,我终于找到了解决方法。实际的解决方案是如此简单,以至于让我痛苦地发布它,但事情就到此为止。

使用脚本,我仅将objectToOrient的旋转绑定到摄像机的旋转。就是这样。

const S = require('Scene');
const R = require('Reactive');
const D = require('Diagnostics');

// Enter look-at-target and object that needs to look at the target here
const objectName = 'lookAtObject';
const pivotName = 'pivot';
const targetName = 'Camera';
// const targetName = 'target';

(async function () {
    D.log("Filter activated");

    const [object,pivot,target] = await Promise.all([
        S.root.findFirst(objectName),S.root.findFirst(pivotName),S.root.findFirst(targetName)])
        .catch((error) => D.log(error.message));

    const deviceTransform = target.worldTransform;
    const pivotTransform = pivot.worldTransform;

    object.transform.rotation = deviceTransform.rotation;
    object.transform.position = pivotTransform.position;

    D.log("End of Log");
})();

在删除我的旧代码的两页之后,我还尝试使用补丁程序来复制此代码,但是将DeviceMotion补丁程序插入对象的3D旋转实际上会在我的android手机上产生不同且违反直觉的行为。也许补丁中的轮换与设备实际生成的轮换没有对齐,我会对对此主题的评论非常感兴趣。

无法正常工作

考虑到我像以前在这里发布的那样通过角度计算和世界变换解决了问题之后,它实际上没有用,我不得不再花两天时间在此上,进行故障排除并在计算中寻找问题使用手动计算的矢量,四元数或SparkAR提供的lookAt的所有变体之间的角度。

在我了解DeviceMotion模块的过程中,我希望该模块可以解决无法将摄像机的世界位置更新到场景中的问题。我想使用此位置来计算两个向量之间的角度差,然后从该角度旋转对象。像大多数解决方案一样,它可以在编辑器中完美运行,但不能在我的手机上运行。 不幸的是,它不会在场景中更新一次。经过一些调试后,我发现DeviceMotion.worldTransform实际上仅包含旋转,但在访问其位置坐标时不会引发错误。 我发现这个程序包非常令人沮丧。