简单VR照片 使用陀螺仪、姿态角(Roll、Pitch、Yaw )、四元数

最近在做一个类似VR照片的demo,跟全景图片也很像,只是VR照片与全景720度显示,我只做了180度。但我发现他们实现的原理有一丝相似,希望可以给一些想入行AR、VR的朋友一些提示吧。

要想根据用户摇晃手机的行为轨迹展示相应的场景,那必须要使用移动端的陀螺仪、加速器等传感器来做相应的协调。现在的移动端已经提供了很多传感器,你可以根据自己的需要获取相应的数据。

刚开始的时候,我使用传感器提供的姿态角,也称为欧拉角:pitch yaw roll 来显示。这种 姿态角/欧拉角 比较常用在航空上,无人机技术应该也使用到了这个技术点。我用飞机的模型来展示一下这三个角,就一目了然了(不同作者使用不同的坐标系,使用哪种坐标系,个人而定。):

图一

姿态角/欧拉角 在数学上理解起来会有点抽象,我也是稍理解一点。在维基百科上,欧拉角定义为:用来描述刚体在三维欧几里得空间的取向,对于任何参考系,一个刚体的取向,是依照顺序,从这参考系,做三个欧拉角的旋转而设定的。有兴趣了解得深入一点,可以参考(需FQ):

https://zh.wikipedia.org/wiki/%E6%AC%A7%E6%8B%89%E8%A7%92

我们也可以简单理解这三个角代表什么意思:

1、俯仰角θ(pitch):围绕Y轴旋转的。

图二

2、偏航角ψ(yaw):围绕Z轴旋转的角度。

图三

3、滚转角Φ(roll):围绕X轴旋转的角度。

图四

手机的坐标系:

手机定义的坐标系统:X轴是水平且指向右边,Y轴是垂直且指向前方,Z轴指向屏幕的正面正上方。

当手机左右摇摆时(绕 y 轴旋转),得到变化的 滚转角Φ(roll),范围为 (-90 to 90)

当手机前后摇摆时(绕 x 轴旋转),得到变化的 俯仰角θ(pitch),范围为 (-180 to 180)

当手机横屏转换成竖屏或竖屏转换成横屏时(绕 z 轴旋转),即得到变化的 偏航角ψ(yaw)。

当手机旋转得到相应的角度时,我们把屏幕的图片替换成相应角度的图片,这让你感觉身临其境,屏幕里的场景会跟着我们视觉和谐变化,这就是VR大概实现的原理吧。

Android提供了类似这个 姿态角/欧拉角 的数据,但两者有些区别,Android 把 偏航角ψ(yaw)定义为方位角 Azimuth。具体可查看Android官方文档:https://developer.android.google.cn/reference/android/hardware/SensorEvent.html#values

接收的传感器类型为:Sensor.TYPE_ORIENTATION (Android官方已经摈弃,换了其它方法来获取)

使用这种方式去获取的数据有些波动,当拿着手机不动的时候,数据有时变化也比较大,所以后期我改用了 四元数 来处理这个问题。后来听说了一个方案,通过滤波方法,可以把 姿态角/欧拉角 一些波动比较大的数据过滤点, 得到的数据就比较平滑了。(这个方式,我还没有去试,大家可以去了解了解)

使用 “四元数” 也可以实现。四元数理解起来也很抽象:简单的超复数,是复数的不可交换延伸。

我是这么简单理解:我们都知道向量,向量是用来形容一个二维空间的轨迹与方向,形象化地表示为带箭头的线段。四元数则表示为在一个四维空间的轨迹与方向。

来看一个四元数的表现形式:

公式一

这是 A 到 B 的四元数表示,由四个元素组成的数组。我主要讲一些实现方法,里面有一些名词的含义,需要大家找其它的资料慢慢参透。

我们再来看一个公式,x、y、z轴的偏移量分别为:

公式二

由该公式我们看得出,只要知道一个四元数的值, 我们就能算出 A 到 B 的x、y、z轴的偏移量。

我们从陀螺仪传感器获得的四元数数据,是相对于手机平放在桌面的 xyz 轴的偏移量,我们需要转换成相对上一个位置的偏移量,然后根据偏移量更换相应的图片。

现在我们看一下,怎么获取相对的偏移量:

在平面二维向量中,我们知道向量的运算: 向量AC = 向量AB + 向量BC

公式三

那么在四元数中,我们假设从传感器获取到

第一个 四元数为 

假设A点原点,即手机平放在桌面水平位置上。第二个四元数为:

我们需要得到四元数:

这样才能算出B 到C 的相对 xyz 轴相对位移。通过下面公式可以得到

公式四

现在知道 

由下面公式可以得到:

公式五

从A到B的 四元数 转换成 B到A 的四元数公式,只需把第二、第三、第四个元素取负。

知道了

我们用 公式四 得出 ,然后通过公式二求出 xyz 轴的偏移量。

四元数 x 轴的偏移量 与 欧拉角的俯仰角θ(pitch)类似,都是指手机竖屏时,左右摇摆的数值。

四元数 y 轴的偏移量 与 欧拉角的滚转角Φ(roll)类似,都是指手机竖屏时,前后摇摆的数值。

四元数 z 轴的偏移量 与 欧拉角的偏航角ψ(yaw)类似,都是指手机竖屏时,左右旋转的数值。

在移动端比较常用到 x、y轴偏移量,就是手机左右摇摆与前后摇摆间的偏移。

我做了一个Android demo,用的就是四元数 实现方案,通过四元数得到的y轴偏移量,不断替换图片。

<-------------------------------

当手机横屏,向左倾斜的时候,就会看到右边的视野。也就是判断y轴的相对偏移量,替换不同角度的图片。(gif 图做得有些卡顿,demo里的例子就平滑多了)

-------------------------------->

当手机横屏,向右倾斜的时候,就会看到左边的视野。

demo 链接:https://github.com/xiaoxiaoqingyi/VRPhoto

时间: 2024-12-11 19:02:59

简单VR照片 使用陀螺仪、姿态角(Roll、Pitch、Yaw )、四元数的相关文章

[UE4]roll pitch yaw

UE4中的定义: 一.Roll,绕着X轴旋转的角度 二.Pitch,绕着Y轴旋转的角度 三.Yaw,绕着Z轴旋转的角度 Rotator 一.(Roll,Pitch,Yaw) 二.Rotator(0,0,0)等价于Vector(1,0,0) 三.Rotator和Vector可以相互转换 原文地址:https://www.cnblogs.com/timy/p/8973341.html

几张图理解Roll, Pitch, Yaw的含义

Roll:翻滚 Pitch:俯仰 Yaw:偏航 参考资料中有很直观的几张图,解释了三个角的含义. 参考资料: [1]. 飛機的三軸名稱及操控動作---PITCH, ROLL & YAW

加速度计、磁力计求初始姿态角

1.几个基本概念. 地理坐标系:北东地.北为X轴.东为Y轴.地为Z轴. 机体坐标系:见下图. 姿态角:我的理解是,roll角是Zb在ZOY平面与Z轴的夹角.pitch角是Zb在ZOX平面与Z轴的夹角.yaw角是Xb在XOY平面与X轴的夹角. 旋转矩阵:地理坐标系到机体坐标系的转换矩阵.旋转矩阵为正交阵,逆即转置. 传感器:都是基于机体坐标系的.加速度计测三轴的加速度,磁力计测三轴的磁感应强度,陀螺仪测三轴的角速度.注意角速度的定义,方向是沿着三轴的.得到姿态角主要靠陀螺仪测得的角速度积分,但存在

Pitch,Yaw,Roll的概念

在航空中,pitch, yaw, roll下图所示. pitch是围绕X轴旋转,也叫做俯仰角. yaw是围绕Y轴旋转,也叫偏航角. roll是围绕Z轴旋转,也叫翻滚角.     在3D系统中,假设视点为原点,则视点坐标系如下图所示,通常z轴的负方向是视点方向(OpenGL).

pitch yaw roll是什么

三维空间的右手笛卡尔坐标如图1所示. 图1 在航空中,pitch, yaw, roll如图2所示. pitch是围绕X轴旋转,也叫做俯仰角,如图3所示. yaw是围绕Y轴旋转,也叫偏航角,如图4所示. roll是围绕Z轴旋转,也叫翻滚角,如图5所示. 图2 图3 图4 pitch yaw roll是什么

pitch, yaw, roll

在航空中,pitch, yaw, roll下图所示. pitch是围绕X轴旋转,也叫做俯仰角. yaw是围绕Y轴旋转,也叫偏航角. roll是围绕Z轴旋转,也叫翻滚角. 原文地址:https://www.cnblogs.com/uestcman/p/9277913.html

简单制作照片双重曝光效果PS教程

双重曝光就是在同一底片上进行多次曝光成像,形成画面重叠的效果,看起来很高大上,其实只需几步,你也可以用PS制作出双重曝光的效果. 首先需要的素材图就只有两张,一张人物,一张风景. 步骤①:创建打开一张任务头像 先在PS中打开人物图片,用“快速选择工具”选出人物轮廓,(调整画笔大小点住左键在人物上涂抹就行,选区如果超出了要减小选区点住alt键涂抹超出区域即可) 步骤②:调整边缘画笔工具 为了使我们选出的人物轮廓边缘更自然,点击左上方的“选择并遮住…”然后将平滑拉到90,也可以再用左边工具栏的“调整

ionic 简单的照片查看页面

近期项目有个需求,要扫码查看图片和地图,既然是手机端,又没什么交互,那就还是用ionic/Angular来开发吧 从其它项目里把文件夹拷过来,node_module文件夹保留,把其它项目的业务逻辑和界面删除,保存公共的部份,tab分成图片查看和地图浏览,空框架跑起来正常 1.node_module,用npm install跑一下有些警告,但还是能用 2.图片直接用<img>或<ion-img>只能普通展示,不支持双击放大或手指缩放,还有这种事? 3.网上找了半天,有个叫[ionic

理解传说中的roll、yaw、pitch

三维中 Yaw, pitch and roll 的区分(图片)                    yaw 航偏                                         pitch倾斜/俯仰                             roll横滚 假定Z轴正方向为前进方向,则有下面的示意图来解释这三个角元素的意义: yaw():航向,将物体绕Y轴旋转(localRotationY) pitch():俯仰,将物体绕X轴旋转(localRotationX) r