RoNIN:基于残差网络的IMU传感器数据用于运动估计和定位(CVPR-2019)

本文主要是介绍RoNIN:基于残差网络的IMU传感器数据用于运动估计和定位(CVPR-2019),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

RoNIN:基于残差网络的IMU传感器数据用于运动估计和定位(CVPR-2019)

文章来源 RoNIN: Robust Neural Inertial Navigation in the Wild: Benchmark, Evaluations, and New Methods

1.文章概述

1.1 Main Idea

IMU传感器数据–>>深度网络–>>自然运动的轨迹
在这里插入图片描述

1.2 Main Contribution

  • 构建了一个新的数据集,包含来自100个人体物体的40小时以上的IMU传感器数据,在自然人体运动下具有真实的三维轨迹(是身体轨迹,不是IMU phone的轨迹)。
  • 提出了一种新的直接对IMU传感器数据进行处理的学习模式,对比了现有的最佳方法,能够取得较好的效果,在实际的测试数据是有显著改进。

2.The RoNIN dataset

2.1 数据说明

规模、多样性和可信度是构建下一代惯性导航数据库的三个关键因素,与目前最大的数据库oxiod相比:
规模(276个序列,3栋建筑)
多样性(100人,用了3台设备)
可信度(日常生活轨迹)
在这里插入图片描述

2.2数据采集

作者开发了一个用于数据收集的Android应用程序,它既可以安装在3D追踪设备上,也可以安装在IMU手机设备上。该应用程序允许一对3D追踪设备和IMU手机通过蓝牙连接起来,以实现粗略的时间同步和集中控制。

设备

  • 3D追踪器
    三星Galaxy S9和谷歌Pixel 2XL,使用来自STMicro的相同的lsm6dsl传感器。
  • IMU采集设备
    华硕Zenfone AR、使用InvenSense的icm20602 IMU传感器

标定设备

对所有传感器进行仔细校准,如陀螺仪偏差、加速度计偏差/标度灵敏度和磁强计偏差,以及每个数据序列。作者了使用经过校准的原始IMU数据,而不是系统提供的原始出数据,因为发现后者在不同制造商之间存在差异。

对加速度计的三轴偏差和标度灵敏度进行了标定。首先将智能手机静态地放置在不同的朝向上,标定参数是通过求解一个非线性优化问题得到的,通过给定这个优化问题的约束条件,即每个静态周期的加速度的平均值经修正后应接近重力加速度g,每部智能手机每天重新校准一次。

通过将智能手机静态放置10秒,可以有效地估计陀螺仪偏差,在此期间,将陀螺仪读数平均为偏差。同时在每个序列之前和之后执行这种校准。

时间同步

当通过蓝牙连接时,两个智能手机的系统时钟被粗略地同步。在每个序列之前,我们执行水平旋转,同时将两个电话刚性连接在一起。然后通过信号相关性估计精确的时间差。

空间对准

我们在屏幕上安装了两个电话屏幕,以便进行空间对齐。屏幕面向外部的手机是3D跟踪设备(绿色),而屏幕内的设备是imu手机(橙色)。zt和zi是两个设备的局部z轴,假设屏幕绝对平坦,它们彼此完全相反。gt和gi是两个局部帧中的重力分量。
在这里插入图片描述

修正 Ground-truth 漂移
地面真相轨迹和imu器件的定向都会随着时间的推移而漂移。作者设计了减少这种漂移误差的程序。
我们依靠Android的传感器融合来实现IMU手机的其他功能,即使用应用程序而不使用磁力计。陀螺仪偏差是在每个序列之前估计的。我们利用[1]中提出的基于滤波的算法,利用地面真实信息进一步减少旋转漂移。标准运动学模型用于预测原始加速度和角速率的6自由度。来自3D跟踪设备的地面真值位置被用作测量,以过滤出最佳状态,即位置和方向,以及相应的不确定性。

当手机放在口袋或包中时,IMU手机的方向不可见(由于没有图像信息)。我们通过端点旋转漂移来近似评估质量,在这里我们执行与第2节中描述的相同的空间对齐,并计算预期方向和实际方向之间的角度,假设探戈的方向没有漂移。我们发现Android的传感器融合通常会在10分钟内漂移10到20度,而过滤会将其降低到5到10度。请注意,过滤后的方向仅用于训练,我们在测试期间完全依赖于Android设备的game rotation向量。

注意
在数据采集之前,对空间和时间内的两个设备进行偏置和对齐。在数据采集之后,也会再次对两个IMU传感器设备进行空间对齐,以评估IMU设备定向中的累积误差。
将数据集分为两组:第1组85人,第2组其余15人:第1组进一步分为训练、验证和测试集,第2组用来测试模型的泛化能力。

3.网络结构

网络结构图

4.参考文献

[1] A. Solin, S. Cortes, E. Rahtu, and J. Kannala. Inertial odometry on handheld smartphones. In 2018 21st International Conference on Information Fusion (FUSION), pages 1–5. IEEE,2018.

转载请注明出处,欢迎交流讨论、纠错,敬请留言!

这篇关于RoNIN:基于残差网络的IMU传感器数据用于运动估计和定位(CVPR-2019)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/217778

相关文章

批量导入txt数据到的redis过程

《批量导入txt数据到的redis过程》用户通过将Redis命令逐行写入txt文件,利用管道模式运行客户端,成功执行批量删除以Product*匹配的Key操作,提高了数据清理效率... 目录批量导入txt数据到Redisjs把redis命令按一条 一行写到txt中管道命令运行redis客户端成功了批量删除k

SpringBoot多环境配置数据读取方式

《SpringBoot多环境配置数据读取方式》SpringBoot通过环境隔离机制,支持properties/yaml/yml多格式配置,结合@Value、Environment和@Configura... 目录一、多环境配置的核心思路二、3种配置文件格式详解2.1 properties格式(传统格式)1.

解决pandas无法读取csv文件数据的问题

《解决pandas无法读取csv文件数据的问题》本文讲述作者用Pandas读取CSV文件时因参数设置不当导致数据错位,通过调整delimiter和on_bad_lines参数最终解决问题,并强调正确参... 目录一、前言二、问题复现1. 问题2. 通过 on_bad_lines=‘warn’ 跳过异常数据3

C#监听txt文档获取新数据方式

《C#监听txt文档获取新数据方式》文章介绍通过监听txt文件获取最新数据,并实现开机自启动、禁用窗口关闭按钮、阻止Ctrl+C中断及防止程序退出等功能,代码整合于主函数中,供参考学习... 目录前言一、监听txt文档增加数据二、其他功能1. 设置开机自启动2. 禁止控制台窗口关闭按钮3. 阻止Ctrl +

java如何实现高并发场景下三级缓存的数据一致性

《java如何实现高并发场景下三级缓存的数据一致性》这篇文章主要为大家详细介绍了java如何实现高并发场景下三级缓存的数据一致性,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 下面代码是一个使用Java和Redisson实现的三级缓存服务,主要功能包括:1.缓存结构:本地缓存:使

在MySQL中实现冷热数据分离的方法及使用场景底层原理解析

《在MySQL中实现冷热数据分离的方法及使用场景底层原理解析》MySQL冷热数据分离通过分表/分区策略、数据归档和索引优化,将频繁访问的热数据与冷数据分开存储,提升查询效率并降低存储成本,适用于高并发... 目录实现冷热数据分离1. 分表策略2. 使用分区表3. 数据归档与迁移在mysql中实现冷热数据分

C#解析JSON数据全攻略指南

《C#解析JSON数据全攻略指南》这篇文章主要为大家详细介绍了使用C#解析JSON数据全攻略指南,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录一、为什么jsON是C#开发必修课?二、四步搞定网络JSON数据1. 获取数据 - HttpClient最佳实践2. 动态解析 - 快速

MyBatis-Plus通用中等、大量数据分批查询和处理方法

《MyBatis-Plus通用中等、大量数据分批查询和处理方法》文章介绍MyBatis-Plus分页查询处理,通过函数式接口与Lambda表达式实现通用逻辑,方法抽象但功能强大,建议扩展分批处理及流式... 目录函数式接口获取分页数据接口数据处理接口通用逻辑工具类使用方法简单查询自定义查询方法总结函数式接口

SQL中如何添加数据(常见方法及示例)

《SQL中如何添加数据(常见方法及示例)》SQL全称为StructuredQueryLanguage,是一种用于管理关系数据库的标准编程语言,下面给大家介绍SQL中如何添加数据,感兴趣的朋友一起看看吧... 目录在mysql中,有多种方法可以添加数据。以下是一些常见的方法及其示例。1. 使用INSERT I

Python使用vllm处理多模态数据的预处理技巧

《Python使用vllm处理多模态数据的预处理技巧》本文深入探讨了在Python环境下使用vLLM处理多模态数据的预处理技巧,我们将从基础概念出发,详细讲解文本、图像、音频等多模态数据的预处理方法,... 目录1. 背景介绍1.1 目的和范围1.2 预期读者1.3 文档结构概述1.4 术语表1.4.1 核