slam相关观点,欢迎补充

2024-04-23 00:36
文章标签 补充 slam 相关 观点 欢迎

本文主要是介绍slam相关观点,欢迎补充,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

多模态slam 多模态包括:视觉、激光、文本、声音等等
深度学习与slam融合:特征提取、重定位、神经网络辐射场等。

神经辐射场引入了importance Sampling(重要性采样)和Positional Encoding(位置编码),使得三维重建的质量有了显著提升;同时NeRF神经渲染算法减少了传统三维重建中生成的伪影,在大多数情况下效果都比传统算法好。目前重建图像质量最好的是Mip-NeRF360。

将slam技术融合到深度学习中,更加容易使得所有算法能够统一到一个框架中,方便不同算法之间的数据传输和通信。比如建好的地图可以用于语义标注,从而接入BEV感知中训练,又或者可以生成Occupancy网格去做路径规划和智能体控制。

rgbd相机的量程一般几米;lidar量程一般几十米至几百米。
具身智能
slam与大模型的结合
3dgs(3D高斯辐射场),基于图像的三维重建方法,直白的就是:对现实物体或者场景拍照片,可以给你训练成一个场景模型;并做渲染。 基于3dgs的slam 的优势:
(1)快速渲染和丰富的优化。Gaussian Splatting 可以以高达400fps的速度渲染,使其比隐式表达更快地可视化和优化。
(2)有明确空间的建图。现有地图的空间边界可以通过在之前观察到的部分场景中添加高斯函数来控制。给定一个新的图像帧,可以通过渲染剪影识别场景的哪些部分是新内容(在地图的边界感之外)。这对于Tracking 任务很重要,因为只想将已经建好图的部分与新图像帧进行比较。隐式表达就不行,因为在对未知区域建图优化的时候,全局的优化会影响到神经网络。
(3)显示地图。可以通过添加更多的Gaussian 函数来任意地增加地图容量,而且这种显式的表达让我们可以编辑场景中的某些部分,同时仍允许真实的渲染。隐式方法不能轻易地增加其容量或编辑其所表示的场景。

视觉语义slam

lidar+rtk融合用的较多,纯视觉slam效果不佳。

集群、无人机协同、多机协同搜索。

基于Nerf的slam算法采用全局地图和图像重建损失函数,通过可微分渲染捕获稠密的光度信息,具有高保真度。但是用Implicit Neural Representation(隐式神经表达)对场景建模存在一些问题:
(1)query过程(可以理解为射线渲染)需要大量的采样,渲染方法成本高,
(2)用了大型多层MLP,运算量大,占用内存高,
(3)不容易编辑,不能显式地对空间几何建模,
(4)导致“遗忘”问题。

这篇关于slam相关观点,欢迎补充的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/927305

相关文章

CSS3中的字体及相关属性详解

《CSS3中的字体及相关属性详解》:本文主要介绍了CSS3中的字体及相关属性,详细内容请阅读本文,希望能对你有所帮助... 字体网页字体的三个来源:用户机器上安装的字体,放心使用。保存在第三方网站上的字体,例如Typekit和Google,可以link标签链接到你的页面上。保存在你自己Web服务器上的字

解决tomcat启动时报Junit相关错误java.lang.ClassNotFoundException: org.junit.Test问题

《解决tomcat启动时报Junit相关错误java.lang.ClassNotFoundException:org.junit.Test问题》:本文主要介绍解决tomcat启动时报Junit相... 目录tomcat启动时报Junit相关错误Java.lang.ClassNotFoundException

Maven中引入 springboot 相关依赖的方式(最新推荐)

《Maven中引入springboot相关依赖的方式(最新推荐)》:本文主要介绍Maven中引入springboot相关依赖的方式(最新推荐),本文给大家介绍的非常详细,对大家的学习或工作具有... 目录Maven中引入 springboot 相关依赖的方式1. 不使用版本管理(不推荐)2、使用版本管理(推

Python的time模块一些常用功能(各种与时间相关的函数)

《Python的time模块一些常用功能(各种与时间相关的函数)》Python的time模块提供了各种与时间相关的函数,包括获取当前时间、处理时间间隔、执行时间测量等,:本文主要介绍Python的... 目录1. 获取当前时间2. 时间格式化3. 延时执行4. 时间戳运算5. 计算代码执行时间6. 转换为指

JavaScript Array.from及其相关用法详解(示例演示)

《JavaScriptArray.from及其相关用法详解(示例演示)》Array.from方法是ES6引入的一个静态方法,用于从类数组对象或可迭代对象创建一个新的数组实例,本文将详细介绍Array... 目录一、Array.from 方法概述1. 方法介绍2. 示例演示二、结合实际场景的使用1. 初始化二

Redis的Zset类型及相关命令详细讲解

《Redis的Zset类型及相关命令详细讲解》:本文主要介绍Redis的Zset类型及相关命令的相关资料,有序集合Zset是一种Redis数据结构,它类似于集合Set,但每个元素都有一个关联的分数... 目录Zset简介ZADDZCARDZCOUNTZRANGEZREVRANGEZRANGEBYSCOREZ

Linux使用fdisk进行磁盘的相关操作

《Linux使用fdisk进行磁盘的相关操作》fdisk命令是Linux中用于管理磁盘分区的强大文本实用程序,这篇文章主要为大家详细介绍了如何使用fdisk进行磁盘的相关操作,需要的可以了解下... 目录简介基本语法示例用法列出所有分区查看指定磁盘的区分管理指定的磁盘进入交互式模式创建一个新的分区删除一个存

关于Maven生命周期相关命令演示

《关于Maven生命周期相关命令演示》Maven的生命周期分为Clean、Default和Site三个主要阶段,每个阶段包含多个关键步骤,如清理、编译、测试、打包等,通过执行相应的Maven命令,可以... 目录1. Maven 生命周期概述1.1 Clean Lifecycle1.2 Default Li

numpy求解线性代数相关问题

《numpy求解线性代数相关问题》本文主要介绍了numpy求解线性代数相关问题,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧... 在numpy中有numpy.array类型和numpy.mat类型,前者是数组类型,后者是矩阵类型。数组

Redis的Hash类型及相关命令小结

《Redis的Hash类型及相关命令小结》edisHash是一种数据结构,用于存储字段和值的映射关系,本文就来介绍一下Redis的Hash类型及相关命令小结,具有一定的参考价值,感兴趣的可以了解一下... 目录HSETHGETHEXISTSHDELHKEYSHVALSHGETALLHMGETHLENHSET