TUM数据集官方说明&&相应的评估文件evaluate_rpe.py和evaluate_ate.py的使用-程序员宅基地

技术标签: 自动驾驶  深度学习  人工智能  

一.TUM数据集使用方法

TUM数据集的格式解读地址:https://vision.in.tum.de/data/datasets/rgbd-dataset/file_formats
TUM的RGBD数据集地址: https://vision.in.tum.de/data/datasets/rgbd-dataset/download
文件格式

我们以以下格式提供来自Kinect的RGB-D数据集:
彩色图像和深度地图

我们以gzip格式的tar文件(TGZ)提供带有时间戳的颜色和深度图像。

彩色图像以PNG格式存储为640x480 8位RGB图像。
深度图存储为640x480的16位单色图像PNG格式。
颜色和深度图像已经使用PrimeSense的OpenNI驱动程序预先注册,也就是说,颜色和深度图像中的像素已经对应为1:1。
深度图像按5000的倍数进行缩放,即深度图像中的像素值为5000,对应的距离为相机1米,10000就是2米的距离等。像素值为0表示缺失值/无数据。

真实轨迹

我们将groundtruth轨迹提供为包含摄像机在固定坐标系中的平移和方向的文本文件。请注意,我们的自动评估工具也期望地面真相和估计轨迹都是这种格式。

文本文件中的每一行都包含一个姿势。
每一行的格式为’timestamp tx ty tz qx qy qz qw’
timestamp (float)给出了自Unix时代以来的秒数。
Tx ty tz(3浮动)给出彩色摄像机的光学中心相对于运动捕捉系统定义的世界原点的位置。
Qx qy qz qw(4浮动)给出了彩色摄像机的光学中心的方向,其形式是相对于由运动捕捉系统定义的世界原点的四元数。
该文件可能包含必须以“#”开头的注释。

Kinect固有摄像头校准

Kinect内置了基于高阶多项式翘曲函数的工厂校准。OpenNI驱动程序使用这种校准来校正图像,并将深度图像(由红外相机拍摄)记录到RGB图像中。因此,我们的数据集中的深度图像被重投影到彩色相机的帧中,这意味着深度图中的像素与彩色图像之间存在1:1的对应关系。

从2D图像到3D点云的转换过程如下。注意,焦距(fx/fy),光学中心(cx/cy),失真参数(d0-d4)和深度校正因子对于每个相机都是不同的。下面的Python代码演示了如何从像素坐标和深度值计算3D点:
注意,上面的脚本使用默认的(未校准的)内在参数。fr1和fr2数据集中使用的kinect的内在参数如下:(原文截图)
**Kinect固有摄像头校准**
注意,Freiburg 3 的颜色和红外图像都已经经过了未畸变处理,因此畸变参数均为零。原始的失真值可以在tgz文件中找到。

注意:我们建议使用ROS默认参数集(即不失真),因为预配深度图像的失真并非易事。
ROS袋

对于使用ROS的用户,我们还提供ROS包文件,其中包含彩色图像、单色图像、深度图像、相机信息、点云和变换——包括来自/world框架的groundtruth变换,所有这些都在一个文件中。包文件(ROS diamondback)包含以下消息主题:在这里插入图片描述

二.估文件evaluate_rpe.py和evaluate_ate.py的使用

1.文件下载地址
evaluate_rpe.py地址:

https://svncvpr.in.tum.de/cvpr-ros-pkg/trunk/rgbd_benchmark/rgbd_benchmark_tools/src/rgbd_benchmark_tools/evaluate_rpe.py

evaluate_ate.py 地址:

https://svncvpr.in.tum.de/cvpr-ros-pkg/trunk/rgbd_benchmark/rgbd_benchmark_tools/src/rgbd_benchmark_tools/evaluate_ate.py 

2.说明
翻译地址:https://vision.in.tum.de/data/datasets/rgbd-dataset/tools#evaluation

在对Kinect的摄像机轨迹进行估计并保存到文件后,我们需要通过与地面真实值的比较来评估估计轨迹中的误差。有不同的误差度量。两种比较突出的方法是绝对轨迹误差法(ATE)和相对位姿误差法(RPE)。
该ATE非常适合于测量视觉SLAM系统的性能。
相比之下,RPE非常适合于测量视觉里程计系统的漂移,例如每秒的漂移。

对于这两个指标,我们提供了可以在这里下载的自动化评估脚本。请注意,在我们的网站上还有一个在线版本。两个轨迹必须存储在一个文本文件中(格式:‘timestamp tx ty tz qx qy qz qw’,更多信息)。为了进行比较,我们提供了一组RGBD-SLAM的轨迹。

(1)绝对轨迹误差(ate)

绝对轨迹误差直接测量真实轨迹和估计轨迹之间的点差。作为预处理步骤,我们使用时间戳将估计的姿态与地面真实姿态关联起来。在此基础上,我们利用奇异值分解对真实轨迹和估计轨迹进行对齐。最后,我们计算每对姿势之间的差值,并输出这些差值的平均值/中值/标准差。可选地,脚本可以将两条轨迹绘制为png或pdf文件。

usage: evaluate_ate.py [-h] [--offset OFFSET] [--scale SCALE]
                       [--max_difference MAX_DIFFERENCE] [--save SAVE]
                       [--save_associations SAVE_ASSOCIATIONS] [--plot PLOT]
                       [--verbose]
                       first_file second_file

This script computes the absolute trajectory error from the ground truth
trajectory and the estimated trajectory.

positional arguments:
  first_file            first text file (format: timestamp tx ty tz qx qy qz
                        qw)
  second_file           second text file (format: timestamp tx ty tz qx qy qz
                        qw)

optional arguments:
  -h, --help            show this help message and exit
  --offset OFFSET       time offset added to the timestamps of the second file
                        (default: 0.0)
  --scale SCALE         scaling factor for the second trajectory (default:
                        1.0)
  --max_difference MAX_DIFFERENCE
                        maximally allowed time difference for matching entries
                        (default: 0.02)
  --save SAVE           save aligned second trajectory to disk (format: stamp2
                        x2 y2 z2)
  --save_associations SAVE_ASSOCIATIONS
                        save associated first and aligned second trajectory to
                        disk (format: stamp1 x1 y1 z1 stamp2 x2 y2 z2)
  --plot PLOT           plot the first and the aligned second trajectory to an
                        image (format: png)
  --verbose             print all evaluation data (otherwise, only the RMSE
                        absolute translational error in meters after alignment
                        will be printed)

(2)相对姿态误差(rpe)

为了计算相对姿态误差,我们提供了一个脚本“evaluate_rpe.py”。这个脚本计算时间戳对之间相对运动的误差。默认情况下,脚本会计算估计轨迹文件中所有时间戳对之间的误差。由于估计轨迹中时间戳对的数量是轨迹长度的二次元,因此将该集合向下采样到一个固定的数字(-max_pairs)是有意义的。或者,也可以选择使用固定的窗口大小(-fixed_delta)。在这种情况下,估计轨迹中的每个姿态都会根据窗口大小(-delta)和单位(-delta_unit)与之后的姿态相关联。这种评价技术对估计漂移是有用的。

usage: evaluate_rpe.py [-h] [--max_pairs MAX_PAIRS] [--fixed_delta]
                       [--delta DELTA] [--delta_unit DELTA_UNIT]
                       [--offset OFFSET] [--scale SCALE] [--save SAVE]
                       [--plot PLOT] [--verbose]
                       groundtruth_file estimated_file

This script computes the relative pose error from the ground truth trajectory
and the estimated trajectory.

positional arguments:
  groundtruth_file      ground-truth trajectory file (format: "timestamp tx ty
                        tz qx qy qz qw")
  estimated_file        estimated trajectory file (format: "timestamp tx ty tz
                        qx qy qz qw")

optional arguments:
  -h, --help            show this help message and exit
  --max_pairs MAX_PAIRS
                        maximum number of pose comparisons (default: 10000,
                        set to zero to disable downsampling)
  --fixed_delta         only consider pose pairs that have a distance of delta
                        delta_unit (e.g., for evaluating the drift per
                        second/meter/radian)
  --delta DELTA         delta for evaluation (default: 1.0)
  --delta_unit DELTA_UNIT
                        unit of delta (options: 's' for seconds, 'm' for
                        meters, 'rad' for radians, 'f' for frames; default:
                        's')
  --offset OFFSET       time offset between ground-truth and estimated
                        trajectory (default: 0.0)
  --scale SCALE         scaling factor for the estimated trajectory (default:
                        1.0)
  --save SAVE           text file to which the evaluation will be saved
                        (format: stamp_est0 stamp_est1 stamp_gt0 stamp_gt1
                        trans_error rot_error)
  --plot PLOT           plot the result to a file (requires --fixed_delta,
                        output format: png)
  --verbose             print all evaluation data (otherwise, only the mean
                        translational error measured in meters will be
                        printed)

3.实测使用EVO(参考文章:https://www.freesion.com/article/5474496382/

  1. evo_traj:直接画出轨迹

(1)单独绘制轨迹:evo_traj tum KeyFrameTrajectory.txt -p
(2)将多个轨迹画到一起 : evo_traj tum KeyFrameTrajectory.txt CameraTrajectory2.txt --ref CameraTrajectory2.txt -va -p
或者: evo_traj tum KeyFrameTrajectory.txt CameraTrajectory2.txt --ref KeyFrameTrajectory.txt -va -p
参考的基准轨迹不一样,所以这俩个命令绘制出的轨迹不完全一样;
其中ref是参考轨迹,-va是对齐后的详细信息,-p是画出图像

(3)也可以使用–plot_mode {xy,xz,yx,yz,zx,zy,xyz}来选择单独绘制某个平面的信息
如:evo_traj tum KeyFrameTrajectory.txt CameraTrajectory2.txt --ref KeyFrameTrajectory.txt -va -p --plot_mode=xy

  1. evo_ape:绝对位姿误差的计算

evo_ape tum KeyFrameTrajectory.txt KeyFrameTrajectory.txt -va -p
使用ape的时候无需给出–ref 的文件,tum 后第一个文件即为标准文件,也就是:evo_ape tum 真实.txt 测试.txt -va -p

  1. evo_rpe:相对位姿误差的计算

evo_rpe tum KeyFrameTrajectory.txt KeyFrameTrajectory.txt -va -p

使用rpe的时候无需给出–ref 的文件,tum 后第一个文件即为标准文件,也就是:evo_rpe tum 真实.txt 测试.txt -va -p

  1. 其他参数

将文件保存为其他类型的文件,可以使用如下句柄

–save_as_tum save trajectories in TUM format (as *.tum)
–save_as_kitti save poses in KITTI format (as *.kitti)
–save_as_bag save trajectories in ROS bag as .bag

保存图片 --save_plot “保存的路径”
合并轨迹 --merge
给出数据的最大时间戳差异 --t_max_diff “具体差异”

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/weixin_50508111/article/details/120687985

智能推荐

使用nginx解决浏览器跨域问题_nginx不停的xhr-程序员宅基地

文章浏览阅读1k次。通过使用ajax方法跨域请求是浏览器所不允许的,浏览器出于安全考虑是禁止的。警告信息如下:不过jQuery对跨域问题也有解决方案,使用jsonp的方式解决,方法如下:$.ajax({ async:false, url: 'http://www.mysite.com/demo.do', // 跨域URL ty..._nginx不停的xhr

在 Oracle 中配置 extproc 以访问 ST_Geometry-程序员宅基地

文章浏览阅读2k次。关于在 Oracle 中配置 extproc 以访问 ST_Geometry,也就是我们所说的 使用空间SQL 的方法,官方文档链接如下。http://desktop.arcgis.com/zh-cn/arcmap/latest/manage-data/gdbs-in-oracle/configure-oracle-extproc.htm其实简单总结一下,主要就分为以下几个步骤。..._extproc

Linux C++ gbk转为utf-8_linux c++ gbk->utf8-程序员宅基地

文章浏览阅读1.5w次。linux下没有上面的两个函数,需要使用函数 mbstowcs和wcstombsmbstowcs将多字节编码转换为宽字节编码wcstombs将宽字节编码转换为多字节编码这两个函数,转换过程中受到系统编码类型的影响,需要通过设置来设定转换前和转换后的编码类型。通过函数setlocale进行系统编码的设置。linux下输入命名locale -a查看系统支持的编码_linux c++ gbk->utf8

IMP-00009: 导出文件异常结束-程序员宅基地

文章浏览阅读750次。今天准备从生产库向测试库进行数据导入,结果在imp导入的时候遇到“ IMP-00009:导出文件异常结束” 错误,google一下,发现可能有如下原因导致imp的数据太大,没有写buffer和commit两个数据库字符集不同从低版本exp的dmp文件,向高版本imp导出的dmp文件出错传输dmp文件时,文件损坏解决办法:imp时指定..._imp-00009导出文件异常结束

python程序员需要深入掌握的技能_Python用数据说明程序员需要掌握的技能-程序员宅基地

文章浏览阅读143次。当下是一个大数据的时代,各个行业都离不开数据的支持。因此,网络爬虫就应运而生。网络爬虫当下最为火热的是Python,Python开发爬虫相对简单,而且功能库相当完善,力压众多开发语言。本次教程我们爬取前程无忧的招聘信息来分析Python程序员需要掌握那些编程技术。首先在谷歌浏览器打开前程无忧的首页,按F12打开浏览器的开发者工具。浏览器开发者工具是用于捕捉网站的请求信息,通过分析请求信息可以了解请..._初级python程序员能力要求

Spring @Service生成bean名称的规则(当类的名字是以两个或以上的大写字母开头的话,bean的名字会与类名保持一致)_@service beanname-程序员宅基地

文章浏览阅读7.6k次,点赞2次,收藏6次。@Service标注的bean,类名:ABDemoService查看源码后发现,原来是经过一个特殊处理:当类的名字是以两个或以上的大写字母开头的话,bean的名字会与类名保持一致public class AnnotationBeanNameGenerator implements BeanNameGenerator { private static final String C..._@service beanname

随便推点

二叉树的各种创建方法_二叉树的建立-程序员宅基地

文章浏览阅读6.9w次,点赞73次,收藏463次。1.前序创建#include<stdio.h>#include<string.h>#include<stdlib.h>#include<malloc.h>#include<iostream>#include<stack>#include<queue>using namespace std;typed_二叉树的建立

解决asp.net导出excel时中文文件名乱码_asp.net utf8 导出中文字符乱码-程序员宅基地

文章浏览阅读7.1k次。在Asp.net上使用Excel导出功能,如果文件名出现中文,便会以乱码视之。 解决方法: fileName = HttpUtility.UrlEncode(fileName, System.Text.Encoding.UTF8);_asp.net utf8 导出中文字符乱码

笔记-编译原理-实验一-词法分析器设计_对pl/0作以下修改扩充。增加单词-程序员宅基地

文章浏览阅读2.1k次,点赞4次,收藏23次。第一次实验 词法分析实验报告设计思想词法分析的主要任务是根据文法的词汇表以及对应约定的编码进行一定的识别,找出文件中所有的合法的单词,并给出一定的信息作为最后的结果,用于后续语法分析程序的使用;本实验针对 PL/0 语言 的文法、词汇表编写一个词法分析程序,对于每个单词根据词汇表输出: (单词种类, 单词的值) 二元对。词汇表:种别编码单词符号助记符0beginb..._对pl/0作以下修改扩充。增加单词

android adb shell 权限,android adb shell权限被拒绝-程序员宅基地

文章浏览阅读773次。我在使用adb.exe时遇到了麻烦.我想使用与bash相同的adb.exe shell提示符,所以我决定更改默认的bash二进制文件(当然二进制文件是交叉编译的,一切都很完美)更改bash二进制文件遵循以下顺序> adb remount> adb push bash / system / bin /> adb shell> cd / system / bin> chm..._adb shell mv 权限

投影仪-相机标定_相机-投影仪标定-程序员宅基地

文章浏览阅读6.8k次,点赞12次,收藏125次。1. 单目相机标定引言相机标定已经研究多年,标定的算法可以分为基于摄影测量的标定和自标定。其中,应用最为广泛的还是张正友标定法。这是一种简单灵活、高鲁棒性、低成本的相机标定算法。仅需要一台相机和一块平面标定板构建相机标定系统,在标定过程中,相机拍摄多个角度下(至少两个角度,推荐10~20个角度)的标定板图像(相机和标定板都可以移动),即可对相机的内外参数进行标定。下面介绍张氏标定法(以下也这么称呼)的原理。原理相机模型和单应矩阵相机标定,就是对相机的内外参数进行计算的过程,从而得到物体到图像的投影_相机-投影仪标定

Wayland架构、渲染、硬件支持-程序员宅基地

文章浏览阅读2.2k次。文章目录Wayland 架构Wayland 渲染Wayland的 硬件支持简 述: 翻译一篇关于和 wayland 有关的技术文章, 其英文标题为Wayland Architecture .Wayland 架构若是想要更好的理解 Wayland 架构及其与 X (X11 or X Window System) 结构;一种很好的方法是将事件从输入设备就开始跟踪, 查看期间所有的屏幕上出现的变化。这就是我们现在对 X 的理解。 内核是从一个输入设备中获取一个事件,并通过 evdev 输入_wayland

推荐文章

热门文章

相关标签