关于英伟达jetson nano的搭配双目摄像头跑ORB_SLAM2

2023-05-16

1.安装系统

按照商家给的资料安装,将Ubuntu18.04LTS镜像拷贝到tf卡中,插上jetson nano就可以安装了。

2.系统设置

  1. 进入系统我先把系统语言设置为中文,在右上角的设置中找到系统设置中的语言设置,添加中文并下载,拖动到第一位置,运用于整个系统,然后再重启一遍。还有就是建议把休眠功能关掉,默认是5分钟就黑屏,要重新登陆,在桌面右上角的设置中的屏幕设置中调成1个小时或者永久。(以为有的项目编译起来很久,如果黑屏了,会暂停编译?)
  2. 第二个就是换源了,因为英伟达jetson nano和其他的不一样,所以源也有点小区别,这边我们参考清华源。
    换国内的ubuntu源
    镜像安装完成就说明ubuntu的操作系统已经在你的硬盘(tf卡)里了,但是为了之后下载速度,我们这里将ubuntu自身的源换成国内的镜像。
    1、首先对原来的源进行备份cp /etc/apt/sources.list /etc/apt/sources.list.old将原来的源复制到sources.list.old。
    2、选择就可以更改原来的列表了sudo gedit /etc/apt/sources.list,打开sources.list这个列表,打开把里面全部删掉,然后将下面的复制进去。(将注释内容删掉)
#清华源:
deb [arch=amd64,i386] http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial main restricted
deb [arch=amd64,i386] http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-updates main restricted
deb [arch=amd64,i386] http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial universe
deb [arch=amd64,i386] http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-updates universe
deb [arch=amd64,i386] http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial multiverse
deb [arch=amd64,i386] http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-updates multiverse
deb [arch=amd64,i386] http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-backports main restricted universe multiverse
deb [arch=amd64,i386] http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-security main restricted
deb [arch=amd64,i386] http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-security universe
deb [arch=amd64,i386] http://mirrors.tuna.tsinghua.edu.cn/ubuntu/ xenial-security multiverse
#原文链接:https://blog.csdn.net/weixin_44047777/article/details/103772146
  1. 再执行sudo apt-get update刷新一下软件列表,如果没问题就可以接下去了。
  2. 在设置的软件更新那里勾选ubuntu前4个选项和更新的前两空格。

3.安装ros系统

  1. 添加下载ros的加载源
sudo sh -c '. /etc/lsb-release && echo "deb http://mirrors.ustc.edu.cn/ros/ubuntu/ $DISTRIB_CODENAME main" > /etc/apt/sources.list.d/ros-latest.list'
  1. 添加密钥
sudo apt-key adv --keyserver hkp://pool.sks-keyservers.net --recv-key 421C365BD9FF1F717815A3895523BAEEB01FA116

或者

sudo -E apt-key adv --keyserver 'hkp://keyserver.ubuntu.com:80' --recv-key C1CF6E31E6BADE8868B172B4F42ED6FBAB17C654
  1. 执行sudo apt-get update进行更新
sudo apt-get update
  1. 下载指令
sudo apt-get install ros-melodic-desktop-full

下载melodic的桌面完整版,这里会出现两种问题,一种是无法定位软件包,这种情况首先考虑版本下没下对,例如ubuntu18.04对应的是melodic。另一种是关联树问题,这种情况查看在“软件和更新中”是否按照上面“换国内ubuntu源”中的第三点做了。

  1. 这里要根据自己的Ubuntu版本替换ros-后面的melodic,因为我是18.04所以是melodic。

  2. ros的初始化(贼容易出错,虽然只有两条指令,笔者也搞了挺久的)

sudo rosdep init
rosdep update

(安装完ros之后,sudo rosdep init出现找不到命令。执行sudo apt install python-rosdep2)
如果这两步出错,一般是网络问题,可以试试换手机热点多次尝试。如果还是不行,解决方法有两种,一种是dddd,第二种参考另外一位大神的文章,链接在下面
请点击我,哈哈哈哈

  1. 设置环境变量
    依次执行
 echo "source /opt/ros/melodic/setup.bash" >> ~/.bashrc
source ~/.bashrc

然后再运行roscore试试

roscore

如果报没有找到roscore
先打开根目录下的/opt/ros/melodic/bin,看看有没有名字roscore的文件,如果没有,再运行以下指令

sudo apt-get install ros-melodic-desktop

如果出现了roscore的文件,ok,成功!再运行roscore即可。

4.安装ROB_SLAM

  1. 安装工具下载
    配置前需要下载cmake、gcc、g++和Git工具
    安装指令如下,依次安装
sudo apt-get install cmake
sudo apt-get install git
sudo apt-get install gcc g++  

如果安装有问题,可能是网络原因,我是一次性就装上了的,应该都没问题。

  1. 安装Pangolin
    先装几个依赖先
sudo apt-get install libglew-dev
sudo apt-get install libpython2.7-dev

安装pangolin的时候多试几次,因为不稳定,我刚开始装刷了好几遍才装上

git clone https://github.com/stevenlovegrove/Pangolin.git

下载好后,进入Pangolin文件夹。

cd Pangolin

创建编译文件夹,命名为build。

mkdir build

进入文件夹进行配置。

cd build
然后执行cmake
cmake
如果不行就试试cmake …
cmake ..
然后执行
cmake -DCPP11_NO_BOOSR=1 ..
然后编译

sudo make

(这里有个方法 加快速度,就是sudo make -j4意思是用你的电脑4个核心去编译)
最后编译安装。

sudo make install
  1. 安装opencv
    1,先从官网下载安装包,或者下面我会留一个百度云链接,你自己去下,然后拷贝就行。

进入opencv-3.4.1这个文件包。

cd opencv-3.4.1

2,安装需要的依赖项。

sudo apt-get install build-essential libgtk2.0-dev libavcodec-dev libavformat-dev libjpeg.dev libtiff5.dev libswscale-dev libjasper-dev  

这边报错,说无法定位软件包libjasper-dev,那我们先不管他,安装其他依赖,发现也已经安装好了的。

3,初始编译过程

创建编译文件夹。

mkdir build

进入文件夹进行配置。

cd build

执行cmake命令。

cmake -D CMAKE_BUILD_TYPE=Release -D CMAKE_INSTALL_PREFIX=/usr/local ..

然后进行编译

sudo make

(同理也可以用sudo make -j4)
编译完成也是挺久的,我等了一晚上,建议用make-j4编译,等编译完成后执行以下指令安装

sudo make install

(这边我编译到97%就报错,我是重启然后重新编译就好了,你可以多试几遍。)
4、配置编译环境
将OpenCV的库添加到路径,这样的目的是可以让系统找到。

sudo gedit /etc/ld.so.conf.d/opencv.conf 

执行命令后打开的可能是一个空白的文件,直接添加上下面这句代码。

/usr/local/lib
如图
如图
执行下列命令使刚才的配置路径生效。

sudo ldconfig

配置bash。

sudo gedit /etc/bash.bashrc

把下列这两句代码,添加在文末处。

PKG_CONFIG_PATH=$PKG_CONFIG_PATH:/usr/local/lib/pkgconfig  
export PKG_CONFIG_PATH  

保存后,执行如下命令使配置生效。

source /etc/bash.bashrc

执行下列命令更新。至此,ubuntu18.04下opencv3.4.1已经配置完成啦。

sudo updatedb
如果这边出现未找到sudo updatedb,请执行下面的指令

sudo apt-get install mlocate

安装opencv这一段参考的是另一位作者的,链接附下
谢谢大佬
4,安装eigen
执行

sudo apt-get install libeigen3-dev

5,安装rob_slam2
1.先要建一个工作空间,这是ros基础。
这里简单介绍一下(我这边用图像化的来操作,我比较习惯,当然你也可以用指令操作)
第一步
点开文件,右键点击,新建文件夹,取名为catkin_ws,(这里可以随便取,一般叫这个),点击进入这个文件夹,然后再新建一个文件夹,取名为src。
第二步
新建完src后,右键点击,选择在终端打开,此时当前目录是在catkin_ws里,运行catkin_make
第三步
你已经建好了一个工作空间了,不错。

2.下载源码(如果需要在ROS环境下运行ORB_SLAM2,最好放在工作区的src文件夹下)
第一步
打开刚刚新建的工作空间的src文件夹,右键点击选择在终端打开。
第二步
运行下面的代码,将源码克隆到src下。

git clone https://github.com/raulmur/ORB_SLAM2.git ORB_SLAM2

由于源码在外网,可能不能一次成功,请多次尝试。
(笔者试了3遍,就成功了)在这里插入图片描述
(终于会截图了,捂脸.jpg)
第三步
打开ROB_SLAM2

cd ORB_SLAM2

给build.sh文件权限

chmod +x build.sh

运行build.sh

./build.sh

这里我电脑卡死,重启还是不行,然后我就打开build.sh文件,将里面的全部make -j改为make(改成make -j4应该也行),这样就不会卡死,但是会报错。
解决方法:
报错是红色的,终端里可以看到其相应的文件目录,依次打开它们,然后在文件头部添加以下的头文件,也可以看下面的文件,全部添加就好了。

#include<unistd.h>

需要根据实际情况,提示哪个文件usleep有问题,就去加这个头文件。
需要增加unistd.h的文件还有:
Examples/Monocular/mono_euroc.cc
Examples/Monocular/mono_kitti.cc
Examples/Monocular/mono_tum.cc
Examples/RGB-D/rgbd_tum.cc
Examples/Stereo/stereo_euroc.cc
Examples/Stereo/stereo_kitti.cc
src/LocalMapping.cc
src/LoopClosing.cc
src/System.cc
src/Tracking.cc
src/Viewer.cc
这样说好像说的不是很明白
我们用例子说明一下:(因为我build.sh已经编译好了,没截图,但build_ros.sh也有同样的问题,你参考参考就好了)
在这里插入图片描述
这边有红色报错,可以看到路径是、home/hyc/catkin_ws/src/ORB_SLAM2/Examples/ROS/ROB_SLAM2/src/AR/ViewerAR.cc 我们安装这个路径打开ViewerAR.cc文件在这里插入图片描述
然后添加#include<unistd.h>,保存关闭,再次运行,就ok了
这里感谢另外一位作者,如果还是解决不了可以参考下面链接,那个比较详细
其他问题请点我

如需要在ROS环境下运行ORB_SLAM,则需要执行下列三条命令:

chmod +x build_ros.sh
export ROS_PACKAGE_PATH=${ROS_PACKAGE_PATH}:~/catkin_ws/src/ORB_SLAM2/Examples/ROS
./build_ros.sh

看到这,ORB_SLAM2就已经安装完成啦!恭喜少侠!

5.利用摄像头运行实例

  1. 双目摄像头(CSI-IMX219)操作标定
    这一步很烦,我标了3天才标好,所以我会特意出篇文章介绍这个标定,让你少走弯路。
    链接附下
    双目摄像头标定(如果你已经会用opencv标定,请参考下面)
    ------------------------------------------更新-------------------------------------------
    好家伙,虽然标定完了但是,标定文件的数据我也不是很懂(因为到时运行ROB_SLAM2的时候需要修改yaml文件,而里面的参数和我们标定出来的字母不匹配,所以我也不知道怎么填),在csdn上找了好久,只找到一篇比较详细的,链接附下:双目标定及其参数解读
    先把标定代码发出来(来源于上面那个链接):
#include "opencv2/core/core.hpp" 
#include "opencv2/imgproc/imgproc.hpp"  
#include "opencv2/calib3d/calib3d.hpp"  
#include "opencv2/highgui/highgui.hpp"  
#include <vector>  
#include <string>  
#include <algorithm>  
#include <iostream>  
#include <iterator>  
#include <stdio.h>  
#include <stdlib.h>  
#include <ctype.h>   
#include <opencv2/opencv.hpp>  
#include "cv.h"  
#include <cv.hpp>  
using namespace std;
using namespace cv;                                        
const int imageWidth = 640;                             
const int imageHeight = 480;
const int boardWidth = 9;                               
//横向的角点数目  
const int boardHeight = 6;                              
//纵向的角点数据  
const int boardCorner = boardWidth * boardHeight;      
//总的角点数据  
                            
//相机标定时需要采用的图像帧数  
const int squareSize = 26.0f;                              
//标定板黑白格子的大小单位mm(我的格子边长26mm)  

const int frameNumber = 59;
//图像命名 从1 ~ 58(59-1=58)
string folder_ = "./data/"; 
string format_R = "R";
string format_L = "L";
//例如: R1.jpg   L58.jpg 置于工程目录的 data文件夹下, 
const Size boardSize = Size(boardWidth, boardHeight);   
//标定板的总内角点  
Size imageSize = Size(imageWidth, imageHeight);Mat R, T, E, F;                                                 
//R 旋转矢量 T平移矢量 E本征矩阵 F基础矩阵  
vector<Mat> rvecs;                                        
//旋转向量  
vector<Mat> tvecs;                                        
//平移向量  
vector<vector<Point2f>> 
imagePointL;                    
//左边摄像机所有照片角点的坐标集合  
vector<vector<Point2f>> imagePointR;                    
//右边摄像机所有照片角点的坐标集合  
vector<vector<Point3f>> objRealPoint;                  
//各副图像的角点的实际物理坐标集合  
vector<Point2f> cornerL;                              
//左边摄像机某一照片角点坐标集合  
vector<Point2f> cornerR;                              
//右边摄像机某一照片角点坐标集合  
Mat rgbImageL, grayImageL;
Mat rgbImageR, grayImageR;
Mat Rl, Rr, Pl, Pr, Q;                                 
//校正旋转矩阵R,投影矩阵P 重投影矩阵Q (下面有具体的含义解释)   
Mat mapLx, mapLy, mapRx, mapRy;                         
//映射表  
Rect validROIL, validROIR;                              
//图像校正之后,会对图像进行裁剪,这里的validROI就是指裁剪之后的区域 
/*事先标定好的左相机的内参矩阵
fx 0 cx
0 fy cy
0 0  1*/
Mat cameraMatrixL = (Mat_<double>(3, 3) << 296.65731645541695, 0, 343.1975436071541,
										   0, 300.71016643747646, 246.01183552967473,
										   0, 0, 1);
//这时候就需要你把左右相机单目标定的参数给写上
//获得的畸变参数
Mat distCoeffL = (Mat_<double>(4, 1) << -0.23906272129552558, 0.03436102573634348, 0.001517498429211239, -0.005280695866378259);
/*事先标定好的右相机的内参矩阵
fx 0 cx
0 fy cy
0 0  1*/
Mat cameraMatrixR = (Mat_<double>(3, 3) << 296.92709649579353, 0, 313.1873142211607,
										   0, 300.0649937238372, 217.0722185756087,
										   0, 0, 1);
Mat distCoeffR = (Mat_<double>(4, 1) << -0.23753878535018613, 0.03338842944635466, 0.0026030620085220105, -0.0008840126895030034);

void calRealPoint(vector<vector<Point3f>>& obj, int boardwidth, int boardheight, int imgNumber, int squaresize)
	{ 	
		vector<Point3f> imgpoint;	
		for (int rowIndex = 0; rowIndex < boardheight; rowIndex++)	
			{		
				for (int colIndex = 0; colIndex < boardwidth; colIndex++)		
				{			
					imgpoint.push_back(Point3f(rowIndex * squaresize, colIndex * squaresize, 0));		
				}	
		}	
		for (int imgIndex = 0; imgIndex < imgNumber; imgIndex++)	
		{		
			obj.push_back(imgpoint);	
		}
}
void outputCameraParam(void)                   
{	/*保存数据*/	/*输出数据*/	
	FileStorage fs("intrinsics.yml", FileStorage::WRITE);  
	//文件存储器的初始化
	if (fs.isOpened())	
	{		
		fs << "cameraMatrixL" << cameraMatrixL << "cameraDistcoeffL" << distCoeffL << "cameraMatrixR" << cameraMatrixR << "cameraDistcoeffR" << distCoeffR;		
		fs.release();		
		cout << "cameraMatrixL=:" << cameraMatrixL << endl << "cameraDistcoeffL=:" << distCoeffL << endl << "cameraMatrixR=:" << cameraMatrixR << endl << "cameraDistcoeffR=:" << distCoeffR << endl;
	}	
	else	
	{		
		cout << "Error: can not save the intrinsics!!!!!" << endl;	
	}	
	fs.open("extrinsics.yml", FileStorage::WRITE);	
	if (fs.isOpened())	
	{		
		fs << "R" << R << "T" << T << "Rl" << Rl << "Rr" << Rr << "Pl" << Pl << "Pr" << Pr << "Q" << Q;
		cout << "R=" << R << endl << "T=" << T << endl << "Rl=" << Rl << endl << "Rr=" << Rr << endl << "Pl=" << Pl << endl << "Pr=" << Pr << endl << "Q=" << Q << endl;
		fs.release();	
	}	
	else		
		cout << "Error: can not save the extrinsic parameters\n";
}

int main(int argc, char* argv[])
{	
	Mat img;	
	int goodFrameCount = 1;
	cout << "Total Images:" << frameNumber << endl;
	while (goodFrameCount < frameNumber)	
	{	
		cout <<"Current image :" << goodFrameCount << endl;
		string 	filenamel,filenamer;
		//char filename[100];		
		/*读取左边的图像*/		
                filenamel = folder_ + format_L+	to_string(goodFrameCount)+".jpg";	
		rgbImageL = imread(filenamel, CV_LOAD_IMAGE_COLOR);		
		cvtColor(rgbImageL, grayImageL, CV_BGR2GRAY);
		/*读取右边的图像*/		
		//sprintf_s(filename, "D:/dual_camera_clibration/dual/R%d.jpg", goodFrameCount );	
                filenamer = folder_ + format_R+	to_string(goodFrameCount)+".jpg";	
		rgbImageR = imread(filenamer, CV_LOAD_IMAGE_COLOR);		
		cvtColor(rgbImageR, grayImageR, CV_BGR2GRAY);		
		bool isFindL, isFindR;		
		isFindL = findChessboardCorners(rgbImageL, boardSize, cornerL);		
		isFindR = findChessboardCorners(rgbImageR, boardSize, cornerR);		
		if (isFindL == true && isFindR == true)  
			//如果两幅图像都找到了所有的角点 则说明这两幅图像是可行的  		
		{						
			cornerSubPix(grayImageL, cornerL, Size(5, 5), Size(-1, -1), TermCriteria(CV_TERMCRIT_EPS | CV_TERMCRIT_ITER, 20, 0.1));	
			drawChessboardCorners(rgbImageL, boardSize, cornerL, isFindL);
			imshow("chessboardL", rgbImageL);	
			imagePointL.push_back(cornerL);		
			cornerSubPix(grayImageR, cornerR, Size(5, 5), Size(-1, -1), TermCriteria(CV_TERMCRIT_EPS | CV_TERMCRIT_ITER, 20, 0.1));	
			drawChessboardCorners(rgbImageR, boardSize, cornerR, isFindR);		
			imshow("chessboardR", rgbImageR);		
			imagePointR.push_back(cornerR);						
			goodFrameCount++;			
			cout << "The image" << goodFrameCount << " is good" << endl;	
		}		
		else		
		{			
			cout << "The image "<< goodFrameCount <<"is bad please try again" << endl;
			goodFrameCount++;
		}		

		if (waitKey(10) == 'q')		
		{			
			break;		
		}	
	}	
	/*	计算实际的校正点的三维坐标	根据实际标定格子的大小来设置	*/	
	calRealPoint(objRealPoint, boardWidth, boardHeight, frameNumber-1, squareSize);	
	cout << "cal real successful" << endl;
	/*	标定摄像头	由于左右摄像机分别都经过了单目标定	所以在此处选择flag = CALIB_USE_INTRINSIC_GUESS	*/	
	double rms = stereoCalibrate(objRealPoint, imagePointL, imagePointR,
		cameraMatrixL, distCoeffL,
		cameraMatrixR, distCoeffR,
		Size(imageWidth, imageHeight), R, T, E, F, CV_CALIB_USE_INTRINSIC_GUESS,
		TermCriteria(TermCriteria::COUNT + TermCriteria::EPS, 80, 1e-5));	
	cout << "Stereo Calibration done with RMS error = " << rms << endl;
	stereoRectify(cameraMatrixL, distCoeffL, cameraMatrixR, distCoeffR, imageSize, R, T, Rl, Rr, Pl, Pr, Q,		CALIB_ZERO_DISPARITY, -1, imageSize, &validROIL, &validROIR);   

	initUndistortRectifyMap(cameraMatrixL, distCoeffL, Rl, Pr, imageSize, CV_32FC1, mapLx, mapLy); 	
	initUndistortRectifyMap(cameraMatrixR, distCoeffR, Rr, Pr, imageSize, CV_32FC1, mapRx, mapRy);	
	Mat rectifyImageL, rectifyImageR;		
	cout << "debug"<<endl; 
        for (int num = 1; num < frameNumber;num++)
	{
		string 	filenamel,filenamer;  
		filenamel = folder_ + format_L+	to_string(num)+".jpg";	
                filenamer = folder_ + format_R+	to_string(num)+".jpg";	
		rectifyImageL = imread(filenamel);
		rectifyImageR = imread(filenamer);
		imshow("Rectify Before", rectifyImageL);	
		/*	经过remap之后,左右相机的图像已经共面并且行对准了	*/	
		Mat rectifyImageL2, rectifyImageR2;	
		remap(rectifyImageL, rectifyImageL2, mapLx, mapLy, INTER_LINEAR);	
		remap(rectifyImageR, rectifyImageR2, mapRx, mapRy, INTER_LINEAR);
		imshow("rectifyImageL", rectifyImageL2);	
		imshow("rectifyImageR", rectifyImageR2);	
		/*保存并输出数据*/	
		outputCameraParam();	
		/*	把校正结果显示出来 把左右两幅图像显示到同一个画面上 这里只显示了最后一副图像的校正结果。并没有把所有的图像都显示出来	*/
		Mat canvas;	double sf;	
		int w, h;	
		sf = 600. / MAX(imageSize.width, imageSize.height);	
		w = cvRound(imageSize.width * sf);
		h = cvRound(imageSize.height * sf);	
		canvas.create(h, w * 2, CV_8UC3);	
		/*左图像画到画布上*/	
		Mat canvasPart = canvas(Rect(w * 0, 0, w, h));  
		//得到画布的一部分  	
		resize(rectifyImageL2, canvasPart, canvasPart.size(), 0, 0, INTER_AREA);       
		//把图像缩放到跟canvasPart一样大小  
		Rect vroiL(cvRound(validROIL.x*sf), cvRound(validROIL.y*sf),   //获得被截取的区域 
			cvRound(validROIL.width*sf), cvRound(validROIL.height*sf));	
		rectangle(canvasPart, vroiL, Scalar(0, 0, 255), 3, 8);                   
		//画上一个矩形  	
		cout << "Painted ImageL" << endl;
		/*右图像画到画布上*/	
		canvasPart = canvas(Rect(w, 0, w, h));     
		//获得画布的另一部分  	
		resize(rectifyImageR2, canvasPart, canvasPart.size(), 0, 0, INTER_LINEAR);
		Rect vroiR(cvRound(validROIR.x * sf), cvRound(validROIR.y*sf),		
			cvRound(validROIR.width * sf), cvRound(validROIR.height * sf));	
		rectangle(canvasPart, vroiR, Scalar(0, 255, 0), 3, 8);	cout << "Painted ImageR" << endl;
		/*画上对应的线条*/	
		for (int i = 0; i < canvas.rows; i += 16)		
			line(canvas, Point(0, i), Point(canvas.cols, i), Scalar(0, 255, 0), 1, 8);
		imshow("rectified", canvas);	
		//cout << "wait key" << endl;
		waitKey();	//system("pause"); 
	}
	return 0;
}

简单介绍一下注意事项:

  • 该标定方法广角和平面摄像头都适用。
  • 照片一定要按顺序命名。
  • 如果其中有一张照片报错,就把那张照片先删掉再重新编号。
    最终结果如下:
    在这里插入图片描述
  1. 修改yaml文件
    按照下图路径打开下面的EuRoC.yaml文件,并按照该链接的要求修改链接
    在这里插入图片描述
  2. 运行摄像头
    这边我们需要一个这个摄像头的ros功能包,这边有两个方案,一个是官方的包(我还没试过),所以我先介绍下面这个包。
    第一步
    打开一个新终端,输入
cd ~/catkin_ws/src
git clone https://github.com/rt-net/jetson_nano_csi_cam_ros.git 

接下来下载一些gscam的依赖,上述包组是依赖于gscam的,因此也要把gscam克隆下来

sudo apt-get install gstreamer1.0-tools libgstreamer1.0-dev libgstreamer-plugins-base1.0-dev libgstreamer-plugins-good1.0-dev
cd ~/catkin_ws/src
git clone https://github.com/ros-drivers/gscam.git

接下来我们进入到克隆好的gscam目录中使用sed命令添加一行参数

cd ~/catkin_ws/src/gscam
sed -e "s/EXTRA_CMAKE_FLAGS = -DUSE_ROSBUILD:BOOL=1$/EXTRA_CMAKE_FLAGS = -DUSE_ROSBUILD:BOOL=1 -DGSTREAMER_VERSION_1_x=On/" -i Makefile

然后我们在src目录下直接编译

cd ~/catkin_ws
catkin_make
source devel/setup.bash

详情请点击我
这时你的工作空间catkin_make/src下应该是这样的
在这里插入图片描述
这里要运行摄像头请先打开jetson_nano_csi_cam_ros下的launch文件运行

roslaunch jetson_dual_csi_cam.launch

运行后会有报个WARN,这个不用管。意思是没找到标定文件,但我们的目的只是打开摄像头就行了,这时我们运行rostopic list可以看到在这里插入图片描述
说明摄像头运行成功。
4. 修改摄像头的端口
打开catkin_ws/src/ORB_SLAM2/Examples/ROS/ORB_SLAM2/src/ros_stereo.cc
这个文件,并按照下面的进行修改摄像头的参数
在这里插入图片描述
保存退出,重新编译Example

cd ~/catkin_ws/src/ORB_SLAM2/Example/ROS/ORB_SLAM2

mkdir build

cd build

cmake ..

make 

这里如果报错,那就先把build文件夹删掉再运行上面的指令。
运行ROB_SLAM2
这里先要打开catkin_ws/src/ORB_SLAM2/Vocabulary中,将压缩包解压。
然后运行

rosrun ORB_SLAM2 Stereo /home/xxx/catkin_ws/src/ORB_SLAM2/Vocabulary/ORBvoc.txt /home/xxx/catkin_ws/src/ORB_SLAM2/Examples/Stereo/EuRoC.yaml false

xxx改为自己的用户名
解释一下这串代码

  • Stereo 是双目 如果你是单目也可以改为Mono
  • /home/xxx/catkin_ws/src/ORB_SLAM2/Vocabulary/ORBvoc.txt是你刚刚解压的那个文件的路径
  • /home/xxx/catkin_ws/src/ORB_SLAM2/Examples/Stereo/EuRoC.yaml是你根据标定结果修改的yaml的文件路径
  • false暂时不懂,大概应该是模式的选择,后续看看,但这必须写,不然会报格式错误
  • 如果没问题就如下图
    在这里插入图片描述 5.关于运行错误
    在这里插入图片描述
    解决方法:这是因为yaml文件格式错误,看看缩进有没问题
    在这里插入图片描述
    就像这个的rows明显缩进去了一格,在前面加个空格就好了
    在这里插入图片描述
    再找找yaml文件有没有同类错误,将他改过来就好。
    opencv包链接:
    链接:https://pan.baidu.com/s/18h7JsCdSfJU8RH8-3SswPA
    提取码:yyds

6.结束

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

关于英伟达jetson nano的搭配双目摄像头跑ORB_SLAM2 的相关文章

  • A*Pathfind Project的使用

    本文主要是对该文章的改进 xff1a Unity学习笔记 易学易会的unity中A星寻路插件 A Pathfind Project的使用 秋瞑小雁客的博客 CSDN博客 unity 寻路插件 上述文章中的代码在运行过程中 xff0c 角色到
  • 如何在Ubuntu上安装Apache Http服务器

    有两种方法可以在Ubuntu上安装Apache Http服务器 xff1a 使用apt命令自动安装 配置和构建源代码 xff0c 然后手动安装 1 自动安装 1 使用 apt cache search 命令搜索Apache软件包 apt c
  • Ubuntu18.04安装ROS系统

    1 Ubuntu与ROS的版本对应 Ubuntu ROS1 016 04LTSKinetic LTS18 04LTSMelodic LTS20 04LTSNoetic LTS 2 安装 本文为Ubuntu18 04版本下的安装 2 1准备工
  • 从Unity导出Obj格式的地形(Terrian)

    1 在Unity中创建C 脚本 using UnityEngine using System Collections using UnityEditor using System IO using UnityEngine SceneMana
  • Unity导出工作台(Console)数据

    首先在Unity中添加C 脚本 xff1a using System Collections using System Collections Generic using UnityEngine using UnityEditor usin
  • 2022研究生数学建模B题思路

    子问题1 xff1a 排样优化问题 要求建立混合整数规划模型 xff0c 在满足生产订单需求和相关约束条件下 xff0c 尽可能减少板材用量 约束 1 在相同栈 stack xff09 里的产品项 item xff09 的宽度 xff08
  • 找到并标记Mesh顶点

    1 在Unity 3D中新建一个物体 本文以Cube为例 2 创建一个C 脚本 命名为MeshTest 3 在脚本中写入程序 在打开的脚本 MeshTest 上编写代码 xff0c 首先获取 MeshFilter 组件 xff0c 然后获取
  • win11 命令 wmic:无效的指令 解决办法

    我想你肯定看到过让你修改环境变量的方法 但是 xff0c 如果你的电脑就根本没有装wmic xff0c 再怎么修改环境变量也是徒劳 我们打开设置 xff1a Win 43 I 点击应用 选择 可选功能 添加可选功能 搜索wmic xff0c
  • 【STM32】GPIO_InitTypeDef GPIO_InitStructure;语句的理解

    这句话声明一个结构体 xff0c 名字是GPIO InitStructure xff0c 结构体原型由GPIO InitTypeDef 确定 xff0c 在stm32中用来初始化GPIO 设置完GPIO InitStructure里面的内容
  • 如何在VScode上运行C语言

    如何在VS code上运行C语言 安装VS code 下载MinGW w64 xff1b 查验是否成功 我在VS code上尝试运行C语言后 xff0c 想和大家分享一下经验 安装VS code 下载MinGW w64 xff1b 查验是否
  • Node.js 如何实现OCR文字识别

    Node js 如何实现OCR文字识别 OCR Optical Character Recognition 是指用光学技术识别文字图像的技术 随着全新的技术出现 xff0c OCR 技术已经发展成为一种非常先进的技术 xff0c 可以从图片
  • Jetson nano烧录与简介

    Jetson nano 烧录教程 文章目录 Jetson nano 烧录教程 Jetson nano 简介1 Jetson Nano 接口介绍2 盒内包含3 不包含的物品 xff08 额外购入 xff09 4 Jetson nano的三种供
  • 51单片机-定时器(简易时钟的实现)

    文章目录 前言一 定时器的功能以及定时器的结构定时器的功能定时器的结构 二 定时器的控制工作模式寄存器TMOD控制寄存器TCON写代码来初始化定时器 三 定时器引发中断简易时钟主程序main c延时函数Delay c控制LCD162模块LC
  • 用于评估婴儿认知发展的IMU内嵌式玩具

    0 5岁是神经发育的敏感时期 xff0c 对身心健康至关重要的EF xff08 执行功能 Executive functions xff09 会在这个时期出现 在现代临床和研究实践中 xff0c 编码员通过手动标记视频中婴儿在使用玩具或社交
  • yolo+ocr集装箱字符识别(pytorch版本)

    前言 这个是我们 的大创项目 当我们拿到一份数据集 xff0c 首先就是要对整个项目有个较为清晰的认识 xff0c 整体的思路是什么 xff0c 难点在哪 xff0c 怎么部署和实现 1 整体的思路 xff1a 先通过目标检测网络 xff0
  • ROS话题通信实现发布接收以及vscode编译配置(五)C++版本

    在ROS中每一个功能点都是一个单独的进程 xff0c 每一个进程都是独立运行的 ROS是进程 xff08 也称为Nodes xff09 的分布式框架 因为这些进程甚至还可分布于不同主机 xff0c 不同主机协同工作 xff0c 从而分散计算
  • CMakeList

    目录 1 简介 2 常用命令 2 1 指定 cmake 的最小版本 2 2 设置项目名称 2 3 设置编译类型 2 4 指定编译包含的源文件 2 4 1 明确指定包含哪些源文件 2 4 2 搜索所有的 cpp 文件 2 4 3自定义搜索规则
  • 多旋翼飞行器设计与控制(二)—— 基本组成

    多旋翼飞行器设计与控制 xff08 二 xff09 基本组成 一 机架 1 机身 指标参数 xff1a 重量 xff1a 尽可能轻轴距 xff1a 外圈电机组成圆的直径材料 xff1a 冲碳纤维就完了布局 xff1a 2 起落架 作用 xf
  • 多旋翼飞行器设计与控制(六)—— 动态模型和参数测量

    多旋翼飞行器设计与控制 xff08 六 xff09 动态模型和参数测量 一 多旋翼控制模型 刚体运动学模型 跟质量与受力无关 xff0c 只研究位置 速度 姿态 角速度等参量 xff0c 常以质点为模型 刚体动力学模型 它与一般刚体动力学模
  • 多旋翼飞行器设计与控制(七)—— 传感器标定和测量模型

    多旋翼飞行器设计与控制 xff08 七 xff09 传感器标定和测量模型 一 三轴加速度计 三轴加速度计是一种惯性传感器 xff0c 能够测量物体的比力 xff0c 即去掉重力后的整体加速度或者单位质量上作用的非引力 当加速度计保持静止时

随机推荐

  • 【STM32】stm32通过地址操作寄存器

    stm32通过地址操作寄存器 0x01 stm32数据类型所占字节数0x02 如何查看寄存器地址 xff08 基地址 43 偏移地址 xff09 0x03 操作寄存器地址控制LED闪烁 xff08 代码 xff09 0x04 通过定义结构体
  • ARM裸机开发——启用SDRAM的按键中断控制灯实验

    写在前面 本文承接前文嵌入式系统学习 嵌入式系统 Linux环境搭建和LED灯闪烁实验 以S3C2440A作为开发平台 xff0c 以Linux中ARM Linux gcc交叉编译器作为编译环境进行学习 xff0c 由于本课程为单片机基础的
  • 二维vector

    span class token macro property span class token directive keyword include span span class token string lt iostream gt s
  • 13.request-session,验证码

    使用session使得请求变成一个对象 注意登录页面隐藏的参数 爬取古诗文登录页面 span class token keyword import span requests span class token keyword from sp
  • STM32-串口通信(串口的接收和发送)

    文章目录 STM32的串口通信一 STM32里的串口通信二 串口的发送和接收串口发送串口接收 三 串口在STM32中的配置四 串口接收的两种实现方式1 需要更改的地方2 查询RXNE标志位3 使用中断 总结 STM32的串口通信 本文在于记
  • quick sort(c++)以及k选取

    include lt iostream gt include lt vector gt using rank 61 int using namespace std int dash 61 0 int swap vector lt int g
  • STLINK CONNECTION ERROR 问题的解决

    打开STLINK UTILITY 连接芯片也连接不上 在settings里面 选择这个连接模式 xff0c 按下芯片复位键的同时 xff0c 点击连接 st link的灯闪烁红蓝相间的光表示连接成功 松开芯片reset xff0c 既连接成
  • 解决ros2安装出现的问题

    Cannot locate rosdep definition for python3 pytest 解决方法是输入弹幕命令 然后输入安装功能依赖的命令 如果有占用进程问题 xff0c 就重启 http t csdn cn WwqJa
  • conda activate 出错

    问题及解决办法 1 使用conda activate出错 在cmd中使用 conda bat activate 进入环境后在进行操作 2 conda install出错 xff0c 使用pip install 3 在cmd 中使用tenso
  • 树莓派4b 安装ubuntu20.04server和图形化界面遇到的问题

    树莓派安装图形界面参考教程 树莓派4b安装Ubuntu 18 04系统及图形桌面 树莓派4B安装 ubuntu20 04 amp VNC远程桌面 amp 安装ROS noetic 树莓派4b安装Ubuntu和ROS的完整爬坑记录 2021年
  • 【STM32】串口接收任意字符串

    目录 前言cube配置usart h xff1a usart cmain xff1a 效果 前言 之前写了一篇STM32hal库串口中断接收任意字符 实际上是不完美的 xff0c 他接收到换行符就完蛋了 花了点时间深入研究了一下hal库的串
  • 使用封装的axios发送请求

    使用封装的axios发送请求 1 src api api js 定义请求路由方法 span class token function import span URLS from span class token string 39 conf
  • STM32串口驱动

    首先了解串口通信的一些基本原理 xff1a 串口通信 xff1a 串口通信是指数据通过一条数据线 xff08 或者两条差分线 xff09 一位接着一位的传输出去 串口通信的优点是占用硬件资源少 xff0c 且传输距离较远 xff0c 缺点是
  • IIC 驱动OLED

    IIC总线可以驱动很多器件 xff0c 比较常见的有OLED EEPROM存储器 xff08 AT24C02 xff09 温度传感器 xff08 LM75A xff09 温湿度传感器 xff08 DHT11 xff09 等 有关IIC总线协
  • Stm32-使用TB6612驱动电机及编码器测速

    这里写目录标题 起因一 电机及编码器的参数二 硬件三 接线四 驱动电机1 TB6612电机驱动2 定时器的PWM模式驱动电机 五 编码器测速1 定时器的编码器接口模式2 定时器编码器模式测速的原理3 编码器模式的配置4 编码器模式相关代码5
  • CAN总线协议入门基础原理

    CAN 是 Controller Area Network 的缩写 xff08 以下称为 CAN xff09 xff0c 是 ISO 1 国际标准化的串行通信协议 CAN 通过 ISO11898 及 ISO11519 进行了标准化 xff0
  • SPI总线协议基本原理及相关配置

    单片机应用中 xff0c 最常用的通信协议主要有三个 xff0c 即USART IIC和SPI 关于前两个的介绍在之前文章学习过 xff0c 这次介绍一下第三个通信协议 SPI SPI Serial Peripheral Interface
  • 利用定时器的输出比较功能产生PWM驱动舵机

    一 定时器基本原理 首先我们来看一下ST官方给出的关于定时器的相关介绍 xff1a xff08 以STM32F103C8T6为例 xff09 STM32F103C8T6 含有 4 个 16 位定时器 xff0c 分别是一个高级定时器 TIM
  • ST-LINK固件升级

    关于st link固件升级注意的问题 在下载调试的过程中 xff0c 程序可能由于st link版本过旧而提示 command not supported 的错误 xff0c 这就要求我们升级st link固件才可以正常下载 但是在升级的过
  • 关于英伟达jetson nano的搭配双目摄像头跑ORB_SLAM2

    1 安装系统 按照商家给的资料安装 xff0c 将Ubuntu18 04LTS镜像拷贝到tf卡中 xff0c 插上jetson nano就可以安装了 2 系统设置 进入系统我先把系统语言设置为中文 xff0c 在右上角的设置中找到系统设置中