보정 및 센서 융합
제조, 운송, 건설과 같은 응용 분야의 최신 자율 시스템에는 여러 센서가 사용됩니다. 센서 융합은 라이다 센서 및 카메라와 같은 여러 센서의 데이터를 한데 합치는 과정입니다. 융합된 데이터를 사용하면 각 센서의 강점을 활용하여 다른 센서의 한계를 극복할 수 있기 때문에 정확도를 높일 수 있습니다. Lidar Toolbox™ 함수는 라이다 점을 영상에 투영하고, 라이다 포인트 클라우드에 색 정보를 융합하고, 영상의 경계 상자를 포인트 클라우드로 투영하거나 포인트 클라우드를 영상으로 투영하는 등 여러 센서 융합 과정을 지원합니다.
개별 센서의 데이터를 파악하고 상호 연관시키려면 데이터 간의 기하학적 대응점을 개발해야 합니다. 보정은 이러한 대응점을 개발하는 과정입니다. Lidar Toolbox 함수를 사용하여 라이다-카메라 보정을 수행합니다. 시작하려면 라이다-카메라 보정이란? 항목을 참조하십시오.
라이다 카메라 보정기 앱을 사용하여 대화형 방식으로 센서를 보정할 수도 있습니다. 자세한 내용은 Get Started with Lidar Camera Calibrator 항목을 참조하십시오.
앱
| 라이다 카메라 보정기 | 센서 데이터를 융합하기 위해 대화형 방식으로 라이다 센서와 카메라 간의 대응점 설정 (R2021a 이후) |
함수
도움말 항목
- 라이다-카메라 보정이란?
라이다 데이터와 카메라 데이터를 융합합니다.
- Get Started with Lidar Camera Calibrator
Interactively calibrate lidar and camera sensors.
- Calibration Guidelines
Guidelines to help you achieve accurate results for lidar-camera calibration.
- Coordinate Systems in Lidar Toolbox
Overview of coordinate systems in Lidar Toolbox.
- rosbag 파일에서 라이다 데이터와 카메라 데이터 읽어오기
이 예제에서는 rosbag 파일에서 영상 데이터와 포인트 클라우드 데이터를 읽고 저장하는 방법을 보여줍니다.
추천 예제
라이다 및 카메라 보정
이 예제에서는 3차원 라이다 센서와 카메라 간의 강체 변환을 추정한 다음 강체 변환 행렬을 사용하여 라이다 데이터와 카메라 데이터를 융합하는 방법을 보여줍니다.
Multi-Lidar Calibration
Calibrate multiple 3-D lidar sensors mounted on a vehicle to estimate a relative transformation between them. Traditional methods, such as marker-based registration, are difficult when the lidar sensors have a negligible overlap between their fields of view (FOVs). The calibration also becomes more difficult as the number of lidar sensors increases. This example demonstrates the use of the trajectories of individual lidar sensors to estimate the transformation between them. This method of calibration is also known as hand-eye calibration.
Detect Vehicles in Lidar Using Image Labels
Detect vehicles in lidar using label data from a co-located camera with known lidar-to-camera calibration parameters. Use this workflow in MATLAB® to estimate 3-D oriented bounding boxes in lidar based on 2-D bounding boxes in the corresponding image. You will also see how to automatically generate ground truth as a distance for 2-D bounding boxes in a camera image using lidar data. This figure provides an overview of the process.
레이다 데이터 및 라이다 데이터의 트랙에서의 수준 융합
이 예제에서는 레이다 센서와 라이다 센서의 측정값에서 객체 수준 트랙 목록을 생성하고 트랙 수준에서의 융합 방식을 사용하여 이들을 더욱더 융합하는 방법을 보여줍니다. 확장 객체 추적기를 사용하여 레이다 측정값을 처리하고 JPDA(Joint Probabilistic Data Association) 추적기를 사용하여 라이다 측정값을 처리합니다. 트랙 수준에서의 융합 방식을 사용하여 이러한 트랙을 더욱더 융합할 수 있습니다. 워크플로 구성도가 아래에 나와 있습니다.
