Isaac Sim 설치 및 초기 설정 절차

Isaac Sim은 NVIDIA의 시뮬레이션 소프트웨어로, ROS2와 함께 자율주행 로봇 및 다양한 로봇 시스템을 개발하고 테스트할 수 있는 환경을 제공한다. 본 절에서는 Isaac Sim을 설치하고 초기 설정을 수행하는 절차를 단계별로 설명한다.

시스템 요구 사항

Isaac Sim을 설치하려면 우선 시스템이 요구하는 최소 사양을 충족해야 한다. Isaac Sim은 GPU 가속을 활용하므로 NVIDIA GPU가 필요하며, 최소 요구 사항은 다음과 같다.

• 운영 체제: Ubuntu 20.04 또는 22.04 LTS

• GPU: NVIDIA GPU, CUDA 11.3 이상 지원

• CPU: Intel Core i7 이상

• 메모리: 최소 16GB 이상의 RAM

• 디스크: 최소 50GB 이상의 여유 공간

• 필수 소프트웨어: Docker, NVIDIA Docker

Isaac Sim 설치 준비

먼저, Isaac Sim을 설치하기 전에 몇 가지 필수 소프트웨어를 준비해야 한다. Docker를 사용하여 설치할 것이므로, Docker와 NVIDIA Docker가 시스템에 설치되어 있어야 한다.

1. Docker 설치

Docker는 Isaac Sim을 컨테이너화된 환경에서 실행하기 위한 필수 도구이다. 아래 명령을 사용하여 Docker를 설치한다.

sudo apt update
sudo apt install -y docker.io

2. NVIDIA Docker 설치

NVIDIA GPU를 활용하여 Docker 컨테이너 내에서 GPU 가속을 사용할 수 있게 해주는 NVIDIA Docker도 설치해야 한다. NVIDIA의 공식 Docker 이미지를 사용하려면 nvidia-docker를 설치해야 한다.

sudo mkdir -p /etc/systemd/system/docker.service.d
sudo tee /etc/systemd/system/docker.service.d/override.conf <<EOF
[Service]
ExecStart=
ExecStart=/usr/bin/dockerd --host=fd:// --add-runtime=/usr/bin/nvidia-container-runtime
EOF

sudo systemctl daemon-reload
sudo systemctl restart docker

이렇게 설정하면 Docker가 NVIDIA GPU를 인식하고 이를 사용할 수 있다.

3. Docker 권한 설정

Docker를 실행할 때마다 sudo 권한을 입력하지 않으려면, Docker 그룹에 현재 사용자를 추가해야 한다.

sudo usermod -aG docker $USER

변경 사항이 반영되려면 로그아웃 후 재로그인하거나, 다음 명령을 사용하여 세션을 다시 로드한다.

newgrp docker

Isaac Sim Docker 이미지 다운로드

이제 NVIDIA의 공식 Isaac Sim Docker 이미지를 다운로드한다. NVIDIA의 NGC(NVIDIA GPU Cloud) 사이트에서 제공하는 이미지를 사용하여 최신 버전의 Isaac Sim을 설치할 수 있다. docker pull 명령어를 사용하여 이미지를 다운로드한다.

docker pull nvcr.io/nvidia/isaac-sim:2022.2

다운로드가 완료되면, Docker 컨테이너 내에서 Isaac Sim을 실행할 준비가 된다.

Isaac Sim 실행

Isaac Sim을 실행하려면 Docker를 사용하여 이미지를 실행하는데, 아래와 같은 명령어로 컨테이너를 실행할 수 있다. 이 명령은 기본적으로 NVIDIA GPU를 사용하여 Isaac Sim을 시작한다.

docker run --gpus all --rm -it --network host -v /tmp/omni:/tmp/omni nvcr.io/nvidia/isaac-sim:2022.2

여기서 중요한 부분은 --gpus all이다. 이는 모든 GPU를 컨테이너 내에서 사용할 수 있도록 지정하는 옵션이다. -v /tmp/omni:/tmp/omni 옵션은 파일 시스템을 마운트하여 컨테이너와 호스트 간에 데이터 공유가 가능하게 한다.

컨테이너가 실행되면 Isaac Sim의 GUI가 자동으로 시작된다.

초기 설정

Isaac Sim을 처음 실행하면, 몇 가지 초기 설정을 해야 한다. 초기 설정은 주로 프로젝트 환경을 설정하거나 기본 샘플을 로드하는 과정이다.

1. 환경 변수 설정

Isaac Sim을 원활하게 사용하기 위해서는 몇 가지 환경 변수를 설정해야 할 수 있다. ~/.bashrc 파일에 아래와 같은 환경 변수를 추가하여 설정을 완료할 수 있다.

export PATH=$PATH:/opt/isaac_sim/bin
export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:/opt/isaac_sim/lib

변경 사항을 반영하기 위해서 ~/.bashrc 파일을 다시 로드한다.

source ~/.bashrc

2. 프로젝트 생성

Isaac Sim을 시작할 때 기본 프로젝트를 로드하거나 새 프로젝트를 생성할 수 있다. 프로젝트 생성은 Isaac Sim의 UI에서 제공하는 마법사를 통해 쉽게 진행할 수 있다.

3. 로봇 모델 로드

Isaac Sim은 다양한 로봇 모델을 지원한다. 기본적으로 제공되는 로봇 모델이나 사용자가 만든 로봇 모델을 로드하여 시뮬레이션을 시작할 수 있다. 예를 들어, urdf 파일이나 sdf 파일 형식을 사용하여 로봇 모델을 로드할 수 있다.

ros2 launch isaac_sim_example urdf_robot_launch.py

이 명령어는 기본 URDF 형식의 로봇을 Isaac Sim에 로드하여 시뮬레이션을 시작한다.

ROS2와 Isaac Sim 연동 설정

Isaac Sim은 ROS2와의 연동을 지원한다. 이를 통해 ROS2에서 제공하는 다양한 기능을 Isaac Sim의 시뮬레이션 환경에서 활용할 수 있다. ROS2와 Isaac Sim을 연동하기 위해 몇 가지 설정이 필요하다.

1. ROS2 패키지 설치

Isaac Sim과 ROS2를 연동하려면 먼저 ROS2 패키지를 설치해야 한다. rosdep을 사용하여 필요한 의존성을 설치할 수 있다. ROS2 Humble 버전에서 Isaac Sim과의 연동을 위한 기본 패키지는 ros-isaac-bridge이다. 이를 설치하려면 아래 명령어를 사용한다.

sudo apt update
sudo apt install ros-humble-isaac-bridge

2. ROS2 워크스페이스 설정

ROS2 패키지를 설정하기 위해 ROS2 워크스페이스를 설정해야 한다. 워크스페이스는 ROS2 패키지들을 관리하는 구조로, 각종 ROS2 노드와 토픽을 설정하고 관리하는 곳이다. 워크스페이스를 설정하려면 다음 명령을 사용하여 워크스페이스 디렉토리를 생성하고 초기화한다.

mkdir -p ~/ros2_ws/src
cd ~/ros2_ws
colcon build
source install/setup.bash

위 명령은 ROS2 워크스페이스를 생성하고 빌드하는 과정이다. colcon build 명령을 통해 워크스페이스를 빌드하고, install/setup.bash를 통해 환경을 설정한다.

3. Isaac Sim과 ROS2 연결

Isaac Sim과 ROS2를 연결하기 위해서는, isaac_sim ROS2 패키지를 실행하여 Isaac Sim을 ROS2 환경과 연동해야 한다. 이를 위해 isaac_bridge 패키지를 실행하는 명령어를 입력한다.

ros2 launch isaac_sim_example isaac_sim_ros2_bridge_launch.py

위 명령어는 isaac_bridge를 통해 Isaac Sim과 ROS2 간의 연결을 설정한다. 이로써 Isaac Sim 내부의 로봇을 ROS2 시스템에서 제어하고, 센서 데이터를 ROS2 메시지로 받을 수 있다.

Isaac Sim 고급 설정

Isaac Sim의 고급 설정을 통해 시뮬레이션 환경을 더욱 세밀하게 제어할 수 있다. 고급 설정은 주로 로봇 제어, 센서 설정, 물리 엔진 튜닝 등을 포함한다.

1. 로봇 제어 설정

Isaac Sim에서는 ROS2와 통합된 로봇 제어 시스템을 사용하여 로봇을 제어할 수 있다. 기본적으로 제공되는 ROS2 토픽을 사용하여 로봇의 모션을 제어하거나, 개별적으로 사용자 정의된 메시지를 이용할 수도 있다.

예를 들어, cmd_vel 토픽을 사용하여 로봇의 속도를 제어하는 예시는 다음과 같다.

ros2 topic pub /robot/command_velocity geometry_msgs/msg/Twist "linear:
  x: 1.0
  y: 0.0
  z: 0.0
angular:
  x: 0.0
  y: 0.0
  z: 0.0"

위 명령어는 cmd_vel 토픽을 통해 로봇의 선형 속도를 설정하는 예제이다. 이 방식으로 로봇의 다양한 모션을 제어할 수 있다.

2. 센서 설정

Isaac Sim은 다양한 센서를 지원하며, 이 센서들은 ROS2 메시지로 데이터를 전송한다. 예를 들어, 라이다, 카메라, IMU 센서 등을 시뮬레이션할 수 있다. 각 센서는 sensor_msgs 형식으로 데이터를 송신하며, 이를 통해 외부 시스템에서 센서 데이터를 수집할 수 있다.

가장 기본적인 예로 카메라 센서 데이터를 ROS2에서 수신하려면 다음과 같이 카메라 토픽을 구독할 수 있다.

ros2 topic echo /robot/camera/image_raw

위 명령어는 로봇에 장착된 카메라 센서에서 제공하는 원시 이미지를 출력한다.

3. 물리 엔진 설정

Isaac Sim은 물리 엔진을 활용하여 로봇과 환경 간의 상호작용을 시뮬레이션한다. 기본적으로 PhysX 엔진을 사용하며, 물리 엔진의 다양한 매개변수를 설정하여 시뮬레이션의 정확도와 성능을 조절할 수 있다.

물리 엔진의 성능 조정은 Omniverse 플랫폼의 설정 파일을 통해 가능한다. 예를 들어, physx 설정을 통해 중력, 마찰 계수, 충돌 처리 방식 등을 설정할 수 있다.

{
  "gravity": [0.0, 0.0, -9.81],
  "friction_coefficient": 0.5,
  "collision_detection": "fast"
}

위 설정은 중력, 마찰 계수, 그리고 충돌 감지 방식을 정의한다. 이를 통해 실제 환경과 비슷한 물리적 상호작용을 구현할 수 있다.

4. 네트워크 설정

Isaac Sim은 분산 환경에서 여러 노드가 상호작용할 수 있도록 네트워크 설정을 지원한다. 분산 시뮬레이션 환경을 설정하기 위해서는 Isaac Sim의 네트워크 설정을 조정해야 하며, 이를 통해 여러 대의 컴퓨터에서 로봇 시뮬레이션을 동시에 실행할 수 있다.

{
  "network": {
    "type": "ethernet",
    "hostname": "robot_simulation_node"
  }
}

이와 같은 설정을 통해 네트워크를 통한 분산 시뮬레이션을 구현할 수 있다.

고급 설정 – 추가 기능 및 튜닝

Isaac Sim은 기본적인 시뮬레이션 환경 외에도 다양한 고급 기능을 제공하여 사용자가 더 정교하고 맞춤화된 시뮬레이션을 수행할 수 있도록 한다. 이 절에서는 추가적인 고급 기능들과 세부적인 튜닝 방법들을 다룬다.

1. 고급 센서 모델링

Isaac Sim은 다양한 센서 모델을 지원하며, 이들을 통해 시뮬레이션 환경에서 실시간으로 데이터를 처리하고 실험을 진행할 수 있다. 특히, Camera, Lidar, IMU, GPS 센서 모델을 사용할 수 있으며, 각 센서의 파라미터를 세밀하게 조정하여 현실적인 데이터를 생성할 수 있다.

예를 들어, 카메라 센서를 위한 설정은 아래와 같다:

{
  "sensor": "camera",
  "resolution": [1920, 1080],
  "fov": 90.0,
  "depth_enabled": true,
  "frame_rate": 30
}

위 설정에서는 카메라 센서의 해상도, 시야각(FOV), 깊이 정보 사용 여부, 프레임 레이트를 설정하고 있다. 이러한 설정을 통해 보다 정확한 시뮬레이션을 할 수 있으며, 로봇이 실제 환경에서 동작하는 방식을 유사하게 구현할 수 있다.

2. 다양한 로봇 모델 로드

Isaac Sim은 기본적으로 다양한 로봇 모델을 제공하며, 사용자가 직접 로봇을 설계하여 모델을 시뮬레이션할 수 있다. 기본적인 URDF(Universal Robot Description Format) 또는 SDF(Simulation Description Format) 파일을 로드하여, 로봇을 Isaac Sim 내에 배치하고 테스트할 수 있다. 예를 들어, URDF 파일을 사용하여 로봇 모델을 로드하는 방법은 다음과 같다:

ros2 launch isaac_sim_example urdf_robot_launch.py

이 명령어는 기본적으로 제공되는 URDF 형식의 로봇을 로드하고 시뮬레이션을 시작한다. 필요에 따라 urdf 파일을 수정하여 자신만의 로봇을 추가할 수 있다.

3. ROS2 서비스와 액션

Isaac Sim은 ROS2 서비스와 액션을 통해 다양한 제어 명령을 처리할 수 있다. 예를 들어, 로봇이 특정 작업을 완료할 때까지 기다리는 기능을 구현하려면 ROS2 액션을 사용할 수 있다. 액션은 긴 작업을 처리할 때 유용하며, 로봇의 경로 추적이나 특정 동작이 완료될 때까지 기다리도록 할 수 있다.

ros2 action send_goal /robot/move_to_position example_interfaces/action/Fibonacci "order: 10"

위 명령어는 액션 서버에 Fibonacci 메시지를 보내어 목표 지점으로 로봇을 이동시키는 예제이다.

4. Gazebo와의 연동

Isaac Sim은 기본적으로 NVIDIA의 PhysX 엔진을 사용하지만, 일부 경우 Gazebo와의 연동을 통해 물리 시뮬레이션을 병행할 수 있다. 이를 통해 고급 물리 모델링 및 다른 로봇 모델과의 연동이 가능해진다. Gazebo의 물리 엔진을 사용하면 더 복잡한 상호작용을 다룰 수 있으며, Gazebo의 센서와 데이터를 Isaac Sim에서 처리할 수 있다.

Gazebo를 사용하는 경우, ROS2와 Gazebo 간의 통신을 위한 gazebo_ros_pkgs 패키지를 설치하고 설정해야 한다. 예를 들어, Gazebo와 Isaac Sim을 연동하는 과정은 다음과 같다.

sudo apt-get install ros-humble-gazebo-ros-pkgs
ros2 launch gazebo_ros empty_world.launch.py

이 명령어는 Gazebo 환경을 실행하며, 이후 Isaac Sim과 연동하여 더 복잡한 시뮬레이션을 진행할 수 있다.

5. 실시간 시뮬레이션 성능 최적화

Isaac Sim에서 고급 시뮬레이션을 실행할 때 성능 최적화는 중요한 요소이다. 시뮬레이션의 속도와 효율성을 높이기 위해 다음과 같은 성능 최적화 기법을 사용할 수 있다.

• 고급 그래픽 설정 조정: Isaac Sim의 시뮬레이션 그래픽 설정을 낮춰서 성능을 개선할 수 있다. 예를 들어, 안티앨리어싱을 끄거나, 그림자 품질을 낮추는 등의 방법이 있다.

  {
    "graphics": {
      "antialiasing": false,
      "shadows": "low"
    }
  }

• 물리 엔진 튜닝: 물리 엔진에서 충돌 감지나 시뮬레이션의 해상도를 낮추어 시뮬레이션 속도를 높일 수 있다.

  {
    "physx": {
      "collision_detection": "medium",
      "sim_resolution": "low"
    }
  }

• 멀티스레딩 활용: 멀티코어 CPU를 활용하여 시뮬레이션을 병렬 처리할 수 있다. 여러 개의 시뮬레이션 스레드를 실행하여 CPU 자원을 효율적으로 사용할 수 있다.

6. 사용자 정의 플러그인 작성

Isaac Sim은 확장이 가능하며, 사용자 정의 플러그인을 작성하여 특정 기능을 추가할 수 있다. 예를 들어, 새로운 센서를 추가하거나, 로봇의 제어 알고리즘을 구현하여 시뮬레이션에 반영할 수 있다. C++ 또는 Python을 사용하여 플러그인을 작성할 수 있으며, 이를 통해 Isaac Sim의 기능을 더욱 세밀하게 조정할 수 있다.

예를 들어, 새로운 카메라 플러그인을 작성하는 경우, C++로 플러그인을 작성하고 Isaac Sim에 로드하여 사용할 수 있다. 이러한 플러그인은 시뮬레이션 환경을 확장하는 데 매우 유용하다.

전체적인 워크플로우

Isaac Sim을 설치하고 설정한 후, 로봇 모델을 생성하거나 로드하여 다양한 시뮬레이션을 시작할 수 있다. 초기 설정과 고급 설정을 통해 시뮬레이션 환경을 최적화하고, ROS2와의 연동을 통해 로봇 제어 및 센서 데이터를 처리할 수 있다. 또한, 고급 기능들을 활용하여 더욱 정밀하고 효율적인 시뮬레이션을 진행할 수 있다.