| [별지 제4호의2서식] |
| 프로그램등록신청명세서 |
| 프로그램종류코드 : | 4 | 2 | 8 | 7 | 0 |
| 1. 명칭 | 굴착기 VLA 학습데이터 구축 및 폐루프 평가 프로그램(ExcavatorVLA) 명칭은 제안값. 영문: Excavator VLA Training Data Construction and Closed-Loop Evaluation Program (ExcavatorVLA) | |
| 2. 주요내용 | 본 프로그램의 특징 | 굴착기 시뮬레이터의 카메라 영상·관절 상태·조작 명령을 시각-언어-행동(VLA) 모델 학습용 데이터셋으로 만들고, 범용 로봇 VLA 모델을 굴착기에 연결해 학습과 폐루프 평가까지 한 흐름으로 수행하는 연구용 소프트웨어 모델 가중치를 바꾸지 않고 입출력 변환 모듈로 연결하는 방식과 미세조정 방식을 같은 데이터 규격에서 비교할 수 있음 |
| 주요기능 | - 시뮬레이터 관측·명령 기록 (ROS 2 토픽 수신, 카메라·관절 상태·명령의 시각 정렬, 재생) - LeRobot v2.1 데이터셋 변환 (중간 형식 → 학습 데이터, 학습·검증 분할) - 데이터 품질 자동 검사·선별 (프레임 간격, 상태 공백, 카메라 증거, 구간 품질, 수집 런 승인) - VLA 모델 입출력 연동 (GR00T N1.7·π0.5 규격 변환, 정규화, 버킷 동작 어댑터) - 모델 미세조정·정책 서버 (외부 GPU 미세조정, 소켓 정책 서버, 오프라인 행동 일치 평가) - 폐루프 제어·자동 판정 (단계별 정책 명령 발행, 추론 중 시뮬레이터 시간 정지 동기화, 굴착 단계 성공·실패 사유 판정) - 지형 높이 격자 생성 (LiDAR 격자 입력 준비) | |
| 사용방법 | 1) bootstrap_gr00t.sh / bootstrap_openpi.sh 로 고정 버전 모델 환경 구성 2) 시뮬레이터 실행 후 observe_commanded_r14b.py 로 관측·명령 기록 3) production_dig_v2.py·lerobot_from_intermediate.py 로 데이터셋 변환, admit_dig_run_v3.py 로 품질 검사 4) gr_g5_finetune_dig_v3.py / pi05_g5_finetune_dig_v2.py 로 미세조정 후 정책 서버 시작 5) commanded_stage_policy_dig_sync_v3.py 로 폐루프 제어, judge_dig_policy_v4x.py 로 결과 판정 | |
| 2. 필요한 프로그램 | Ubuntu 22.04 LTS, Python 3.10 이상, ROS 2 Humble, NumPy·PyArrow·Pillow, FFmpeg 모델 연동: Isaac-GR00T N1.7(Python 3.12, PyTorch), openpi π0.5(Python 3.11, JAX), LeRobot, Hugging Face Hub, NVIDIA GPU(CUDA) 굴착기 시뮬레이터 APEX HR35(Unity, 별도 프로그램), 로봇팔 기준 검증 시 LIBERO | |
| 3. 규모(line, byte) | 44,933 lines, 2,719,660 byte (소스 214개 파일) 등록용 복사본 기준(개인 경로 정리 후). Python 161, Shell 16, JSON 36, TOML 1. 등록용 소스 묶음(2026-11-14 생성)에서 파일 수·byte 재확인(2026-11-16). 등록 대상은 2026-11-12 판(1.0판, 214개 파일)으로 확정 제안. 이후 추가된 실험 기능(관로 굴착용 지형 지도 입력·교사 제어기와 진입 유지 시간 수정, 지시문 하나로 동작을 잇는 스스로 전환, 비VLA 기준선 학습·서버, 굴착 단면 영상 도구)은 아직 시험 중인 미확정 코드여서 넣지 않음(추후 개작 등록 후보). | |
*프로그램 종류 코드(※반드시 입력코드로 작성해주시기 바랍니다.)
| 대분류 | 중분류 | 소분류 | 입력 코드 | 참고 (구) 코드 |
|---|---|---|---|---|
| 응용 S/W | 사무관리 | 그룹웨어 | 42105 | 111 |
| 통합슈트 S/W | 42110 | 112 | ||
| 문서작성 S/W | 42115 | 113 | ||
| 스프레드쉬트 | 42120 | 114 | ||
| 프리젠테이션 | 42125 | 115 | ||
| 기업포털솔루션(EIP) | 42130 | 116 | ||
| 최종 사용자용 DBMS | 42135 | 117 | ||
| 기타 사무관리 S/W | 42190 | 119 | ||
| 과학기술 | 시뮬레이션 S/W | 42210 | 121 | |
| 통계분석용 S/W | 42220 | 122 | ||
| 수치계산용 S/W | 42230 | 123 | ||
| 기타 과학용 S/W | 42240 | 129 | ||
| 교육 | CAI S/W | 42310 | 131 | |
| On-Line 교육 S/W | 42320 | 132 | ||
| Off-Line 교육 S/W | 42330 | 133 | ||
| 교육용 저작도구 S/W | 42340 | 134 | ||
| 기타 교육용 S/W | 42350 | 139 | ||
| 오락 | 게임 저작도구 S/W | 42410 | 141 | |
| On-Line 게임 S/W | 42420 | 142 | ||
| Off-Line 게임 S/W | 42430 | 143 | ||
| 기타 게임 S/W | 42440 | 149 | ||
| 기업관리 | ERP S/W | 42510 | 151 | |
| 재무, 회계관리 S/W | 42520 | 152 | ||
| 인사, 급여관리 S/W | 42530 | 153 | ||
| 공급망관리 S/W(SCM) | 42540 | 154 | ||
| 생산, 현장관리 S/W | 42550 | 155 | ||
| 고객관계관리 S/W(CRM) | 42560 | 156 | ||
| 기타 기업관리용 S/W | 42570 | 159 | ||
| 컨텐츠 개발용 S/W | 멀티미디어 저작도구 | 42610 | 161 | |
| Web 저작도구 | 42620 | 162 | ||
| 그래픽용 S/W | 42630 | 163 | ||
| 기타 컨텐츠 개발용 S/W | 42640 | 169 | ||
| 프로그램 개발용 S/W | GUI 개발 도구 | 42710 | 171 | |
| Client-Server 개발 도구 | 42720 | 172 | ||
| 지식처리시스템 개발 도구 | 42730 | 173 | ||
| Case Tool | 42740 | 174 | ||
| 웹 개발 도구 | 42750 | 175 | ||
| 기타 프로그램 개발용 S/W | 42760 | 179 | ||
| 산업용 S/W | CAD/CAM/CAE 용 S/W | 42810 | 181 | |
| 공정제어용 S/W | 42820 | 182 | ||
| 지리정보시스템(GIS) S/W | 42830 | 183 | ||
| 전자상거래(EC) S/W | 42840 | 184 | ||
| 전자데이터교환(EDI) S/W | 42850 | 185 | ||
| 의료용 S/W | 42860 | 186 | ||
| 기타 산업용 S/W | 42870 | 189 | ||
| 기타 | 기타 S/W | 42990 | 199 |
| 대분류 | 중분류 | 소분류 | 입력 코드 | 참고 (구) 코드 |
|---|---|---|---|---|
| 시스템 S/W | 제어 프로그램 | Windows 계열 | 43110 | 211 |
| Unix 계열 | 43120 | 212 | ||
| Linux 계열 | 43130 | 213 | ||
| MOS 계열 | 43140 | 214 | ||
| DOS 계열 | 43150 | 215 | ||
| 기타 운영체제 S/W | 43160 | 219 | ||
| 언어처리 | 자연어처리 S/W | 43210 | 221 | |
| 컴파일러 S/W | 43220 | 222 | ||
| 기타 언어처리 S/W | 43230 | 229 | ||
| 유틸리티 | 분산처리 S/W | 43310 | 231 | |
| 트랜잭션관리 S/W | 43320 | 232 | ||
| 시스템 지원 S/W | 43330 | 233 | ||
| 시스템 관리 S/W | 43340 | 234 | ||
| 기타 유틸리티 S/W | 43350 | 239 | ||
| 데이터 통신 | 통신망 관리 S/W | 43410 | 241 | |
| 유․무선 통신 프로토콜 지원 S/W | 43420 | 242 | ||
| 유․무선 통신 응용 S/W | 43430 | 243 | ||
| 기타 통신 S/W | 43440 | 249 | ||
| 데이터 베이스 | RDBMS | 43510 | 251 | |
| OODBMS | 43520 | 252 | ||
| ORDBMS | 43530 | 253 | ||
| 기타 DBMS | 43540 | 259 | ||
| 보안 S/W | 침입차단 S/W | 43610 | 261 | |
| 침입탐지 S/W | 43620 | 262 | ||
| 데이터보안 S/W | 43630 | 263 | ||
| PC보안 S/W | 43640 | 264 | ||
| 인증관리 S/W | 43650 | 265 | ||
| 바이러스 백신 S/W | 43660 | 266 | ||
| 보안관리 S/W | 43670 | 267 | ||
| 기타 보안 S/W | 43680 | 269 | ||
| 미들웨어 | 전송스택 미들웨어 | 43710 | 271 | |
| 트랜잭션관리 미들웨어 | 43720 | 272 | ||
| 그룹웨어 미들웨어 | 43730 | 273 | ||
| 기타 미들웨어 | 43740 | 279 | ||
| 기타 | 기타 시스템 S/W | 43990 | 299 |