최종본(안) · 공개 검토용 사본2026-11-16 · ExcavatorVLA · 인쇄하면 이 띠와 주석은 빠짐 사용자 확인 필요(제안값) 빈칸(사용자 입력) 확정: 과제 NK264F · 비공개 · 비상업용 · 미정: 발명자 명단·지분율 (IPS 입력, 명세서에는 칸 없음)
[별지 제4호의2서식]
프로그램등록신청명세서
프로그램종류코드 :42870
제안 42870 기타 산업용 S/W (대안 42730 지식처리시스템 개발 도구). 42210 시뮬레이션 S/W는 권하지 않음: 시뮬레이터 자체는 등록 범위 밖.
 1. 명칭

굴착기 VLA 학습데이터 구축 및 폐루프 평가 프로그램(ExcavatorVLA)

명칭은 제안값. 영문: Excavator VLA Training Data Construction and Closed-Loop Evaluation Program (ExcavatorVLA)
 2. 주요내용본 프로그램의
특징

굴착기 시뮬레이터의 카메라 영상·관절 상태·조작 명령을 시각-언어-행동(VLA) 모델 학습용 데이터셋으로 만들고, 범용 로봇 VLA 모델을 굴착기에 연결해 학습과 폐루프 평가까지 한 흐름으로 수행하는 연구용 소프트웨어

모델 가중치를 바꾸지 않고 입출력 변환 모듈로 연결하는 방식과 미세조정 방식을 같은 데이터 규격에서 비교할 수 있음

주요기능

- 시뮬레이터 관측·명령 기록 (ROS 2 토픽 수신, 카메라·관절 상태·명령의 시각 정렬, 재생)

- LeRobot v2.1 데이터셋 변환 (중간 형식 → 학습 데이터, 학습·검증 분할)

- 데이터 품질 자동 검사·선별 (프레임 간격, 상태 공백, 카메라 증거, 구간 품질, 수집 런 승인)

- VLA 모델 입출력 연동 (GR00T N1.7·π0.5 규격 변환, 정규화, 버킷 동작 어댑터)

- 모델 미세조정·정책 서버 (외부 GPU 미세조정, 소켓 정책 서버, 오프라인 행동 일치 평가)

- 폐루프 제어·자동 판정 (단계별 정책 명령 발행, 추론 중 시뮬레이터 시간 정지 동기화, 굴착 단계 성공·실패 사유 판정)

- 지형 높이 격자 생성 (LiDAR 격자 입력 준비)

사용방법

1) bootstrap_gr00t.sh / bootstrap_openpi.sh 로 고정 버전 모델 환경 구성

2) 시뮬레이터 실행 후 observe_commanded_r14b.py 로 관측·명령 기록

3) production_dig_v2.py·lerobot_from_intermediate.py 로 데이터셋 변환, admit_dig_run_v3.py 로 품질 검사

4) gr_g5_finetune_dig_v3.py / pi05_g5_finetune_dig_v2.py 로 미세조정 후 정책 서버 시작

5) commanded_stage_policy_dig_sync_v3.py 로 폐루프 제어, judge_dig_policy_v4x.py 로 결과 판정

 2. 필요한 프로그램

Ubuntu 22.04 LTS, Python 3.10 이상, ROS 2 Humble, NumPy·PyArrow·Pillow, FFmpeg

모델 연동: Isaac-GR00T N1.7(Python 3.12, PyTorch), openpi π0.5(Python 3.11, JAX), LeRobot, Hugging Face Hub, NVIDIA GPU(CUDA)

굴착기 시뮬레이터 APEX HR35(Unity, 별도 프로그램), 로봇팔 기준 검증 시 LIBERO

 3. 규모(line, byte)

44,933 lines, 2,719,660 byte (소스 214개 파일)

등록용 복사본 기준(개인 경로 정리 후). Python 161, Shell 16, JSON 36, TOML 1. 등록용 소스 묶음(2026-11-14 생성)에서 파일 수·byte 재확인(2026-11-16). 등록 대상은 2026-11-12 판(1.0판, 214개 파일)으로 확정 제안. 이후 추가된 실험 기능(관로 굴착용 지형 지도 입력·교사 제어기와 진입 유지 시간 수정, 지시문 하나로 동작을 잇는 스스로 전환, 비VLA 기준선 학습·서버, 굴착 단면 영상 도구)은 아직 시험 중인 미확정 코드여서 넣지 않음(추후 개작 등록 후보).
210mm×297mm(일반용지 60g/㎡(재활용품))

*프로그램 종류 코드(※반드시 입력코드로 작성해주시기 바랍니다.)

대분류중분류소분류입력 코드참고
(구) 코드
응용
S/W
사무관리그룹웨어42105111
통합슈트 S/W42110112
문서작성 S/W42115113
스프레드쉬트42120114
프리젠테이션42125115
기업포털솔루션(EIP)42130116
최종 사용자용 DBMS42135117
기타 사무관리 S/W42190119
과학기술시뮬레이션 S/W42210121
통계분석용 S/W42220122
수치계산용 S/W42230123
기타 과학용 S/W42240129
교육CAI S/W42310131
On-Line 교육 S/W42320132
Off-Line 교육 S/W42330133
교육용 저작도구 S/W42340134
기타 교육용 S/W42350139
오락게임 저작도구 S/W42410141
On-Line 게임 S/W42420142
Off-Line 게임 S/W42430143
기타 게임 S/W42440149
기업관리ERP S/W42510151
재무, 회계관리 S/W42520152
인사, 급여관리 S/W42530153
공급망관리 S/W(SCM)42540154
생산, 현장관리 S/W42550155
고객관계관리 S/W(CRM)42560156
기타 기업관리용 S/W42570159
컨텐츠 개발용 S/W멀티미디어 저작도구42610161
Web 저작도구42620162
그래픽용 S/W42630163
기타 컨텐츠 개발용 S/W42640169
프로그램 개발용 S/WGUI 개발 도구42710171
Client-Server 개발 도구42720172
지식처리시스템 개발 도구42730173
Case Tool42740174
웹 개발 도구42750175
기타 프로그램 개발용 S/W42760179
산업용 S/WCAD/CAM/CAE 용 S/W42810181
공정제어용 S/W42820182
지리정보시스템(GIS) S/W42830183
전자상거래(EC) S/W42840184
전자데이터교환(EDI) S/W42850185
의료용 S/W42860186
기타 산업용 S/W42870189
기타기타 S/W42990199
대분류중분류소분류입력 코드참고
(구) 코드
시스템
S/W
제어 프로그램Windows 계열43110211
Unix 계열43120212
Linux 계열43130213
MOS 계열43140214
DOS 계열43150215
기타 운영체제 S/W43160219
언어처리자연어처리 S/W43210221
컴파일러 S/W43220222
기타 언어처리 S/W43230229
유틸리티분산처리 S/W43310231
트랜잭션관리 S/W43320232
시스템 지원 S/W43330233
시스템 관리 S/W43340234
기타 유틸리티 S/W43350239
데이터 통신통신망 관리 S/W43410241
유․무선 통신 프로토콜 지원 S/W43420242
유․무선 통신 응용 S/W43430243
기타 통신 S/W43440249
데이터 베이스RDBMS43510251
OODBMS43520252
ORDBMS43530253
기타 DBMS43540259
보안 S/W침입차단 S/W43610261
침입탐지 S/W43620262
데이터보안 S/W43630263
PC보안 S/W43640264
인증관리 S/W43650265
바이러스 백신 S/W43660266
보안관리 S/W43670267
기타 보안 S/W43680269
미들웨어전송스택 미들웨어43710271
트랜잭션관리 미들웨어43720272
그룹웨어 미들웨어43730273
기타 미들웨어43740279
기타기타 시스템 S/W43990299