BETA 일상생활 작업 및 명령 수행 데이터(임무수행 명령어) (2023)
- 분야영상이미지
- 유형 3D
-
데이터 변경이력
데이터 변경이력 버전 일자 변경내용 비고 1.0 2024-06-28 데이터 개방 Beta Version 데이터 히스토리
데이터 히스토리 일자 변경내용 비고 2024-06-28 산출물 공개 Beta Version 소개
- 한국형 일상생활 작업 및 명령 임무수행 명령어 데이터
구축목적
- 국내 인공지능 에이전트 및 로봇 산업 분야에 활용하여 기술발전을 도모할 수 있는 한국형 임무수행 명령어 데이터 구축
-
메타데이터 구조표 데이터 영역 영상이미지 데이터 유형 3D 데이터 형식 포맷 : TXT, PNG 메타정보 : json 데이터 출처 데이터 수집/정제: 솔트룩스㈜, ㈜미디어그룹사람과숲 데이터 가공: ㈜미디어그룹사람과숲 라벨링 유형 Semantic Segmentation, Instance Segmentation, Depth 라벨링 형식 JSON 데이터 활용 서비스 일상생활과 관련된 장소에서 객체와의 상호작용을 통해 임무를 수행하는 에이전트의 객체 인지 능력을 향상하기 위한 AI 응용서비스, 제품 알고리즘 개발 데이터 구축년도/
데이터 구축량2023년/230,000건 -
- 데이터 구축 규모
구분 데이터 규모 합계 2023년 구축 명령어 데이터 230,000 230,000 - 데이터 분포
수집분포 수량 구축 비율 집어서 놓기 Pick&Place 88,095 38.09% 연속 집어서 놓기 PickTwo&Place 24,750 10.80% 담아서 놓기 Stack&Place 52,455 22.89% 잘라서 놓기 Cut&Place 9,200 4.01% 씻어서 놓기 Clean&Place 13,620 5.94% 가열해서 놓기 Heat&Place 11,900 5.19% 냉각해서 놓기 Cool&Place 14,050 6.13% 살펴보기 Examine 15,930 6.95% 2023년 구축 합계 230,000 100% -
-
AI 모델 상세 설명서 다운로드
AI 모델 상세 설명서 다운로드 AI 모델 다운로드- 학습 모델
구분 내용 MOCHA 품질지표 Unseen SR 선행연구 알프레드의 리더보드 상위 30위 이내
성능 목표치 달성 관련 논문지표기준 30% 이상 - AI모델 활용 분야
ㅇ 구축될 데이터를 통해 로봇, 키오스크, 자율주행, 챗봇 등 다양한 산업 및 연구 분야에 활용
-인공지능 로봇 공학, 자율머신, 증강현실(AR), 가상현실(VR), 혼합현실(MR)
-AI 및 컴퓨터 기술(딥러닝, 강화 학습, 컴퓨터그래픽 등)의 발전과 하드웨어의 발전(고성능 GPU, 3D 카메라, LiDAR센서 등)
ㅇ 연구 분야
- 3D 데이터 모델링 연구
- 한국형 3D 공간, 물체, 작업수행 구성요소 연구
- 실제 세계 기반 혼합현실 연구
- 인공지능 로봇 임무 구성요소 연구
ㅇ 산업 분야
- 건축물 유형 별 공간 체험
- 실시간 한국형 3D 데이터 연계 기술 등
- 로봇 배달 시스템 솔루션
- 공업단지 스마트 작업 로봇 연구 등 -
설명서 및 활용가이드 다운로드
데이터 설명서 다운로드 구축활용가이드 다운로드- 데이터 구성
항목 타입 필수 작성예시 한글명 영문명 명령어 정보 Task Object Y - 명령어ID TaskId String Y "CR100S024_ClP_0001" 명령어 타입 TaskType String Y "Clean & Place" 명렁어 TaskName array Y "감자를 깨끗하게 씻어서 냉동고에 올려두세요.",
"감자를 냉동고 위에 씻어서 올려주세요.",
"감자를 세척해서 냉동고에 놓아줘.",
"감자는 씻어서 냉동고에 올려두세요.",
"감자를 깨끗이 씻어서 냉동고로 옮겨주세요."어노테이션 Task_Anns array Y - 세부 명령어 HighIdx array Y "감자가 있는 곳으로 가세요.",
"감자 앞에서 정지!",
"감자를 쳐다보세요.",
"감자를 집어요.",
"감자를 세척하세요.",
"감자를 냉동고에 내려놓아요.",
"완료"명령어 수행 Action object Y - 이미지 파일명 ImageFileName string Y "tCR100S024_ClP_0001_step0.camera.png 세그멘테이션 파일명 SegmentationFileName string Y "CR100S024_ClP_0001_step0.camera.
semantic segmentation.json"명령어 세부동작 Instruction string Y "01_오브젝트로 가라_000" - 어노테이션 포맷
No 속성명 타입 필수여부 속성 설명 예시 1 Task object Y 명령어 정보 - 1-1 TaskId string Y 명령어ID "CR100S024_ClP_0001" 1-2 TaskType string Y 명령어타입 "Clean & Place" 1-3 TaskName array Y 명령어 "감자를 깨끗하게
씻어서 냉동고에
올려두세요.", ...1-4 Task_Anns string Y 명령어 어노테이션 - 1-4-1 HighIdx array Y 세부명령어 "감자가 있는 곳으로
가세요.",...2 Action array Y 명령어수행 - 2-1 ImageFileName string Y 이미지파일명 "CR100S024_ClP_0
001_step0.camera.png"2-2 SegmentationFileName string Y 세그멘테이면파일명 "CR100S024_ClP_0001_step0.camera.
semantic segmentation.json"2-3 Instruction string Y 명령어수행세부동작 "01_오브젝트로 가라_000" - 데이터 포맷
가) 데이터 포맷 및 규모
구분 데이터 포맷 데이터 내용 데이터 규모 원천 데이터 TXT 명령어 텍스트 230,000 PNG 명령어 step별 수행 이미지 라벨링 데이터 JSON 명령어 타입, 명령어 및
step별 action수행 지시구,
세그멘테이션 좌표값
나) json 실제 예시
{
"Object_Info": [
{
"ItemId": [
"FNUA1046",
"FNUA1103"
],
"MainCategory": "가구",
"Class": "테이블",
"3DModelingData_Info": {
"Copyright": "Human&Forest Co.Ltd",
"GenerationDate": "2023-8-23",
"DataExtension": "fbx"
},
"Attribute_Info": {
"IsAffordance": true,
"IsVisible": true,
"IsObstructed": false,
"IsOpenable": false,
"IsOpen": false,
"IsToggleable": false,
"IsToggled": false,
"IsBreakable": false,
"IsBroken": false,
"IsCanFillWithLiquid": false,
"IsFillWithLiquid": false,
"IsDirtyable": false,
"IsDirty": false,
"IsCanBeUsedUp": false,
"IsUsedUp": false,
"IsCookable": false,
"IsCooked": false,
"IsCanChangeTempToHot": false,
"IscanChangeTempToCold": false,
"IsSliceable": false,
"IsSliced": false,
"IsPickUpable": false,
"IsMoveable": true
}
}, -
데이터셋 구축 담당자
수행기관(주관) : ㈜미디어그룹사람과숲
수행기관(주관) 책임자명 전화번호 대표이메일 담당업무 김상진 02-830-8530 sjkim@humanf.co.kr 사업총괄 및 관리 수행기관(참여)
수행기관(참여) 기관명 담당업무 비플라이소프트㈜ 데이터 품질관리 ㈜솔트룩스 데이터 품질관리 위프코㈜ 데이터 수집 한알음정보㈜ 데이터 가공 및 검수 데이터 관련 문의처
데이터 관련 문의처 담당자명 전화번호 이메일 김상진 02-330-3530 sjkim@humanf.co.kr 송새롬 02-330-3530 romsaesong@humanf.co.kr AI모델 관련 문의처
AI모델 관련 문의처 담당자명 전화번호 이메일 김상진 02-330-3530 sjkim@humanf.co.kr 저작도구 관련 문의처
저작도구 관련 문의처 담당자명 전화번호 이메일 김상진 02-330-3530 sjkim@humanf.co.kr 김하나 02-330-3530 hana@humanf.co.kr
-
인터넷과 물리적으로 분리된 온라인·오프라인 공간으로 의료 데이터를 포함하여 보안 조치가 요구되는 데이터를 다운로드 없이 접근하고 분석 가능
* 온라인 안심존 : 보안이 보장된 온라인 네트워크를 통해 집, 연구실, 사무실 등 어디서나 접속하여 데이터에 접근하고 분석
* 오프라인 안심존 : 추가적인 보안이 필요한 데이터를 대상으로 지정된 물리적 공간에서만 접속하여 데이터에 접근하고 분석 -
- AI 허브 접속
신청자 - 안심존
사용신청신청자신청서류 제출* - 심사구축기관
- 승인구축기관
- 데이터 분석 활용신청자
- 분석모델반출신청자
- AI 허브 접속
-
1. 기관생명윤리위원회(IRB) 심의 결과 통지서 [IRB 알아보기] [공용IRB 심의신청 가이드라인]
2. 기관생명윤리위원회(IRB) 승인된 연구계획서
3. 신청자 소속 증빙 서류 (재직증명서, 재학증명서, 근로계약서 등 택1)
4. 안심존 이용 신청서 [다운로드]
5. 보안서약서 [다운로드]
※ 상기 신청서 및 첨부 서류를 완비한 후 신청을 진행하셔야 정상적으로 절차가 이루어집니다. -
신청 및 이용관련 문의는 safezone1@aihub.kr 또는 02-525-7708, 7709로 문의
데이터셋 다운로드 승인이 완료 된 후 API 다운로드 서비스를 이용하실 수 있습니다.
API 다운로드 파일은 분할 압축되어 다운로드 됩니다. 분할 압축 해제를 위해서는 분할 압축 파일들의 병합이 필요하며 리눅스 명령어 사용이 필요합니다.
리눅스 OS 계열에서 다운로드 받으시길 권장하며 윈도우에서 파일 다운로드 시 wsl(리눅스용 윈도우 하위 시스템) 설치가 필요합니다.
※ 파일 병합 리눅스 명령어
find "폴더경로" -name "파일명.zip.part*" -print0 | sort -zt'.' -k2V | xargs -0 cat > "파일명.zip"
- 해당 명령어 실행 시, 실행 경로 위치에 병합 압축 파일이 생성됩니다.
- 병합된 파일 용량이 0일 경우, 제대로 병합이 되지 않은 상태이니 "폴더경로"가 제대로 입력되었는지 확인 부탁드립니다.
※ 데이터셋 소개 페이지에서 다운로드 버튼 클릭하여 승인이 필요합니다.