KETI 지능정보 플래그십 R&D

한국어 이미지 설명 데이터셋

외부 데이터는 해당 기관의 이용정책과 다운로드 절차를 따라야 하며 AI 허브와 관련이 없음을 알려 드립니다. [저작권 및 이용정책 상세보기]

구축량
  • MS COCO 캡셔닝 데이터(이미지 약 12만장) 1차 한국어 기계번역 완료, 기계번역 오류 수정
대표 도면
image

 

필요성
  • 해외 주요국가에서는 시각지능 분야에서 인공지능(AI) 기술개발을 위한 기계학습 데이터 구축 등 관련 인프라를 확보하여 개방
  • 미국 ImageNet은 22,000개의 범주로 분류된 약 1,500만장의 이미지를 무료로 개방하여 시각 지능 기술 발전의 기초를 제공
  • 국내 인공지능 기술의 활성화를 위해서는 무엇보다 기계학습에 활용할 다양한 패턴의 고품질 이미지 데이터 확보가 중요
  • 기존 공개된 이미지 데이터베이스(ImageNet 등)에서 다루지 않은 국내 특화 서비스 및 데이터 개방을 위한 고유의 특성을 가진 이미지 데이터의 구축 필요
구축 내용
image

 

특허 데이터 구축내용 표 (구축년도,데이터종류,포함내용,제공방식)
1 빨간 헬멧을 쓴 남자가 작은 오토바이를 타고 비포장 도로에 있다
2 시골의 비포장 도로에서 오토바이를 타는 남자
3 오토바이 뒤에 탄 남자
4 오토바이 위에 젊은이가 탄 비포장 도로는 다리가 있는 초록빛 지역의 전경과 구름 낀 산의 배경이 있다
5 빨간 셔츠와 빨간 모자를 쓴 남자가 언덕 쪽 오토바이 위에 있다
  • MS COCO의 영어 캡션을 한국어 문장으로 번역
  • 추후 국내 환경에 적합한 고품질 이미지 데이터 구축 필요 
데이터 구조
  • JSON 구조의 메타정보로 이미지 연관 정보 전달 (UTF-8)

{ 
    "file_path": "val2014/COCO_val2014_000000391895.jpg",

    "id": 391895,

    "captions": [
        "A man with a red helmet on a small moped on a dirt road. ", 
        "Man riding a motor bike on a dirt road on the countryside.", 
        "A man riding on the back of a motorcycle.", 
        "A dirt path with a young person on a motor bike rests to the foreground of a verdant area with a bridge and a background of cloud-wreathed mountains. ", 
        "A man in a red shirt and a red hat is on a motorcycle on a hill side."
    ],

    "caption_ko": [
        "빨간 헬멧을 쓴 남자가 작은 오토바이를 타고 비포장 도로에 있.", 
        "시골의 비포장 도로에서 오토바이를 타는 남자", 
        "오토바이 뒤에 탄 남자", 
        "오토바이 위에 젊은이가 탄 비포장 도로는 다리가 있는 초록빛 지역의 전경과 구름 낀 산의 배경이 있다.", 
        "빨간 셔츠와 빨간 모자를 쓴 남자가 언덕 쪽 오토바이 위에 있다."
    ]
}

활용 예시
  • 비전 정보기반 상황 설명
    (1-1) 시각 장애인용 스마트 글래스
    (1-2) 자동차 주행 중 측/후면 상황 설명
    (1-3) 가정용/보안용 CCTV영상-음성 변환
    (1-4) 영상 컨텐츠 자막 자동 생성
    (1-5) 영상 컨텐츠 줄거리 요약
  • 이미지 태깅
    (2-1) 대량의 이미지 데이터셋 자동 생성 ex. 뉴럴 네트워크용 데이터셋
    (2-2) 검색 엔진 등에서의 이미지 문장 검색 서비스
    (2-3) 데일리 로그 자동 생성 (얼굴 인식,메타데이터(gps,촬영 시간 등) 정보를 함께 이용하여 촬영 영상의 설명을 자동 저장)

데이터 구축 담당자 표 (담당기관, 책임자명, 전화번호, 대표이메일)
담당기관 책임자명 전화번호 대표이메일
전자부품연구원 김보은 · kbe36@keti.re.kr
다운로드 폴더 구성정보

데이터 다운로드는 PC에서만 가능합니다.