AI-Hub

#한국어 기계번역 # 시각 지능 기술 # 이미지 태깅

한국어 이미지 설명 데이터셋

분야미분류
유형 텍스트 , 이미지

갱신년월 : 2022-02 조회수 : 1,375 다운로드 : 112 용량 :

소개 파일 목록 (API 다운로드)

※ 내국인만 데이터 신청이 가능합니다.

데이터 토론 목록

데이터 변경이력

데이터 변경이력
버전	일자	변경내용	비고
1	2022-02-08	라벨링데이터 수정	1111

소개

MS COCO의 영어 캡션을 한국어 문장으로 번역
추후 국내 환경에 적합한 고품질 이미지 데이터 구축 필요

구축목적

해외 주요국가에서는 시각지능 분야에서 인공지능(AI) 기술개발을 위한 기계학습 데이터 구축 등 관련 인프라를 확보하여 개방
미국 ImageNet은 22,000개의 범주로 분류된 약 1,500만장의 이미지를 무료로 개방하여 시각 지능 기술 발전의 기초를 제공
국내 인공지능 기술의 활성화를 위해서는 무엇보다 기계학습에 활용할 다양한 패턴의 고품질 이미지 데이터 확보가 중요
기존 공개된 이미지 데이터베이스(ImageNet 등)에서 다루지 않은 국내 특화 서비스 및 데이터 개방을 위한 고유의 특성을 가진 이미지 데이터의 구축 필요

구축량
- MS COCO 캡셔닝 데이터(이미지 약 12만장) 1차 한국어 기계번역 완료, 기계번역 오류 수정

구축량

MS COCO 캡셔닝 데이터(이미지 약 12만장) 1차 한국어 기계번역 완료, 기계번역 오류 수정

대표 도면

한국어 이미지 설명 데이터셋-_대표 도면- 1

필요성

해외 주요국가에서는 시각지능 분야에서 인공지능(AI) 기술개발을 위한 기계학습 데이터 구축 등 관련 인프라를 확보하여 개방
미국 ImageNet은 22,000개의 범주로 분류된 약 1,500만장의 이미지를 무료로 개방하여 시각 지능 기술 발전의 기초를 제공
국내 인공지능 기술의 활성화를 위해서는 무엇보다 기계학습에 활용할 다양한 패턴의 고품질 이미지 데이터 확보가 중요
기존 공개된 이미지 데이터베이스(ImageNet 등)에서 다루지 않은 국내 특화 서비스 및 데이터 개방을 위한 고유의 특성을 가진 이미지 데이터의 구축 필요

구축 내용

한국어 이미지 설명 데이터셋- 구축 내용- 1

특허 데이터 구축내용 표 (구축년도,데이터종류,포함내용,제공방식)
1	빨간 헬멧을 쓴 남자가 작은 오토바이를 타고 비포장 도로에 있다
2	시골의 비포장 도로에서 오토바이를 타는 남자
3	오토바이 뒤에 탄 남자
4	오토바이 위에 젊은이가 탄 비포장 도로는 다리가 있는 초록빛 지역의 전경과 구름 낀 산의 배경이 있다
5	빨간 셔츠와 빨간 모자를 쓴 남자가 언덕 쪽 오토바이 위에 있다

MS COCO의 영어 캡션을 한국어 문장으로 번역
추후 국내 환경에 적합한 고품질 이미지 데이터 구축 필요

데이터 구조

JSON 구조의 메타정보로 이미지 연관 정보 전달 (UTF-8)


{ 
    "file_path": "val2014/COCO_val2014_000000391895.jpg",

    "id": 391895,

    "captions": [
        "A man with a red helmet on a small moped on a dirt road. ", 
        "Man riding a motor bike on a dirt road on the countryside.", 
        "A man riding on the back of a motorcycle.", 
        "A dirt path with a young person on a motor bike rests to the foreground of a verdant area with a bridge and a background of cloud-wreathed mountains. ", 
        "A man in a red shirt and a red hat is on a motorcycle on a hill side."
    ],

    "caption_ko": [
        "빨간 헬멧을 쓴 남자가 작은 오토바이를 타고 비포장 도로에 있.", 
        "시골의 비포장 도로에서 오토바이를 타는 남자", 
        "오토바이 뒤에 탄 남자", 
        "오토바이 위에 젊은이가 탄 비포장 도로는 다리가 있는 초록빛 지역의 전경과 구름 낀 산의 배경이 있다.", 
        "빨간 셔츠와 빨간 모자를 쓴 남자가 언덕 쪽 오토바이 위에 있다."
    ]
}

활용 예시

비전 정보기반 상황 설명
(1-1) 시각 장애인용 스마트 글래스
(1-2) 자동차 주행 중 측/후면 상황 설명
(1-3) 가정용/보안용 CCTV영상-음성 변환
(1-4) 영상 컨텐츠 자막 자동 생성
(1-5) 영상 컨텐츠 줄거리 요약

이미지 태깅
(2-1) 대량의 이미지 데이터셋 자동 생성 ex. 뉴럴 네트워크용 데이터셋
(2-2) 검색 엔진 등에서의 이미지 문장 검색 서비스
(2-3) 데일리 로그 자동 생성 (얼굴 인식,메타데이터(gps,촬영 시간 등) 정보를 함께 이용하여 촬영 영상의 설명을 자동 저장)

다운로드 폴더 구성정보

한국어 이미지 설명 데이터셋-다운로드 폴더 구성정보 이미지

데이터셋 구축 담당자

수행기관(주관) : 한국전자기술연구원

수행기관(주관)
책임자명	전화번호	대표이메일	담당업무
김보은	031-739-7459	kbe36@keti.re.kr

보건의료 데이터 개방 안내

보건의료 데이터는 온라인 및 오프라인 안심존을 통해 개방됩니다.

안심존이란 안심존 이용메뉴얼 안심존 이용신청

인터넷과 물리적으로 분리된 온라인·오프라인 공간으로 의료 데이터를 포함하여 보안 조치가 요구되는 데이터를 다운로드 없이 접근하고 분석 가능
* 온라인 안심존 : 보안이 보장된 온라인 네트워크를 통해 집, 연구실, 사무실 등 어디서나 접속하여 데이터에 접근하고 분석
* 오프라인 안심존 : 추가적인 보안이 필요한 데이터를 대상으로 지정된 물리적 공간에서만 접속하여 데이터에 접근하고 분석
1. AI 허브 접속
  신청자
2. 안심존
  사용신청신청자신청서류 제출*
3. 심사구축기관
4. 승인구축기관
5. 데이터 분석 활용신청자
6. 분석모델반출신청자
1. 기관생명윤리위원회(IRB) 심의 결과 통지서 [IRB 알아보기]
2. 기관생명윤리위원회(IRB) 승인된 연구계획서
3. 신청자 소속 증빙 서류 (재직증명서, 재학증명서, 근로계약서 등 택1)
4. 안심존 이용 신청서 [다운로드]
5. 보안서약서 [다운로드]
※ 상기 신청서 및 첨부 서류를 완비한 후 신청을 진행하셔야 정상적으로 절차가 이루어집니다.
신청 및 이용관련 문의는 safezone1@aihub.kr 또는 02-525-7708, 7709로 문의