AI-Hub

데이터 변경이력

데이터 히스토리

소개

- 국가유산진흥원, 국립중앙박물관 등에서 제공한 데이터와 서울, 경기도에서 직접 활영한 원천유물데이터에서 건축, 문화재, 생활소품 등에 이용되는 한국 전통 문양 이미지 생성을 위한 초거대 AI 학습용 데이터 구축
- 객체 및 문양 이미지 데이터 24,536장, 문양 이미지 데이터 24,536장, 한글 이미지 캡션 278,803 문장(2,726,576 어절), 영어 이미지 캡션 262,024 문장(3,737,512 어절) 구축

구축목적

- 건축, 문화재, 생활소품 등에 이용되는 한국 전통 문양 이미지 생성을 위한 초거대 AI 학습용 데이터 구축하여, 한글 및 영문 텍스트 입력을 통한 한국 전통 문양 이미지 생성
- AI를 활용한 전통 문양 시제품 제작하고, 한국 전통 문양의 디지털화 및 문화적 정체성과 전통성 확보

○ 클래스별 데이터 구축 수량

○ 문양 형태별 데이터 분포

○ 이미지 캡션 문장/어절 데이터 분포

 문양 용도별 분포

○ 문양 재질별 분포

○ 문양 시대별 분포

○ 문양 수집 방법별 분포

저작도구 설명서 및 저작도구 다운로드

AI 모델 상세 설명서 다운로드

ㅇ임무 정의
- 한글 및 영문 텍스트 입력을 통한 한국 전통 문양이 그려진 건축물, 생활소품 등의 신규 2D이미지 생성

ㅇ 임무 선정 사유
- Text To Image 방식의 대표적인 이미지 생성 인공지능 모델의 대표적인 방식으로 구축 전통문양의 이미지-텍스트 쌍의 데이터를 활용하여 학습모델 구축
- 구축한 한국 전통 문양 이미지-텍스트 쌍 학습 데이터를 text to image 인공지능 모델을 통해 학습하고 한글 및 영문 텍스트 입력을 통해 한국 전통 문양이 그려진 신규 이미지 결과가 올바르게 생성되는지를 확인하여 구축 데이터에 대한 유효성을 검증

ㅇ학습 모델 개발 환경
- 학습 환경: CentOS, Python, Pytorch, GPU
- 모델리소스 및 자원 활용: 고성능 GPU 서버를 사용하여 모델 학습을 진행
- 모델 개발: 1-Cycle 자가 점검 계획에 맞춰 모델 개발
- 성능 지표 결과를 통해 가장 성능이 우수한 모델로 최종 선정

ㅇ최종 선정 모델
- Bingsu/my-korean-stable-diffusion-v1-5
   * Stable Diffusion 1.5 버전에 대해서 한국어 CLIP 모델을 사용하여 Diffusion 모델의 Tokenizer 와 Text Encoder를 대체한 모델
   * Stable Diffusion 1.5 의 라이센스인 CreativeML Open RAIL-M을 따르는 오픈소스 모델로서 영어 및 한국어 처리를 위해 적합한 모델
   * Hugging Face 사이트로부터 다운로드 가능

 [ my-korean-stable-diffusion-v1-5 모델 ]

   * Stable Diffusion 모델
● 2022년 Stability AI에서 오픈소스 라이선스로 배포한 이미지 생성 모델
● Text2image은 물론 image2image, depth2img 등 이미지 처리와 관련된 생성형 인공지능 모델로 폭넓게 활용되고 있음
● Creative ML OpenRAIL-M 라이선스에 따라 수정된 소프트웨어를 사용, 변경 및 재배포할 수 있음
● 모델의 접근성 및 사용성이 높기 때문에 인공지능 개발자 커뮤니티에서의 폭넓게 활용되고 있어 모델 활용성이 뛰어남

[ Stable Diffusion 모델의 구조 ]

ㅇ학습 데이터 생성
    - 학습 데이터 이미지 전처리
       * 이미지 리사이징(512*512)
       * 균등 패딩 적용
    - 학습 데이터 포맷 변경 및 분할(9:1 로 분할)
       * train – 전처리 이미지, metadata.jsonl
       * test - 전처리 이미지, metadata.jsonl

[ 학습데이터 생성 예시 ]

 ㅇAI 모델 성능

설명서 및 활용가이드 다운로드

○ 라벨링데이터1(객체 및 문양 이미지 캡셔닝) 포멧

○ 라벨링데이터2(문양 이미지 캡셔닝)

○ 메타 데이터

○ json 예시(객체 및 문양 이미지 캡셔닝)

{
  "images": {
    "object_file_name": "MH_IG_0001_A1",
    "pattern_file_name": "MH_IG_0001_S1",
    "format": "jpg",
    "object_img_resolution": "1080, 1080",
    "pattern_img_resolution": "1080, 1080",
    "collect": "이미지DB",
    "photo_date": "",
    "photo_equipment": "",
    "relic_name_kor": "석탑",
    "relic_name_eng": "stone pagoda",
    "relic_common_name_kor": "",
    "relic_common_name_eng": "",
    "era_id": "GR",
    "era": "고려",
    "pattern_usage_id": "MH",
    "pattern_usage": "문화재",
    "pattern_usage_detail": "",
    "pattern_type_id": "IG",
    "pattern_type": "인공물문",
    "pattern_type_detail_kor": "",
    "pattern_type_detail_eng": "",
    "pattern_symbol": "청정, 고결함",
    "material": "석재",
    "relic_no": "PS002058",
    "color": "다자색",
    "source": "국립부여박물관",
    "description": "석탑라는 이름의 이 탑은 한국전통문화유산의 대표적인 사례로, 연꽃봉우리문을 통해 더 깊은 의미를 전달한다. 전통적인 건축물과 문화재에서의 의미 있는 사용 사례로, 한국의 문화와 역사를 엿볼 수 있다."
  },
  "caption_kor": {
    "context_kor": "이 석재로 만들어진 탑은 석탑라는 고유 이름을 가지고 있다. 이 탑은 주로 건축물의 일부분이거나 독립적인 구조물로 사용되며, 문화유산으로서의 가치를 지닌다. 탑의 구조는 층이 겹쳐진 형태로 이루어져 있으며, 시각적으로 안정감을 준다.",
    "function_kor": "탑의 상단에는 인공물문으로 분류된 연꽃봉우리문이 있다. 이 문양은 석탑의 중심에 위치해 있으며, 그 자체로 장식적 역할을 하면서 동시에 각 층의 결합을 강조하는 역할을 한다. 연꽃봉우리문은 종교적 의미와 함께 깨달음과 평화를 상징한다.",
    "description_kor": "한국전통문양 중 하나인 연꽃봉우리문은 대칭적이고 반복적인 형태가 특징이다. 연꽃의 봉우리 부분이 섬세하게 묘사되어 있으며, 이 문양은 중심부에 위치한 봉우리가 각 층의 모서리에 대칭적으로 반복되어 나타난다. 대칭성과 정교함이 눈에 띄는 문양이다.",
    "symbolism_kor": "이 연꽃봉우리문은 주로 회색의 석재에 표현되어 있으며, 석재의 질감 인으로 고풍스러운 멋을 자아낸다. 연꽃봉우리문은 불교적 상징으로 청정과 고결함을 나타내며, 깨달음을 통해 평화와 조화로운 삶을 지향하는 정신을 담고 있다.",
    "normal_kor": "석탑라는 이름의 이 탑은 한국전통문화유산의 대표적인 사례로, 연꽃봉우리문을 통해 더 깊은 의미를 전달한다. 전통적인 건축물과 문화재에서의 의미 있는 사용 사례로, 한국의 문화와 역사를 엿볼 수 있다.",
    "keyword_kor": "한국전통문화유산', '한국전통문양', '석탑', '탑', '인공물문', '연꽃봉우리문', '청정', '고결함'"
  },
  "caption_eng": {
    "context_eng": "As a traditional Korean motif, the lotus bud pattern is characterized by its symmetrical and repetitive form. Delicately depicted, the apex of the lotus is symmetrically repeated at each corner of the layers. Symmetry and intricate detail define this motif.",
    "function_eng": "Expressed primarily in gray stone, this lotus bud pattern exudes an antique charm with its texture. As a Buddhist symbol, it represents purity and nobility, embracing the spirit of achieving peace and harmony through enlightenment.",
    "description_eng": "Named \"stone pagoda, Joseon Branch, Volume 4, Number 1,\" this pagoda stands as a prime example of Korean traditional cultural heritage, conveying profound meaning through the lotus bud pattern. It offers a glimpse into Korean culture and history through its meaningful use in traditional architecture and cultural assets.",
    "symbolism_eng": "Korean Traditional Cultural Heritage', 'Korean Traditional Motif', 'stone pagoda, Joseon Branch, Volume 4, Number 1', 'Pagoda', 'Artificial Pattern', 'Lotus Bud Pattern', 'Purity', 'Nobility'",
    "normal_eng": "Named \"stone pagoda, Joseon Branch, Volume 4, Number 1,\" this pagoda stands as a prime example of Korean traditional cultural heritage, conveying profound meaning through the lotus bud pattern. It offers a glimpse into Korean culture and history through its meaningful use in traditional architecture and cultural assets.",
    "keyword_eng": "'Korean Traditional Cultural Heritage','Korean Traditional Pattern','stone pagoda','Joseon Branch','Volume 4','Number 1','Pagoda','Artificial Pattern','Lotus Bud Pattern','Purity'"
  }
}

데이터셋 구축 담당자

수행기관(주관) : 에이치씨아이플러스(주)

수행기관(참여)

데이터 관련 문의처

AI모델 관련 문의처

저작도구 관련 문의처