메뉴로 건너뛰기 콘텐츠로 건너뛰기 푸터로 건너뛰기
데이터를 불러오고 있습니다
데이터를 저장하고 있습니다
#한국어 대화 요약 # 자연어처리 # 구어 속성 # 문장 성분 생략 # 축약적 표현 # 대화 속성 # 대화 유형 # 대화 내용

한국어 대화 요약

한국어 대화 요약
  • 분야한국어
  • 유형 텍스트
구축년도 : 2020 갱신년월 : 2022-05 조회수 : 12,679 다운로드 : 1,750 용량 :
샘플 데이터 ?

샘플데이터는 데이터의 이해를 돕기 위해 별도로 가공하여 제공하는 정보로써 원본 데이터와 차이가 있을 수 있으며,
데이터에 따라서 민감한 정보는 일부 마스킹(*) 처리가 되어 있을 수 있습니다.

※ 내국인만 데이터 신청이 가능합니다.

  • 데이터 변경이력

    데이터 변경이력
    버전 일자 변경내용 비고
    1.3 2022-05-10 데이터 품질 보완
    1.2 2021-10-12 데이터 품질 보완
    1.1 2021-10-12 데이터 품질 보완
    1.0 2021-06-29 데이터 최초 개방

    데이터 히스토리

    데이터 히스토리
    일자 변경내용 비고
    2023-07-21 AI 모델 설명서 개방

    소개

    일상 대화, 토론 등 다양한 유형의 한국어 대화 원문 텍스트 데이터를 기반으로 한국어 대화 요약 AI 기술 개발을 위한 한국어 대화 요약 텍스트 데이터

    구축목적

    뉴스, 기사 등의 문어체에 비해 생략이나 변형이 많고, 대화의 문맥을 고려해야 하는 특수성이 있는 대화 요약 기술 개발을 위한 한국어 학습 데이터 구축
  • 구축 내용 및 제공 데이터량

    • 한국어 대화 원문 35만건
    • 한 문장으로 요약된 생성 요약문 35만건
    • 개인정보 비식별화
    • 메타정보(화자정보, 대화 유형, 대화 주제) 부착

     

    구축 내용 및 제공 데이터량 표
    데이터셋 내용 형식 규모
    한국어 대화 요약 데이터 · 메타정보(화자정보, 대화 유형, 대화 주제)
    · 대화 요약문
    JSON 350,000건
  • 저작도구 설명서 및 저작도구 다운로드

    저작도구 설명서 다운로드 저작도구 다운로드
  • AI 모델 상세 설명서 다운로드

    AI 모델 다운로드 AI 모델 상세 설명서 다운로드
  • 설명서 및 활용가이드 다운로드

    데이터 설명서 다운로드 구축활용가이드 다운로드

    데이터 변경이력

    데이터 변경이력
    버전 일자 변경내용 비고
    1.3 2022.05.10 데이터 품질 보완  
    1.2 2021.10.12 데이터 품질 보완  
    1.1 2021.10.12 데이터 품질 보완  
    1.0 2021.06.29 데이터 최초 개방  

    구축 목적

    • 뉴스, 기사 등의 문어체에 비해 생략이나 변형이 많고, 대화의 문맥을 고려해야 하는 특수성이 있는 대화 요약 기술 개발을 위한 한국어 학습 데이터 구축

    활용 분야

    • 대화 및 토론의 주제 분류 파악, 상담 내역 파악, 챗봇, 메신저 어플 등 대화의 핵심 내용을 신속하고 정확하게 파악해야 하는 분야

    주요 키워드

    • 대화요약, 생성요약, 한국어, 요약기술, 학습데이터

    소개

    • 대화 참여자와 제공자 모두로부터 개인정보처리 및 저작권 이용 허락 계약을 체결하여 수집한 다양한 주제의 한국어 대화 원문 데이터에 대하여 개인정보 비식별화 및 정제 작업을 거쳐, 대화 주제 분류와 생성 요약문 어노테이션 후 AI 모델링을 통해 데이터의 유효성을 검증한 한국어 대화 데이터셋 구축

     

    한국어 대화요약 소개 프로세스 예시 이미지

    구축 내용 및 제공 데이터량

    • 한국어 대화 원문 35만건
    • 한 문장으로 요약된 생성 요약문 35만건
    • 개인정보 비식별화
    • 메타정보(화자정보, 대화 유형, 대화 주제) 부착

     

    구축 내용 및 제공 데이터량 표
    데이터셋 내용 형식 규모
    한국어 대화 요약 데이터 · 메타정보(화자정보, 대화 유형, 대화 주제)
    · 대화 요약문
    JSON 350,000건

    대표도면

    한국어 대화 요약 대표도면 예시 이미지

    필요성

    • 코비드-19 상황이 장기화되면서 1990년대 후반 이후 미국을 중심으로 시작된 ‘디지털 경제’로의 전환이 가속화됨
    • 디지털 경제의 핵심 요소 가운데 하나는 ‘비대면 경제’이므로 비대면 의사소통의 수요가 폭발적으로 증가하고 있음
    • 효율적인 비대면 의사소통과 엄청난 속도와 규모로 축적되기 시작한 대화 데이터의 활용성을 높이기 위해서는 대화 요약 기술의 도입이 요구됨
    • 대화 요약 기술을 아직 초기 단계에 머물러 있으나 딥러닝 기술의 발달과 대규모 대화 요약 데이터의 구축으로 비약적 발전이 가능할 것으로 기대됨

    데이터 구조

    • 데이터 구성
      데이터 구성
      Key Description Type Child type
      header 대화 메타 데이터 JsonObject JsonObject
      {      
      dialogueInfo 대화 정보 JsonObject JsonObject
      {      
      dialogueID 대화 ID String  
      numberOfParticipants 대화 참여자 수 Integer  
      numberOfUtterances 발화 수 Integer  
      numberOfTurns 말차례 수 Integer  
      type 대화 유형 String  
      topic 대화 주제 String  
      }      
      participantsInfo 대화 참여자 정보 Array JsonObject
      [      
      participantID 대화 참여자 ID String  
      gender 대화 참여자 성별 String  
      age 대화 참여자 연령대 String  
      residentialProvince 대화 참여자 거주지역 String  
      ]      
      }      
      body 대화 데이터 본문 JsonObject Array, String
      {      
      dialogue 대화 본문 데이터 Array String
      [      
      utteranceID 발화 ID String  
      turnID 말차례 ID String  
      participantID 대화 참여자 ID String  
      date 발화 날짜 String  
      time 발화 시간 String  
      utterance 발화 String  
      ]      
      summary 요약문 String  
      }      

       

    • 어노테이션 포맷
      어노테이션 포맷
      No 항목 길이 타입 필수여부
      한글명 영문명
      1 대화 메타 데이터 header   JsonObject Y
        1-1 대화 정보 dialogueInfo   JsonObject Y
        {        
        1-1-1 대화 ID dialogueID   String Y
        1-1-2 대화 참여자 수 numberOfParticipants   Integer Y
        1-1-3 발화 수 numberOfUtterances   Integer Y
        1-1-4 말차례 수 numberOfTurns   Integer Y
        1-1-5 대화 유형 type   String Y
        1-1-6 대화 주제 topic   String Y
        }        
        1-2 대화 참여자 정보 participantsInfo   Array Y
        [        
         {        
        1-2-1 대화 참여자 ID participantID   String Y
        1-2-2 대화 참여자 성별 gender   Integer Y
        1-2-3 대화 참여자 연령대 age   Integer Y
        1-2-4 대화 참여자 거주지역 residentialProvince   Integer Y
         }        
        ]        
      2 대화 데이터 본문 body   JsonObject Y
        2-1 대화 본문 데이터 dialogue   Array Y
        [        
         {        
        2-1-1 발화 ID utteranceID   String Y
        2-1-2 말차례 ID turnID   String Y
        2-1-3 대화 참여자 ID participantID   String Y
        2-1-4 발화 날짜 date   String Y
        2-1-5 발화 시간 time   String Y
        2-1-6 발화 utterance   String Y
         }        
        ]        
        2-2 요약문 summary   String Y
  • 데이터셋 구축 담당자

    수행기관(주관) : 바이브컴퍼니
    수행기관(주관)
    책임자명 전화번호 대표이메일 담당업무
    이기황 02-565-0531 leekh@vaiv.kr · 원문데이터 확보 및 제공
    · 데이터구축 총괄
    데이터 관련 문의처
    데이터 관련 문의처
    담당자명 전화번호 이메일
    김수경(바이브컴퍼니) 02-565-0531 ckaskan@vaiv.kr
보건의료 데이터 개방 안내

보건의료 데이터는 온라인 및 오프라인 안심존을 통해 개방됩니다.

안심존이란 안심존 이용메뉴얼 안심존 이용신청
  • 인터넷과 물리적으로 분리된 온라인·오프라인 공간으로 의료 데이터를 포함하여 보안 조치가 요구되는 데이터를 다운로드 없이 접근하고 분석 가능
    * 온라인 안심존 : 보안이 보장된 온라인 네트워크를 통해 집, 연구실, 사무실 등 어디서나 접속하여 데이터에 접근하고 분석
    * 오프라인 안심존 : 추가적인 보안이 필요한 데이터를 대상으로 지정된 물리적 공간에서만 접속하여 데이터에 접근하고 분석

    1. AI 허브 접속
      신청자
    2. 안심존
      사용신청
      신청자신청서류 제출*
    3. 심사구축기관
    4. 승인구축기관
    5. 데이터 분석 활용신청자
    6. 분석모델반출신청자
  • 1. 기관생명윤리위원회(IRB) 심의 결과 통지서 [IRB 알아보기]
    2. 기관생명윤리위원회(IRB) 승인된 연구계획서
    3. 신청자 소속 증빙 서류 (재직증명서, 재학증명서, 근로계약서 등 택1)
    4. 안심존 이용 신청서 [다운로드]
    5. 보안서약서 [다운로드]
    ※ 상기 신청서 및 첨부 서류를 완비한 후 신청을 진행하셔야 정상적으로 절차가 이루어집니다.

  • 신청 및 이용관련 문의는 safezone1@aihub.kr 또는 02-525-7708, 7709로 문의

데이터셋 다운로드 승인이 완료 된 후 API 다운로드 서비스를 이용하실 수 있습니다.

API 다운로드 파일은 분할 압축되어 다운로드 됩니다. 분할 압축 해제를 위해서는 분할 압축 해제를 지원하는 프로그램(예: 반디집, 7-Zip)을 사용하시길 권장합니다.

※ 데이터셋 소개 페이지에서 다운로드 버튼 클릭하여 승인이 필요합니다.