BETA 전문분야(기술과학) 한국어 멀티세션 데이터
- 분야한국어
- 유형 텍스트
-
데이터 변경이력
데이터 변경이력 버전 일자 변경내용 비고 1.0 2024-07-29 데이터 개방 Beta Version 데이터 히스토리
데이터 히스토리 일자 변경내용 비고 2024-07-05 산출물 공개 Beta Version 소개
- 전문분야(기술과학) 맥락에서 자연스러운 연속 대화가 가능한 AI를 구축하기 위한 학습용 데이터 - 멀티세션 대화 및 발화에 활용한 문서 정보, 검색어 등이 태깅된 대화 데이터
구축목적
- 긴 맥락의 연속된 대화를 기억하고 전문분야 문서 내용을 반영한 자연스러운 대화 데이터 수집
-
메타데이터 구조표 데이터 영역 한국어 데이터 유형 텍스트 데이터 형식 txt 데이터 출처 - 전문대화 문서: 구매 및 라이선싱, 크롤링 후 정제 및 레이블링 - 멀티세션 대화: 크라우드 워커를 통한 직접 대화 수집 라벨링 유형 자연어 라벨링 형식 json 데이터 활용 서비스 챗봇 서비스 데이터 구축년도/
데이터 구축량2023년/- 전문 문서 : 106,718 건 / - 멀티세션 : 60,414 건, 세션 : 150,957 건 / - 2세션 : 40,321 건 / - 3세션 : 10,057 건 / - 4세션 : 10,036 건 -
데이터 구축 규모 ∙ 구축한 기술과학 전문분야 문서에 기반한 멀티세션 60,414 건
- 2세션 : 40,321
- 3세션 : 10,057 건
- 4세션 : 10,036 건
∙ 전문문서 : 106,718 건데이터 분포 ∙ 세션 수 분포: 최소 수량
∙ 세션 간 시간 간격 분포: 1시간~7주 간격
∙ 대화 문장 길이 분포: 질문자 최소 10 음절, 전문가 최소 15음절
∙ 발화자 지역 분포: 4개 지역 별 인구분포 기준 10% 오차 내 모집
(행정안전부 인구통계 기준:https://jumin.mois.go.kr/)
- 서울/인천/경기 51%
- 대전/세종/충청/강원 14%
- 광주/전라/제주 11%
- 부산/대구/울산/경상 25%
∙ 전문지식 답변 수: 한 세션 당 최소 1 번
∙ 전문지식 출처 수: 한 세션 당 최소 1 번
∙ 대화 참여자 분포
- 성별 : 한 성별 최대 60%
- 연령대 : 한 연령대 비율 최대 40% 넘지 않음 -
-
AI 모델 상세 설명서 다운로드
AI 모델 상세 설명서 다운로드 AI 모델 다운로드- 모델학습
전체 대화방 json을 세션 수를 고려하여 8:1:1로 훈련, 검증, 평가 데이터셋을 나누어 준비한다. 대화 생성 모델을 구축할 때, 인코더-디코더 구조의 생성형 AI 모델 ET5를 활용한다. 모델의 인풋에 이전 대화의 히스토리에 해당하는 토큰 시퀀스, 참고 전문문서 토큰 시퀀스, 요약 정보 토큰 시퀀스의 컨캐트네이션 (concatenation)을 통해 입력 토큰 시퀀스를 생성하고, 이에 해당하는 답변을 예측하도록 모델링한다.- 서비스 활용 시나리오
○ 연구 분야
- 기술과학 분야에서 연속된 대화의 맥락을 기억하고 참조하여 심도 있는 문제 해결에 기여할 수 있음.
- 연속된 대화를 기억하고 활용함으로써 챗봇 및 자연어 처리 기술의 발전을 도모, 심도 있는 문제 해결을 가능하게 함.
- 한국어 멀티세션 대화 데이터는 한국어뿐만 아니라 다양한 언어에서의 AI 기술 발전을 촉진함.
○ 산업 분야
- 기업들은 한국인과의 원활한 대화가 가능한 챗봇 및 음성비서 기술 개발에 이 데이터를 활용할 수 있음.
- 고객 맞춤형 상품 추천 및 지식 서비스 제공을 위한 챗봇이나 음성 AI 비서 개발 시, 과거 대화 이력을 활용해 맞춤형 서비스 제공이 가능.
- 다양한 산업에서 AI를 활용하여 고객과의 소통을 강화하고, 더 개인화된 고객 경험을 제공할 수 있음. -
설명서 및 활용가이드 다운로드
데이터 설명서 다운로드 구축활용가이드 다운로드- 데이터 구성
1. 전문대화 정보 및 대화자 정보 내역: 파일명 및 세션단계, 참여자 수, 참여자 ID, 참여자 정보
2. 대화 참여자 페르소나 정보 내역: 대화방ID, 질문자의 페르소나 ID, 질문자의 페르소나 특징, 화자 유형, 전문가의 페르소나ID
3. 전문대화 토픽 정보 및 세션 정보 내역: 토픽ID, 토픽 유형, 토픽 타이틀, 키워드, 이전 세션ID, 몇 번째 세션, 발화 수, 말차례 수, 세션ID
4. 세션 내 전문 대화 내역: 대화 발화자 정보 및 페르소나, 작업자의 발화, 검색 내용, 검색어 Query, 검색결과, 검색 결과 문서 ID, 검색 결과 문서 제목, 검색 결과 문서 내용, 발화에 참고한 내용 선택 여부, 검색된 문서 내용 중 발화에 참고한 파트만 True, 발화에 대한 요약, 발화 TimeStamp
5. 세션 내 전문 대화 요약 내역: 세션 내 질문자 화자 발화 요약, 세션 내 전문가 화자 발화 요약, 이전 세션의 질문자 화자 발화 총 요약, 이전 세션의 전문과 화자 발화 총 요약, 세션 대화 내용 요약<라벨링 데이터 주요 속성 어노테이션 명세>
데이터명 AI 모델 Task 어노테이션 방법 주요 어노테이션 속성 속성 설명 라벨링 데이터 포맷 전문분야(기술과학) 한국어 멀티세션 데이터 대화 생성 Tagging participantInfo 참여자 정보 JSON multisessionID 멀티세션ID personaFeatures 페르소나 특징 largeCategory 주제 대분류 sessionSummary 현재 세션 요약 <원천데이터 분포 명세>
데이터명 원천데이터 구분 구축 비율 전문분야(기술과학) 한국어 멀티세션 데이터 자연(수학, 물리학, 화학, 지구과학), 생명(생명과학, 농림수산식품, 보건의료), 인공물(기계, 재료, 화공, 전기/전자, 정보/통신, 에너지/자원, 원자력, 환경, 건설/교통) 등 다양하고 균형적인 16개 전문분야 세부 카테고리를 확보 카테고리별 최소 1,000건 이상 수집
- 어노테이션 포맷구 분 속성명 타입 필수여부 설명 범위 비고 1 FileInfo object y 파일 정보 1-1 filename string y 파일명 TECH-013194-AP740186-WZ017721-01_04_02-S2.json 1-2 sessionLevel string y 세션 단계 2~4 2 participantsInfo object y 참여자 정보 2-1 numberOfParticipants string y 참여자 수 2 2-2 speaker1 object y 참여자 1 정보 2-2-1 participantID string y 참여자 ID 참여자 고유 ID, 숫자 4자리로 구성 "0001" ~ "9999" 워커 간 중복이 없어야 함 2-2-2 gender string y 대화 참여자 성별 남성/여성 2-2-3 age string y 나이대 구분 20대~40대 이상 연령대 2-2-4 occupation string y 직업군 전문직, 교직, 관리직, 사무직, 자영업, 판매직, 서비스직, 생산/노무직, 기능직, 농/축/광/수산업, 학생, 주부, 무직, 퇴직/연금생활자, 기타 2-2-5 bPlace string y 출생지 서울/경기/인천, 대전/세종/충청/강원, 광주/전라/제주, 부산/대구/울산/경상, 기타 2-2-6 gPlace string y 성장지 상동 2-2-7 rPlace string y 현 거주지 상동 2-2-8 educationLevel string y 학력 초졸, 중졸, 고졸, 대졸, 대학원졸, 기타 2-2-9 major string y 전공 사용자 직접 입력 2-3 speaker2 object y 참여자 2 정보 2-3-1 participantID string y 참여자 ID 참여자 고유 ID, 숫자 4자리로 구성 "0001" ~ "9999" 워커 간 중복이 없어야 함 2-3-2 gender string y 대화 참여자 성별 남성/여성 2-3-3 age string y 나이 20대~40대 이상 연령대 2-3-4 occupation string y 직업군 전문직, 교직, 관리직, 사무직, 자영업, 판매직, 서비스직, 생산/노무직, 기능직, 농/축/광/수산업, 학생, 주부, 무직, 퇴직/연금생활자, 기타 2-3-5 bPlace string y 출생지 서울/경기/인천, 대전/세종/충청/강원, 광주/전라/제주, 부산/대구/울산/경상, 기타 2-3-6 gPlace string y 성장지 상동 2-3-7 rPlace string y 현 거주지 상동 2-3-8 educationLevel string y 학력 초졸, 중졸, 고졸, 대졸, 대학원졸, 기타 2-3-9 major string y 전공 사용자 직접 입력 3 multisessionInfo object y 멀티세션 정보 3-1 multisessionID string y 멀티세션 대화방 ID 000001 ~ 999999 ) 4 personaInfo object y 페르소나 정보 4-1 apprenticeInfo object y Apprentice의 정보 4-1-1 personaID string y apprentice의 페르소나 ID Apprentice 페르소나 ID , 숫자 6개로 구성 "000001" ~ "999999" 참고로 파일명에는 AP+000000, 예를 들어 AP000001 로 들어감 "AP000001" 4-1-2 personaFeatures string y apprentice의 페르소나 특징 페르소나 특징들 페르소나 특징 3개 4-1-3 speakerType string y 화자유형 speaker1 화자를 구분하는 정보 4-2 wizardInfo object y Wizard의 정보 4-2-1 personaID string y wizard의 페르소나 ID Wizard 페르소나 ID, 숫자 6개로 구성 "000001" ~ "999999" 파일명에는 WZ+000000, 예를 들어 WZ000002 로 들어감 "WZ000002" 4-2-2 personaFeatures array y wizard의 페르소나 특징 페르소나 특징들 페르소나 특징 1개 4-2-3 speakerType string y 화자유형 speaker2 5 topicInfo object y 토픽 정보 5-1 topicID string y 전문 대화 토픽 ID (주제 대분류 ID_주제 중분류 ID_주제 소분류 ID) 몇 번 대분류의 몇 번 중분류의 몇 번째 소분류(토픽) "몇 번 대분류 + _ + 몇 번 중분류 + _ + 몇 번째 소분류(토픽)" , 대분류: 01~03, 중분류 : 01~35, 소분류(토픽): 01~99 “01_02_04” 5-2 largeCategory string y 주제 대분류 “01~03” 5-3 mediumCategory string y 주제 중분류 “01~35” 수학, 물리학, 화학, 지구과학), 생명(생명과학, 농림수산식품, 보건의료), 인공물(기계, 재료, 화공, 전기/전자, 정보/통신, 에너지/자원, 원자력, 환경, 건설/교통) 5-4 smallCategory string y 주제 소분류 “01~99” 6 sessionInfo array y 세션 정보 (*세션 수만큼 반복) 6-1 prevSessionID string y 이전 세션 ID 개별세션 ID 첫 번째 세션인 경우 비어있음 (개별 세션 ID가 유니크해야함) / 규칙 : “대화방ID + - + 몇 번째 세션(1/2/3/4)” 6-2 prevTimeInfo object y 이전 시간 정보 6-2-1 timeNum string y 이전 세션 이후 “1”,“2”,...“7” or null 1시간~48시간, 1일~10일, 1주~7주 흐른 가상의 시간 6-2-2 timeUnit string y 가상 시간 단위 시간/일/주/주일 or null 한글 표기 (시간/일/주/주일) 6-3 nthSession string y 몇 번째 세션 1~4 현재 세션이 대화방(멀티세션) 내에서 몇 번쨰 세션인지 6-4 numberOfUtterances string y 발화 수 해당 세션의 전체 발화 수(몇 개의 발화가 있었는지?) 턴 수*2(이상 수) 6-5 numberOfTurns string y 말차례 수 해당 세션의 전체 턴 수(몇 개의 턴이 있었는지?) 턴 수(A+B=1턴) 6-6 sessionID string y 세션 ID 00001-1 개별 세션 ID 유니크하게(어ᄄᅠᆫ 세션과도 ID가 겹치지 않게) 세션ID는 "대화방ID + 몇 번째 세션(1/2)" 00001-1 00001-2 6-7 sessionKeywords array y 세션 별 키워드 [“키워드1‘, ”키워드2“] 6-8 dialog array y 대화 6-8-1 speaker string y 화자 speaker2 먼저 말을 걸면 화자 1(speaker1 = Apprentice), speaker2 = Wizard) 6-8-2 personaID string y 페르소나 ID Wizard 페르소나 ID, 숫자 5개로 구성 6-8-3 participantID string y 참여자 ID 0001~9999 6-8-4 utterance string y 발화 문장 1발화=1말풍선 요약 말풍선 여러 개 = 1발화인 경우, 1발화에 대해서 6-8-5 context string y 6-8-5-1 query string y 검색어 질문에 대한 답변을 마련하기 위해 시스템 인터넷 창에 검색한 "검색어" 6-8-5-2 Contents array y 6-8-5-2-1 documentID string y 문서 ID "doc-id-3" 6-8-5-2-2 documentTitle string y 문서 제목 "모니터 작동 방법" 6-8-5-2-3 content string y "모니터를 고를 때에는 ~~~하다.", "예를 들어 ~~~ 고려해야 한다." 6-8-6 selectedContents string y 문서 선택 여부 [[false, true, false, false], [false, false, false]] 6-8-7 summary string y 6-8-8 timestamp string y 168392904 6-9 sessionSummary object n 세션 요약 6-9-1 apprentice string y 6-9-2 wizard string y 6-9-3 dialogSummary string y 6-10 prevAggregatedSummary 이전 세션의 요약 6-10-1 apprentice string y 세션의 apprentice 발화 총 요약 6-10-2 wizard string y 과거 세션의 wizard 발화 총 요약
- 데이터 포맷데이터명 원시데이터 포맷 원천데이터 포맷 라벨링 데이터 포맷 (*획득 과정 생성 데이터) (*정제 과정 생성 데이터) 전문분야(기술과학) 한국어 멀티세션 데이터 TXT TXT JSON
- 실제 데이터 예시{
"FileInfo" : {
"filename" : "TECH-293064-AP406852-WZ000001-03_01_01-S2.json",
"sessionLevel" : "2"
},
"participantsInfo" : {
"numberOfParticipants" : "2",
"speaker1" : {
"participantID" : "NA0001",
"gender" : "여성",
"age" : "40대",
"occupation" : "전문직",
"bPlace" : "광주/전라/제주",
"gPlace" : "서울/경기/인천",
"rPlace" : "서울/경기/인천",
"educationLevel" : "대졸",
"major" : "간호학"
},
"speaker2" : {
"participantID" : "NB0001",
"gender" : "여성",
"age" : "40대",
"occupation" : "관리직",
"bPlace" : "광주/전라/제주",
"gPlace" : "서울/경기/인천",
"rPlace" : "서울/경기/인천",
"educationLevel" : "대졸",
"major" : "경영학"
}
},
"multisessionInfo" : {
"multisessionID" : "293064"
},
"personaInfo" : {
"apprenticeInfo" : {
"personaID" : "AP406852",
"personaFeatures" : [ "나는 화공의 개념에 대한 서적을 읽고 있다.", "나는 TV 음악 프로그램을 좋아한다", "나는 2차 세계대전에 대해 궁금한 것이 있다" ],
"speakerType" : "speaker1"
},
"wizardInfo" : {
"personaID" : "WZ000001",
"personaFeatures" : [ "나는 개념에 대해 잘 아는 챗봇이다." ],
"speakerType" : "speaker2"
}
},
"topicInfo" : {
"topicID" : "03_01_01",
"largeCategory" : "인공물",
"mediumCategory" : "화공",
"smallCategory" : "개념"
},
"sessionInfo" : [ {
"prevSessionID" : "",
"prevTimeInfo" : {
"timeNum" : null,
"timeUnit" : null
},
"nthSession" : "1",
"numberOfUtterances" : "14",
"numberOfTurns" : "7",
"sessionID" : "293064-1",
"sessionKeywords" : [ "*용광로*의 구조, *용광로*의 기본적인 특성" ],
"dialog" : [ {
"speaker" : "speaker1",
"personaID" : "AP406852",
"participantID" : "NA0001",
"utterance" : "안녕? 만나서 반가워. 나는 요즘 책을 하나 읽고 있는데, 아주 흥미로워.",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "나는 요즘 책을 읽고 있다.",
"timestamp" : 1703047841000
}, {
"speaker" : "speaker2",
"personaID" : "WZ000001",
"participantID" : "NB0001",
"utterance" : "안녕하세요. 독서는 상상력과 문장력을 키우는 데 더없이 좋은 활동이죠. 좋은 취미를 가졌군요. 어떤 책일까 몹시 궁금해지네요.",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "",
"timestamp" : 1703047921000
}, {
"speaker" : "speaker1",
"personaID" : "AP406852",
"participantID" : "NA0001",
"utterance" : "별다른 건 아니고 난 요즘 화공의 개념에 대한 서적을 읽고 있거든. 너무 재밌어서 시간 가는 줄 모르고 읽게 되더라고. 너도 화학 공학에 대해 관심이 있니?.",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "나는 요즘 화공의 개념에 대한 서적을 읽고 있다.",
"timestamp" : 1703048229000
}, {
"speaker" : "speaker2",
"personaID" : "WZ000001",
"participantID" : "NB0001",
"utterance" : "그럼요. 저는 화학 공학의 개념에 대해서도 잘 학습되어 있는 챗봇입니다. 혹시 관련되어 궁금한 사항이 있으시면 언제든 말씀해주세요.",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "",
"timestamp" : 1703048310000
}, {
"speaker" : "speaker1",
"personaID" : "AP406852",
"participantID" : "NA0001",
"utterance" : "책을 읽다보니 용광로의 구조에 대해 관심이 가더라고. 용광로의 구조에 대해서 좀 설명해 줄 수 있니?",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "나는 용광로의 구조가 알고 싶다.",
"timestamp" : 1703048417000
}, {
"speaker" : "speaker2",
"personaID" : "WZ000001",
"participantID" : "NB0001",
"utterance" : "네. 용광로는 벽돌로 쌓아올린 굴뚝 모양으로 되어 있으며, 안에는 별다른 장치가 없습니다.",
"context" : {
"query" : "용광로",
"contents" : [ {
"documentID" : "346959",
"documentTitle" : "용광로",
"content" : [ "용광로(鎔鑛爐, )는 금속가공에서 금속 및 합금을 생산하기 위한 제련을 하는 데 사용되는 공업요로다.", "다른 요로(평로 등)에 비해 매우 높게 우뚝선 형태를 가지고 있기에 고로(高爐, )라고도 한다.", "구조.", "용광로의 구조는 매우 간단하다.", "벽돌로 쌓아올린 굴뚝 모양으로 되어 있으며, 안에는 별다른
(중 략)
특히 대한민국에서도 많은 작품을 조선민주주의인민공화국과 합작한 경우가 많다." ]
}, {
"documentID" : "2607537",
"documentTitle" : "순천화학련합기업소",
"content" : [ "순천화학연합기업소(順川化學聯合企業所)는 평안남도 순천시에 위치하며 2009년까지 확인되지
(중 략)
하고 있다.", "김재룡 총리도 항상 순천화학련합기업소 메탄올 직장을 현지지도를 가서 계속 료해하며 특히 건설의 신속함보다는 정밀함을 요구하고 있다." ]
}, {
"documentID" : "3149462",
"documentTitle" : "내화물",
"content" : [ "내화물(耐火物, Refractory)은 불과 고온에 견디는 물질이다.", "가마 등 열에 견뎌야 하는 공정을 위해 내화물을 사용해야한다.", "열, 압력 또는 화학적 공격에 의한 분해에 강하고 고온에서도 강도와 형태를 유지하는
(중 략)
연료는 액체 연료에 비해 보관과 관리가 쉽다.", "에너지 밀도도 더 높아서 같은 양의 비축 에너지에 대해 많은 공간을 요구하지 않는다." ]
} ]
},
"selectedContents" : [ [ false, false, false, false, true, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false,
(중 략)
false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false ] ],
"summary" : "용광로는 벽돌로 쌓아올린 굴뚝 모양으로 되어 있으며, 안에는 별다른 장치가 없다.",
"timestamp" : 1703048546000
}, {
"speaker" : "speaker1",
"personaID" : "AP406852",
"participantID" : "NA0001",
"utterance" : "아. 용광로는 굴뚝 모양의 간단한 구조였구나. 나는 TV 음악 프로그램을 좋아해서 채널을 돌리는데 용광로가 나오는 티브이 프로를 봤어. 엄청 뜨거워 보였는데 내부 온도는 얼마나 올라갈까 궁금한데, 알고 있니?",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "나는 TV 음악 프로그램을 좋아한다.",
"timestamp" : 1703049024000
}, {
"speaker" : "speaker2",
"personaID" : "WZ000001",
"participantID" : "NB0001",
"utterance" : "네. 용광로에 석회석, 코크스, 철광석을 각각 안에 넣어 500도~800도로 가열한 공기를 내부로 집어넣어 연소시키면 약 1500도의 열이 발생하게 됩니다.",
(중 략)
는 지표로서의 유용성을 떨어뜨린다는 지적이 있다." ]
}, {
"documentID" : "2675030",
"documentTitle" : "고체연료",
"content" : [ "고체연료(固體燃料, )는 에너지를 내기 위해 태울 수 있는 다양한 형태의 고체형 자재를 의미하며 연소 과정에 빛과 열을 제공한다.", "고체 연료와 대비되는 용어로는 액체 연료와 연료 가스가 있다.", "고체 연료의
(중 략)
false, false, false, false, false, false ], [ false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, false, true, false, false, false, false, false, false, false ] ],
"summary" : "용광로에 석회석, 코크스, 철광석을 각각 안에 넣어 500도~800도로 가열한 공기를 내부로 집어넣어 연소시키면 약 1500도의 열이 발생하게 된다.",
"timestamp" : 1703049089000
}, {
"speaker" : "speaker1",
"personaID" : "AP406852",
"participantID" : "NA0001",
"utterance" : "용광로가 당연히 뜨거운 줄은 알고 있었는데, 그 정도로 뜨겁다니. 그런 작업장에서 일하시는 분들은 위험한 환경에서 일한다니 정말 대단하다는 생각이 드네.",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "",
"timestamp" : 1703049187000
}, {
"speaker" : "speaker2",
"personaID" : "WZ000001",
"participantID" : "NB0001",
"utterance" : "맞아요. 여름엔 덥고 항상 열 화상 위험에 노출되어 있으니 어떤 장소보다 안전에 유의해서 작업해야 하는 공간이예요.",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "",
"timestamp" : 1703049270000
}, {
"speaker" : "speaker1",
"personaID" : "AP406852",
"participantID" : "NA0001",
"utterance" : "그리고 용광로를 통해 냄비나 건물을 짓는 철근 등 중요한 제품들이 생산되니 우리 삶이 윤택해졌다는 생각이 들어. ",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "",
"timestamp" : 1703049501000
}, {
"speaker" : "speaker2",
"personaID" : "WZ000001",
"participantID" : "NB0001",
"utterance" : "용광로가 주는 삶의 윤택함에 대해 느끼셨다니 저도 기분이 좋아져요.",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "",
"timestamp" : 1703049572000
}, {
"speaker" : "speaker1",
"personaID" : "AP406852",
"participantID" : "NA0001",
"utterance" : "지금 이스라엘이랑 하마스가 전쟁중이잖아. 2차 세계대전에 대해서도 궁금한 것이 있어서 인터넷 자료를 좀 찾아봐야겠어. 다음에 또 보자.",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "나는 2차 세계 대전에 대해 궁금한 것이 있다. 나는 2차 세계대전에 대한 인터넷 자료를 찾아볼 것이다.",
"timestamp" : 1703049690000
}, {
"speaker" : "speaker2",
"personaID" : "WZ000001",
"participantID" : "NB0001",
"utterance" : "전쟁에 대해서도 관심이 있군요. 자료를 찾다가 궁금한 것이 있으면 다시 찾아주세요. 유익한 시간이었어요.",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "",
"timestamp" : 1703049729000
} ],
"sessionSummary" : {
"apprentice" : [ "나는 요즘 책을 읽고 있다.", "나는 요즘 화공의 개념에 대한 서적을 읽고 있다.", "나는 용광로의 구조가 알고 싶다.", "나는 TV 음악 프로그램을 좋아한다.", "나는 2차 세계 대전에 대해 궁금한 것이 있다. 나는 2차 세계대전에 대한 인터넷 자료를 찾아볼 것이다." ],
"wizard" : [ "용광로는 벽돌로 쌓아올린 굴뚝 모양으로 되어 있으며, 안에는 별다른 장치가 없다.", "용광로에 석회석, 코크스, 철광석을 각각 안에 넣어 500도~800도로 가열한 공기를 내부로 집어넣어 연소시키면 약 1500도의 열이 발생하게 된다." ],
"dialogSummary" : "질문자는 용광로의 구조에 대해 질문하였고 챗봇은 용광로는 벽돌로 쌓아올린 굴뚝 모양으로 되어 있으며, 안에는 별다른 장치가 없다고 하였다. 또한 질문자가 용광로의 내부 온도에 대해 질문하였고 챗봇은 용광로에 석회석, 코크스, 철광석을 각각 안에 넣어 500도~800도로 가열한 공기를 내부로 집어넣어 연소시키면 약 1500도의 열이 발생하게 된다고 하였다."
},
"prevAggregatedSummary" : {
"apprentice" : [ ],
"wizard" : [ ]
}
}, {
"prevSessionID" : "293064-1",
"prevTimeInfo" : {
"timeNum" : "5",
"timeUnit" : "시간"
},
"nthSession" : "2",
"numberOfUtterances" : "14",
"numberOfTurns" : "7",
"sessionID" : "293064-2",
"sessionKeywords" : [ "*화학공학*의 역사, *화학공학*의 개요, *화학공학*의 이동 현상" ],
"dialog" : [ {
"speaker" : "speaker1",
"personaID" : "AP406852",
"participantID" : "NA0001",
"utterance" : "안녕. 좀 전에 자주 보는 TV 음악 프로그램이 하길래 재밌게 보고 왔어.",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "나는 자주 보는 TV 음악 프로그램을 보고 왔다.",
"timestamp" : 1703051354000
(중 략)
}, {
"speaker" : "speaker2",
"personaID" : "WZ000001",
"participantID" : "NB0001",
"utterance" : "2차 세계 대전에 대해 알고 싶은 정보를 찾길 바라요. 더 궁금한 것이 있으면 다시 불러주세요. 즐거운 시간이었어요.",
"context" : {
"query" : null,
"contents" : [ {
"documentID" : null,
"documentTitle" : null,
"content" : [ ]
} ]
},
"selectedContents" : [ [ ] ],
"summary" : "",
"timestamp" : 1703052879000
} ],
"sessionSummary" : {
"apprentice" : [ "나는 자주 보는 TV 음악 프로그램을 보고 왔다.", "나는 화공의 개념에 대한 서적을 읽고 있다.", "나는 화학 공학의 개념에 대해 잘 모른다.", "나는 화학 공학에서 나오는 이동 현상이 뭔지 궁금하다.", "나는 2차 세계 대전에 대해 궁금한 내용을 완전히 찾지 못했다. 나는 2차 세계 대전에 대해 궁금한 내용을 찾아볼 것이다." ],
"wizard" : [ "화학 공학의 개념에 화학공학(化學工學; Chemical Engineering)은 어떤 원료물질에 화학적 변화를 일으켜 사람이 살아가는 데에 사용되어온 각종 물질들을 대량으로 만드는 방법 및 그 이용에 관하여 연구하는 공학의 한 분야이다.", "이동 현상은 각각 운동량 전달, 에너지 전달과 화학종의 수송에 의해 주로 좌우되는 유체 역학, 열·질량 전달을 포함하는 것이다." ],
"dialogSummary" : "질문자가 화학 공학의 개념에 대해 질문을 했고 챗봇은 화학 공학의 개념에 대해 궁금하군요. 화학공학(化學工學; Chemical Engineering)은 어떤 원료물질에 화학적 변화를 일으켜 사람이 살아가는 데에 사용되어온 각종 물질들을 대량으로 만드는 방법 및 그 이용에 관하여 연구하는 공학의 한 분야라고 답했다.질문자가 이동 현상의 개념에 대해 질문했고 챗봇은 이동 현상은 각각 운동량 전달, 에너지 전달과 화학종의 수송에 의해 주로 좌우되는 유체 역학, 열·질량 전달을 포함하는 것이라고 답했다."
},
"prevAggregatedSummary" : {
"apprentice" : [ "나는 요즘 책을 읽고 있다.", "나는 요즘 화공의 개념에 대한 서적을 읽고 있다.", "나는 용광로의 구조가 알고 싶다.", "나는 TV 음악 프로그램을 좋아한다.", "나는 2차 세계 대전에 대해 궁금한 것이 있다. 나는 2차 세계대전에 대한 인터넷 자료를 찾아볼 것이다." ],
"wizard" : [ "용광로는 벽돌로 쌓아올린 굴뚝 모양으로 되어 있으며, 안에는 별다른 장치가 없다.", "용광로에 석회석, 코크스, 철광석을 각각 안에 넣어 500도~800도로 가열한 공기를 내부로 집어넣어 연소시키면 약 1500도의 열이 발생하게 된다." ]
}
} ]
} -
데이터셋 구축 담당자
수행기관(주관) : 미디어젠(주)
수행기관(주관) 책임자명 전화번호 대표이메일 담당업무 윤종성 02-6429-7100 jsyoon@mediazen.co.kr 총괄책임자 수행기관(참여)
수행기관(참여) 기관명 담당업무 메트릭스 데이터 수집 비디 데이터 수집, 정제, 검수 시스템 제공/관리 한알음정보 데이터 검수 데이터 관련 문의처
데이터 관련 문의처 담당자명 전화번호 이메일 고혜지 02-6244-0700 hjgo@metrix.co.kr 백승민 02-6244-07001 smbaek@metrix.co.kr AI모델 관련 문의처
AI모델 관련 문의처 담당자명 전화번호 이메일 윤종성 02-6429-7100 jsyoon@mediazen.co.kr 최정윤 02-6429-7100 sandy0708@mediazen.co.kr 저작도구 관련 문의처
저작도구 관련 문의처 담당자명 전화번호 이메일 송주홍 02-2025-4999 sjh@bluedigm.com 김화영 02-2025-4999 hykim@bluedigm.com
-
인터넷과 물리적으로 분리된 온라인·오프라인 공간으로 의료 데이터를 포함하여 보안 조치가 요구되는 데이터를 다운로드 없이 접근하고 분석 가능
* 온라인 안심존 : 보안이 보장된 온라인 네트워크를 통해 집, 연구실, 사무실 등 어디서나 접속하여 데이터에 접근하고 분석
* 오프라인 안심존 : 추가적인 보안이 필요한 데이터를 대상으로 지정된 물리적 공간에서만 접속하여 데이터에 접근하고 분석 -
- AI 허브 접속
신청자 - 안심존
사용신청신청자신청서류 제출* - 심사구축기관
- 승인구축기관
- 데이터 분석 활용신청자
- 분석모델반출신청자
- AI 허브 접속
-
1. 기관생명윤리위원회(IRB) 심의 결과 통지서 [IRB 알아보기] [공용IRB 심의신청 가이드라인]
2. 기관생명윤리위원회(IRB) 승인된 연구계획서
3. 신청자 소속 증빙 서류 (재직증명서, 재학증명서, 근로계약서 등 택1)
4. 안심존 이용 신청서 [다운로드]
5. 보안서약서 [다운로드]
※ 상기 신청서 및 첨부 서류를 완비한 후 신청을 진행하셔야 정상적으로 절차가 이루어집니다. -
신청 및 이용관련 문의는 safezone1@aihub.kr 또는 02-525-7708, 7709로 문의
데이터셋 다운로드 승인이 완료 된 후 API 다운로드 서비스를 이용하실 수 있습니다.
API 다운로드 파일은 분할 압축되어 다운로드 됩니다. 분할 압축 해제를 위해서는 분할 압축 파일들의 병합이 필요하며 리눅스 명령어 사용이 필요합니다.
리눅스 OS 계열에서 다운로드 받으시길 권장하며 윈도우에서 파일 다운로드 시 wsl(리눅스용 윈도우 하위 시스템) 설치가 필요합니다.
※ 파일 병합 리눅스 명령어
find "폴더경로" -name "파일명.zip.part*" -print0 | sort -zt'.' -k2V | xargs -0 cat > "파일명.zip"
- 해당 명령어 실행 시, 실행 경로 위치에 병합 압축 파일이 생성됩니다.
- 병합된 파일 용량이 0일 경우, 제대로 병합이 되지 않은 상태이니 "폴더경로"가 제대로 입력되었는지 확인 부탁드립니다.
※ 데이터셋 소개 페이지에서 다운로드 버튼 클릭하여 승인이 필요합니다.