AI-Hub

데이터 변경이력

데이터 히스토리

소개

다양한 법률 행위에 활용될 수 있는 계약 법률 문서 서식의 원천데이터와 라벨링데이터 
- 원시데이터 : 계약 법률 문서 11,000 건 pdf 수집
- 원천데이터 : 계약 법률 문서 10,216 건 json 정제
- 가공데이터 : 문서 서식 전체에 대한 요건, 위치, 항목 등 612,899 건 json 가공

구축목적

계약 법률 문서의 자동 분석 및 생성을 위한 초거대 AI학습용 데이터 구축

1. 데이터 구축 규모
-  데이터 수량 :
   1) 계약 법률 문서 10,215 건
   2) 라벨링 612,868 개

2. 데이터 분포 및 통계

저작도구 설명서 및 저작도구 다운로드

AI 모델 상세 설명서 다운로드

1. 계약 법률 문서 주요 내용 추출 모델

● AI모델 설명
   - 본 AI모델은 Llama3.1 모델을 기반으로 finetuning하여 계약 법률 문서의 자동화된 내용 추출 및 구조화를 위해 특화된 언어 모델
   - 계약서의 전문이 입력되면 LLM 모델을 활용하여 핵심 정보를 식별하고 추출하는 기능을 수행
   - 추출된 정보는 사용자가 복잡한 법률 문서의 주요 내용을 한눈에 파악할 수 있도록 구조화되어 제공

<그림. Llama 모델 블록도> 

2. 계약 법률 문서 서식 자동 생성 모델

● AI모델 설명
   - 본 AI모델은 Llama를 기반으로 하여 계약 법률 문서의 중요 내용을 입력받아 자동으로 서식을 생성하는 특화된 언어 모델
   - 사용자가 계약 법률 서식 작성에 필요한 핵심 정보를 입력하면, 모델이 이를 분석하고 이해하여 적절한 법률 문서 초안을 작성

<그림. Llama 모델 블록도> 

설명서 및 활용가이드 다운로드

○ 법률 분야에서 AI의 활용을 최대화하기 위한 기반으로, 다양한 분야의 법률 문서들에 대한 체계적인 라벨링 및 데이터 구축이 필수적임. 이 과정에서 법률 전문 용어와 복잡한 법적 맥락을 정확히 반영하지 못하는 기존의 문제를 해결하고자 함. 법률 전문가의 직접적인 검수와 라벨링 가이드를 통해 데이터의 법률적 정확성과 신뢰성을 확보하여 법률 문서의 구조, 용어, 그리고 관련 법적 사항의 정확한 반영을 목표로 하였음. 수집된 데이터를 활용하여 법률 문서 분야의 초거대AI 데이터셋을 구축하고 법률 문서 서식 생성 및 분석에 특화된 법률 문서 작성/검토 모델 및 저작도구를 개발함

○ 구축된 초거대AI 데이터셋은 법률 문서에서 주요 내용을 추출하는 모델과 법률 문서의 서식과 내용을 자동으로 생성하는 모델을 개발하는 데 활용 가능. 또한 해당 모델을 통해 이용자가 업로드한 문서에서 수정/추가가 필요한 조항을 추천하는 기능과 법률 상황을 입력받으면 필요한 법률 문서를 생성해주는 기능을 포함하는 서비스를 개발할 수 있으며, 이는 법률 서비스의 자동화와 효율성을 높이고 국민의 법률 서비스 접근성 향상과 비용 절감 효과를 제공할 수 있음

○ 법무법인 오킴스 자체 보유 문서, 공공기관 (법원, 공정위, 법률구조공단 등), 타 법무법인 및 전문가 보유 문서 11,000건을 pdf 형태로 수집하여 10,215건의 원천데이터를 json 형태로 정제, 라벨링 데이터 612,868건 json 형태로 구축함.
  근로계약서, 용역계약서, 매매계약서, 협약서, 임대차계약서 등이 포함된 주요 계약 법률 문서를 각 분야별로 10종으로 분류하여 형식요건 및 내용요건으로 라벨링. 이를 AI 학습에 최적화된 형태로 정제 및 라벨링한 고품질의 데이터셋으로 개발하였으며 AI허브에 개방하는 모델은 총 2개로 아래와 같음.
    
○ 학습 모델
 1) Llama3.1 [계약 법률 문서 주요 내용 추출 모델 (Data Extraction)]
 2) Llama3.1 [계약 법률 문서 서식 자동 생성 모델 (Text Generation)]

○ 어노테이션 포맷

*프로퍼티 설명(property_name) 

○ 원문데이터 포맷 : json

○ 실제 예시
데이터 예시
 원시 데이터

 원천 데이터

{  
"document" : {
    "doc_type" : null,
    "title" : "고 용 계 약 서",
    "status" : 1,
    "is_hold" : null,
    "page_count" : 1,
    "created_time" : "2024-07-23T23:10:19.583",
    "main_category" : null,
    "sub_category" : null,
    "detail_category" : null,
    "related_law" : null,
    "purpose" : null,
    "use_case" : null,
    "sub_documents" : [
      {
        "id" : 1,
        "type" : "TEXT",
        "format_content" : null,
        "depth" : 0,
        "sort_order" : 1,
        "article" : null,
        "paragraph" : null,
        "subParagraph" : null,
        "is_article_title" : null,
        "content_labels" : null,
        "note" : null,
        "name" : null,
        "contents" : [
          {
            "text" : "고 용 계 약 서",
            "type" : null,
            "rowId" : null,
            "cells" : null
          }
        ],
        "coordinate" : null
      },
      {
        "id" : 2,
        "type" : "TEXT",
        "format_content" : null,
        "depth" : 0,
        "sort_order" : 2,
        "article" : null,
        "paragraph" : null,
        "subParagraph" : null,
        "is_article_title" : null,
        "content_labels" : null,
        "note" : null,
        "name" : null,
        "contents" : [
          {
            "text" : "1. 피고용인 인적사항",
            "type" : null,
            "rowId" : null,
            "cells" : null
          }
        ],
        "coordinate" : null
      },
(이하 생략)

 라벨링 데이터

{
    "document": {
      "type": "계약 문서",
      "metadata": {
        "file_info": {
          "document_name": "근로계약서_0010",
          "document_size": "68kb",
          "document_page_count": "1",
          "document_total_ids" : "18",
          "document_format": "docx",
          "document_creation_date": "2024-07-30",
          "document_category": {
            "main_category": "인사·고용·노무",
            "sub_category": "고용계약",
            "detail_category": "근로(고용)계약서"
          }
        },
        "additional_info": {
          "related_law": "근로기준법|근로기준법 시행령",
          "document_purpose": "근로(고용)계약서",
          "public_domain_sources": null
          "document_use_case": [
            "사용자와 근로자 간의 새로운 근로계약 체결",
            "근로자의 계약 갱신 및 연장",
            "근로자의 근로 조건 변경에 따른 재계약",
            "인턴십 종료 후 정규직 전환을 위한 근로계약 체결",
            "재택근무 전환 시 근로 조건을 명시한 계약 체결“
          "public_domain_sources": null
          ]
        }
      },
      "sections": [
        {
          "id": "1",
          "format": {
            "position": {
              "line": "1"
            },
            "section_type": "TEXT",
            "format_type": "제목",
            "is_article_title" : false,
            "article" : null,
            "paragraph" : null,
            "subParagraph" : null
          },
          "content": {
            "content_labels": [],
            "description": "고 용 계 약 서"
          }
        },
        {
          "id": "2",
          "format": {
            "position": {
              "line": "2"
            },
            "section_type": "TEXT",
            "format_type": "본문",
            "is_article_title" : true,
            "article" : 1,
            "paragraph" : null,
            "subParagraph" : null
          },
          "content": {
            "content_labels": ["근로자의 인적사항"],
            "description": "1. 피고용인 인적사항"
          }
        },
        {
          "id": "3",
          "format": {
            "position": {
              "line": "3"
            },
            "section_type": "TABLE",
            "format_type": "본문",
            "is_article_title" : false,
            "article" : 1,
            "paragraph" : null,
            "subParagraph" : null
          },
          "content": {
            "content_labels": ["근로자의 인적사항"],
            "description": "

"
          }
(이하 생략)

데이터셋 구축 담당자

수행기관(주관) : 아일리스프런티어

수행기관(참여)

데이터 관련 문의처

AI모델 관련 문의처

저작도구 관련 문의처