프롬프트 엔지니어링 기반 법원 판결문 요약
Summarization for Court Decision Based on Prompt Engineering
- 주제어 (키워드) 프롬프트 엔지니어링 , 판결문 , 요약 , prompt engineering , court decision , summarization
- 발행기관 서강대학교 정보통신대학원
- 지도교수 구명완
- 발행년도 2024
- 학위수여년월 2024. 8
- 학위명 석사
- 학과 및 전공 정보통신대학원 데이터사이언스 · 인공지능
- 실제 URI http://www.dcollection.net/handler/sogang/000000078942
- UCI I804:11029-000000078942
- 본문언어 한국어
- 저작권 서강대학교 논문은 저작권 보호를 받습니다.
초록 (요약문)
법률 시장에서 법조인은 수많은 법률 문서와 관련 기술에 대한 이해를 필요로 하지만, 4 차 산업혁명 시대가 도래하면서 정보의 양이 기하급수적으로 증가하여 인적, 물적 자원 소모가 커지고 있다. 인공지능의 발전으로 법률 시장에 리걸 테크(Legal Tech)가 등장하게 되었고, 인공지능 기반 기술을 적용하여 법률 서비스를 보다 쉽고 효율적으로 이용하려는 사례들이 증가하고 있다. 본 연구에서는 AIHub 에서 제공하는 법원 판결문 데이터를 기반으로 미국 로스쿨에서 사용하는 케이스 브리프(Case Brief) 방식을 키워드로 추출해 판결문을 요약하는 프롬프트 엔지니어링 방법인 CasebriefSum 을 제안한다. GPT-3.5 기반 요약, Lasswell 커뮤니케이션 모델 키워드 기반의 SumCoT, 파인튜닝된 T5 모델, CO-STAR 방법론과 성능 비교를 하기 위해 ROUGE score 를 지표로 성능을 평가하였으며, 법학 전공자를 대상으로 설문조사를 진행하였다. 평가 결과, CasebriefSum 은 ROUGE Score 에서 높은 성능을 보였으며, 법학 전공자를 대상으로 한 설문조사에서도 우수한 평가를 받았다. 본 연구는 법률 문서 요약에 있어 프롬프트 엔지니어링의 유용성을 입증하고, 법률 실무와 교육에서 활용될 수 있는 가능성을 제시하였다. 이러한 연구는 리걸 테크(Legal Tech) 분야에서 인공지능 기술의 적용 범위를 넓히고, 법률 서비스의 효율성과 품질을 향상시키는 데 기여할 것으로 기대된다.
more초록 (요약문)
In the legal market, legal professionals need to understand numerous legal documents and related technologies. However, with the advent of the Fourth Industrial Revolution, the exponential increase in the amount of information has resulted in increased consumption of human and material resources. With the development of artificial intelligence, Legal Tech has emerged in the legal market, and there are increasing cases of applying AI-based technology to make legal services easier and more efficient. This study proposes a prompt engineering method called CasebriefSum, which extracts keywords using the case brief method used in U.S. law schools to summarize court rulings based on court ruling data provided by AIHub. To compare performance with GPT-3.5-based summarization, the SumCoT based on Lasswell's communication model keywords, the fine-tuned T5 model, and the CO-STAR methodology, performance was evaluated using ROUGE scores, and a survey was conducted with law major students. The evaluation results showed that CasebriefSum performed well in ROUGE Score and received high ratings in surveys conducted with law students. This study demonstrates the usefulness of prompt engineering in summarizing legal documents and suggests its potential for use in legal practice and education. Such research is expected to expand the application of AI technology in the Legal Tech field and contribute to improving the efficiency and quality of legal services.
more목차
제 1 장 서 론 1
제 2 장 관련 연구 3
제 1 절 T5 3
제 2 절 GPT-3 3
제 3 절 프롬프트 엔지니어링 4
제 4 절 케이스 브리프 6
제 3 장 프롬프트 엔지니어링 기반 법원 판결문 요약 방법 7
제 1 절 케이스 브리프 키워드 선정 7
제 2 절 케이스 브리프 기반 법원 판결문 요약 8
제 4 장 실험 결과 및 분석 11
제 1 절 데이터셋 11
제 2 절 실험 방법 14
제 3 절 평가 방법 14
제 4 절 실험 결과 분석 16
제 5 장 결 론 30
참고문헌 31
