Analyzing the Effects of Table Preprocessing Methods on Korean Question-Answering Performance
표 기반 질의응답(Table QA)은 자연어 질문에 대해 표 데이터를 활용해 답변을 제공하는 작업으로, 데이터 전처리 방식이 성능에 큰 영향을 미친다. 본 연구는 한국어 기반 복잡한 표 질의응답 데이터셋을 구축하고, 다양한 데이터 표현 방식(HTML, Markdown, Text, Numpy)이 성능에 미치는 영향을 체계적으로 분석하였다. 실험 결과, 표의 구조적 특성에 따라 최적의 데이터 표현 방식이 상이하게 나타났다. 기본표에서는 Numpy, 병합표에서는 Text, 조합표에서는 HTML 형식이 가장 높은 성능을 보였으며, 표의 복잡성이 증가할수록 성능이 저하되는 경향이 확인되었다. 본 연구는 표의 구조적 특성에 따른 최적의 데이터 표현 방식을 제안함으로써, 표 기반 질의응답 시스템의 성능을 개선하고 데이터 처리의 효율성을 높이는 실질적 방향성을 제시한다. 이는 공공 데이터 활용, 기업 데이터 분석, 사용자 질문에 실시간으로 답변하는 고객 지원 시스템 등 다양한 실무 환경에서 데이터 중심 의사결정의 신뢰성과 정확성을 높이는 데 기여할 것으로 기대된다. 또한, 한국어 표 기반 질의응답 성능을 개선하기 위한 새로운 데이터 전처리 접근법을 제시하였으며, 표의 구조적 특성과 데이터 표현 방식이 질의응답 성능에 미치는 영향을 체계적으로 분석했다는 점에서 의의를 가진다.
Authors
- Jihwan Woo (ORCID: https://orcid.org/0000-0002-0424-0242)
- Sungho Won (ORCID: https://orcid.org/0000-0001-5751-5089)
- Woo-Hyuk Jung (ORCID: https://orcid.org/0000-0002-6626-2666)
- Jae-Hong Lee (ORCID: https://orcid.org/0009-0008-3717-2988)
- H Bae
Publication Details
- Journal
- Information Systems Review
- Published
- 2025-05-31
- DOI
- https://doi.org/10.14329/isr.2025.27.2.071
- Primary Topic
- Topic Modeling
- Type
- article
- Field-Weighted Citation Impact
- 0.00