Fine-Tuning Large Language Models for Security Log Data Labeling

본 연구는 보안 로그 데이터 레이블링 과정의 높은 비용과 주관적 판단 문제를 해결하기 위해 대형 언어 모델(LLM)을 활용한 데이터 샘플링 기법인 코어샷 필터(CoreShot Filter)를 제안한다. 코어샷 필터는 적극학습의 대표성과 불확실성 개념을 결합하여 최적 데이터를 선별하며, 느슨한 모델과 수작업 라벨 불일치를 불확실성 지표로, 유전 알고리즘 기반 페르소나 유사도를 대표성 지표로 활용한다. 31만여 개 로그 중 핵심 204개를 추출해 GPT-4o mini를 미세조정한 결과, 코어샷 필터는 기존 층화·아웃라이어·코어셋 샘플링 대비 정확도, 재현율, F1-score 모두에서 우수했다. 특히 비정상 탐지(Recall 0.8901)와 정밀도(Precision 0.9489)에서 탁월한 성능을 보여, 코어샷 필터가 보안 로그 분석과 LLM 기반 레이블링 효율 개선에 효과적임을 입증하였다.

Authors

Publication Details

Journal
Journal of the Korea Society of Computer and Information
Published
2025-10-31
DOI
https://doi.org/10.9708/jksci.2025.30.10.143
Primary Topic
Technology and Data Analysis
Type
article
Field-Weighted Citation Impact
0.00
Controls
|||
ALL TIME
JAN
FEB
MAR
APR
MAY
JUN
JUL
AUG
SEP
OCT
article

Fine-Tuning Large Language Models for Security Log Data Labeling

Doo-Yong Jeon
Journal of the Korea Society of Computer and Information
Technology and Data Analysis
article

Fine-Tuning Large Language Models for Security Log Data Labeling

Doo-Yong Jeon
article en

Abstract

본 연구는 보안 로그 데이터 레이블링 과정의 높은 비용과 주관적 판단 문제를 해결하기 위해 대형 언어 모델(LLM)을 활용한 데이터 샘플링 기법인 코어샷 필터(CoreShot Filter)를 제안한다. 코어샷 필터는 적극학습의 대표성과 불확실성 개념을 결합하여 최적 데이터를 선별하며, 느슨한 모델과 수작업 라벨 불일치를 불확실성 지표로, 유전 알고리즘 기반 페르소나 유사도를 대표성 지표로 활용한다. 31만여 개 로그 중 핵심 204개를 추출해 GPT-4o mini를 미세조정한 결과, 코어샷 필터는 기존 층화·아웃라이어·코어셋 샘플링 대비 정확도, 재현율, F1-score 모두에서 우수했다. 특히 비정상 탐지(Recall 0.8901)와 정밀도(Precision 0.9489)에서 탁월한 성능을 보여, 코어샷 필터가 보안 로그 분석과 LLM 기반 레이블링 효율 개선에 효과적임을 입증하였다.

Journal of the Korea Society of Computer and InformationVol. 30(10)
Openalex Percentile: Top 53%
Technology and Data Analysis
AI Navigator

Ask Laika to Summarize, Analyze, and Connect papers live on the map.

Summarize Papers & Methodologies

Extract key findings, datasets, and comparative methods across publications.

Benchmark Rankings & Visual Analytics

Rank top research institutions, authors, funders, topics, and journals by Field-Weighted Citation Impact (FWCI) and paper volume with instant charts.

Connect Distant Disciplines

Bridge topological clusters on the map to find hidden collaborative intersections.

Fine-Tuning Large Language Models for Security Log Data Labeling — Doo-Yong Jeon · Journal of the Korea Society of Computer and Information (2025) | TGRS Research Map | TGRS