[Feat] [5/5 보너스] Entity 추출 프롬프트 시행착오

[TaskerJang]

컨텍스트

5/5 어린이날(공휴일) 보너스 코드일. W2 본격 작업과 W3 Entity 추출 사이의 완충일.

Entity 추출 프롬프트를 한국어 금융 문서에 맞춰 시행착오. 결과는 #13 Entity 추출 파이프라인의 입력.

WBS 1.7 — 5/5 (화).

작업

• 평가 셋 8문서 중 1문서의 1 섹션 선택 (한국어 금융 보고서)
• Entity 추출 프롬프트 v0 작성 (zero-shot)
• LLM 호출 → 결과 분석 (precision/recall 정성 판단)
• 프롬프트 v1, v2 시행착오 — few-shot 추가, 라벨 명시화 등
• 가장 좋은 버전을 kg/prompts/entity_extraction.md로 박제
• 시행착오 한 줄씩 주석 또는 ADR 후보로 적기

DoD

• v0 → vN 진화 과정이 commit history 또는 prompt 파일에 보존됨
• 한국어 금융 문서에서 Company/Metric/Risk 정확도가 확인 가능한 수준

참고

• 글 [GraphRAG [Question] 4주차 이후 Kimi 키 운영 방식 + 본인 LLM 그룹 확인 #5] 비구조화 데이터 추출 (5/4 일 발행)와 짝
• 의존: [Design] W2 도메인 온톨로지 설계 (DART 차용 + FIBO 보편 클래스, Layer A/B/C) #9 온톨로지 (라벨 정의)
• 후속: [Feat] W3 Entity 추출 파이프라인 구현 #13 Entity 추출 파이프라인
• 작업 브랜치: feat/12-entity-prompt

[TaskerJang]

✅ 흡수 — #13 으로 통합 (5/10)

본 이슈의 작업 (Entity 추출 프롬프트 시행착오 박제) 은 #13 작업 안에서 한 번에 처리됨. 별도 보너스 데이를 따로 잡지 않고 W3 본 작업 (PR #38) 에 통합.

통합된 산출물 (PR #38 머지)

• kg/prompts/entity_system_v1.md — 역할 + 5 EntityType + 4 RelationType 정의
• kg/prompts/entity_extract_v1.md — 입력 슬롯 + 제약 + 출력 JSON + Few-shot ❌/✅ 쌍
• Kimi 맞춤 패턴 (회사 레포 GPT 기준에서 변경):
  • 번호 매긴 헤더, 마크다운 표, 구체 태그
  • response_format={"type": "json_object"} 활용
  • Temperature 0.2 (정밀 추출)

시행착오 v0 → v1 (실측 박제)

항목	Spike v0 (5/9)	v1 (5/10)
Metric	❌ 분리 (영업이익 + 35% 감소)	✅ 통합
건설장비 둔화	❌ Outlook 오분류	✅ Risk
Relations	❌ 부재	✅ HAS_METRIC + FACES_RISK
canonical vs source_span	동일	✅ 분리 (정규화 / 원문)

사유: 별도 데이로 떼지 않음

5/5 어린이날을 별도 보너스 데이로 잡지 않아도, W3 본 작업 (5/10) 안에서 Spike v0 의 결함 3가지를 직접 겨냥하는 v1 프롬프트를 Few-shot 으로 박제할 수 있었음. 결과적으로 같은 작업을 한 PR 에 모음 → 미래 추적성 ↑.

후속

• ✅ [Feat] W3 Entity 추출 파이프라인 구현 #13 (PR [Feat] #13 W3 Entity 추출 파이프라인 — ontology + prompts v1 + extractor + tests #38) 머지 — 본 이슈의 산출물 모두 포함
• 발표 자료 5/23 § "How" — v0 → v1 효과 표 그대로 인용
• 5/13 (수) [GraphRAG [Question] 4주차 이후 Kimi 키 운영 방식 + 본인 LLM 그룹 확인 #5] 비구조화 데이터 추출 글 시드