📝 CINA External Coder Tool v9

외부 전문가용 stance 입력 폼 · LLM 결과 검증용 Krippendorff α 측정 · CSV export

1️⃣ Coder 등록

⚠️ 코더 ID 미설정

2️⃣ 코딩 대상 (sample 로드)

샘플 미생성

4️⃣ 진행 + CSV export

코딩 완료: 0 / 20 (0%)
#CountryIssueCOPStanceFrameNATOConf

📈 Cross-coder Krippendorff α

N명의 코더가 같은 sample을 코딩한 후, 각 코더가 export한 CSV를 src/eval/external_coder_alpha.py에 입력하면 Krippendorff α 측정 가능. paper claim α=0.876 raw / 0.933 bias-corrected의 외부 검증 도구.

# 3명의 코더 CSV 받은 후
python -m src.eval.external_coder_alpha \
    --csvs coder_park.csv,coder_lee.csv,coder_kim.csv
# → α + per-coder means + 보고서