LLM 버전 비교 분석 (opus-4-5 발송본 vs 4-7 vs 4-8)

먼저 전체 구조를 짚고, 섹션별 표 → 종합 평가 → 최종 권고 순으로 정리했습니다. 참고로 reports 섹션은 Gemini 출력이라 4.7/4.8 재생성 대상이 아니므로 분석에서 제외합니다.

0. 총평 스냅샷

항목	4.5 (발송본)	4.7	4.8
평균 분량 성향	간결·타이트	가장 장문·정보 최다	중간(4.5보다 김)
속도	기준	느림(global 119s 등)	가장 빠름
환각 리스크	낮음	중간~높음(디테일 창작 경향)	낮음~중간
구조·가독성	우수	정보 과다로 산만 가능	논리적 그룹화 우수
치명적 결함	beige_book 누락	일부 수치 오류	global 섹션 미완결(잘림)

1. news 섹션

관점	4.5	4.7	4.8
사실 정확성	정확, 안전	대체로 정확하나 정보량↑	정확, '삼전닉스 149조 매도/일본 95조 매수' 등 원문 충실 반영
환각	거의 없음	낮음	낮음
간결성	★ 792자, 핵심만	1,397자, 개인투자·리콜·전용기까지 나열해 산만	1,321자, 주제 그룹화로 밀도↑
정보 우선순위	반도체·환율·금리·물가 핵심 축	저우선(03년생·전용기·로봇보안)까지 포함해 초점 흐림	외국인 수급→증권가 전망→환율 순 논리 흐름 우수
경어체/형식	준수	준수	준수

개선/후퇴: 4.8은 정보 재구조화(수급/전망/환율/물가 블록화)로 4.5 대비 명확한 개선. 4.7은 커버리지는 넓으나 뉴스레터 성격상 불필요한 하위 뉴스까지 담아 우선순위 측면 후퇴.

2. telegram 섹션

관점	4.5	4.7	4.8
사실 정확성	정확	정확하나 미검증 수치 추가(야간 국채선물 3년물 +5틱/10년물 -8틱은 원문 텔레그램에 근거 불명확)	정확, 시타델·삼성 140조 등 원문 대응
환각	낮음	주의 — 원문에 없는 정량 디테일 산입 경향	낮음
간결성	1,306자, 서사형·완결도 높음	1,299자	★ 1,218자, 가장 압축적
정보 우선순위	고용→증시→AI논란→기판→전망 균형	K200/NDF 등 트레이딩 지표 전면 배치(트레이더 친화적)	순환매·수급 중심, 균형적
형식	헤드라인+본문, 뉴스레터형 완성도 최고	헤드라인형	헤드라인형

개선/후퇴: 4.7·4.8 모두 K200 야간선물, NDF 등 시장 실전 지표를 추가한 점은 개선. 단 4.7은 국채선물 틱 수치처럼 출처 불명 정량치를 반복 삽입해 환각 리스크가 올라감. 4.5의 완결된 서사형 문체가 발송본으로서는 여전히 가장 안정적.

3. insurance_news 섹션

관점	4.5	4.7	4.8
사실 정확성	정확	오류 위험: 롯데손보 예비입찰에 "한화생명"이 IOI 제출했다고 서술 — 원문은 "삼성·한화·교보생명 등"이 KDB생명 맥락과 혼재. 한화생명 개별 참여 단정은 근거 약함	정확, 원문 인용 충실
환각	낮음	중간(한화생명 롯데손보 참여 단정)	낮음
링크·형식 준수	우수(링크+요약)	우수	우수
정보 우선순위	한화/교보/공통 3분류 안정	삼성생명 국민연금 순매도 추가는 유용	보험계약대출 등 실질 지표 포함 우수
경어체	준수	준수	준수

개선/후퇴: 4.8이 정확성·형식 모두 안정. 4.7은 커버리지를 넓히려다 한화생명 인수전 참여를 과단정하는 사실오류 소지 → 후퇴.

4. global_news_brief 섹션

관점	4.5	4.7	4.8
사실 정확성	정확	정확, 디테일 풍부(SMR·중앙은행 금 옵션)	정확
간결성	★ 1,246자	1,602자	1,476자
정보 우선순위	8개 카테고리 균형	카테고리별 심화, 시타델 누락	시타델 헤지펀드까지 포함(원문 충실)
형식	준수	준수	준수

개선/후퇴: 큰 결함 없음. 4.7이 정보 밀도 최고이나 분량 팽창, 4.8이 균형적. 발송용으로는 4.5의 간결성이 무난.

5. global_news 섹션 (⚠️ 중요)

관점	4.5	4.7	4.8
완결성	완결(Tesla 항목 일부 잘림 있으나 대부분 완성)	미완결 — 아시아·한국 2번째 항목에서 문장 중단	미완결 — 아시아·한국에서 문장 중단
사실 정확성	정확	정확	정확
형식(링크+3문장)	준수	준수	준수

후퇴: 4.7·4.8 둘 다 출력이 끝까지 완성되지 않고 잘림. 5,000자대 장문 섹션에서 두 신규 버전 모두 완결 실패 → 발송 부적합 수준의 결함. 4.5도 Tesla 마지막이 잘렸으나 상대적으로 완성도 높음. 이 섹션은 길이 관리/토큰 예산 문제가 재생성본의 공통 약점임을 드러냅니다.

6. beige_book 섹션 (⚠️ 결정적)

관점	4.5	4.7	4.8
생성 여부	[발송본 없음] ❌	생성	생성
사실 정확성	—	정확	정확
인사이트	—	우수(금리 인하 여지 제한)	★ "스태그플레이션적 긴장" 통찰 우수
출처 표기	—	URL 제공	URL 제공

개선: 4.5는 이 섹션 자체를 누락했는데, 4.7·4.8 모두 정상 생성하며 명확한 개선. 특히 4.8의 스태그플레이션 프레이밍이 뒤의 insight 섹션과도 논리적으로 연결됩니다.

7. fed_speeches 섹션

관점	4.5	4.7	4.8
커버리지	Daly + Hammack 2인만 (Lagarde·Bailey 누락)	Daly + Hammack, Lagarde·Bailey는 [NOT_RELEVANT] 태깅	★ 4인 전원(Daly·Lagarde·Hammack·Bailey) 포함
사실 정확성	정확	정확	정확
정보 우선순위 판단	비Fed 인사 제외(합리적일 수 있음)	제외하되 명시적 사유 표기(투명)	전원 포함(완전성↑)
경어체	"합니다"체	"하십니다"체(약간 과공손·톤 불일치)	"하였습니다"체 통일

개선/후퇴: - 4.7의 [NOT_RELEVANT] 태깅은 판단 근거를 노출해 검수엔 유리하나, 발송본에 태그가 그대로 노출되면 형식 결함. - 4.7의 "하십니다" 경어체는 Fed 총재 발언 요약 톤으로 다소 부자연(형식 준수 미세 후퇴). - 4.8은 ECB·BOE까지 포함해 완전성 최고, 경어체 통일성도 우수.

8. executive / insight 섹션

관점	4.5	4.7	4.8
executive 정확성	정확·간결(451자)	정확, AI 블록 추가	정확, 수치 상세(예상치 11.4만)
insight 통찰력	5개 축, 안정적(그림자금융 258조 등)	교차검증형 통찰 우수(Fed 균열·원화 디커플링)	★ 상충 프레이밍 최고(스태그플레이션·순환매 이면·AI 인플레vs디플레)
환각	낮음	ARK·Thoughtful Money 등 입력 미확인 출처 인용 주의	동일하게 ARK·Thoughtful Money 인용 — 입력에 없는 소스
경어체/형식	준수	준수	준수

주의: insight에서 4.7·4.8 모두 "ARK", "Thoughtful Money 258조 달러" 등을 인용하는데, 제공된 원문(executive/insight 입력)에는 youtube·email 공용분이 텍스트로 안 보임 → 공용 입력에 실제 존재하면 정상이나, 없다면 양쪽 공통 환각. 4.5도 그림자금융 258조를 언급하므로 공용 입력에 해당 소스가 있었을 가능성이 높습니다(→ 환각 아님으로 추정). 검수 시 확인 필요 포인트.

개선: insight 통찰의 질은 4.8 > 4.7 > 4.5. 특히 4.8의 "순환매라는 위안 뒤 외국인 구조적 이탈", "AI=인플레vs디플레 논쟁"은 단순 요약을 넘어선 부가가치.

종합 결론

강점/약점 요약

4.5 (발송본): 안정적·간결·환각 최소. 그러나 beige_book 누락, fed 커버리지 부족, insight 통찰 상대적으로 평이.
4.7: 커버리지·통찰 우수하나 ①출처 불명 정량치 삽입(국채 틱), ②사실 과단정(한화생명 롯데손보), ③[NOT_RELEVANT] 태그 노출, ④"하십니다" 톤, ⑤global_news 미완결, ⑥분량 팽창·속도 저하.
4.8: ①구조화·논리 흐름 최고, ②fed 4인 완전 커버, ③insight 통찰 최고, ④속도 가장 빠름, ⑤경어체 통일. 약점은 global_news 미완결(4.7과 공통).

최종 권고

기본 채택: opus-4-8. 이유는 (1) 뉴스·telegram·insurance·fed·insight 전 섹션에서 4.5 대비 정확성 유지하며 구조·통찰·완전성이 개선, (2) 4.7 대비 환각/과단정 리스크가 낮음, (3) 처리 속도가 가장 빠름, (4) 4.5가 놓친 beige_book을 정상 생성.

단, 무조건 자동 발송은 권하지 않습니다. 다음 조건부 운용을 제안합니다:

global_news 미완결 문제 필수 해결 — 4.7·4.8 공통 결함. 해당 장문 섹션은 max token 상향 또는 카테고리 분할 생성으로 재처리 후 발송. 해결 전까지 이 섹션만 4.5 유지가 안전.
4.8 채택 + 4.7은 검수 보조용. 4.7의 [NOT_RELEVANT] 태깅은 사람이 관련성 판단을 검토할 때 유용하므로, 내부 검수 파이프라인에서만 4.7을 병행 참고.
환각 게이트 추가 — insight의 외부 소스 인용(ARK 등)과 telegram 정량치는 발송 전 원문 대조 룰 삽입.
경어체 정책 고정 — "하였습니다/합니다"로 통일(4.7의 "하십니다" 배제).

요약: 콘텐츠 품질은 4.8이 최선, 발송 안정성은 global_news 재처리와 환각 게이트를 붙인 뒤 4.8을 표준으로 전환하는 것을 권고합니다.