STAGE 01 · NORMALIZE / DEDUP정규화와 중복 제거
반복을 삭제하지 않습니다. 모든 원시 항목을 보존하고 대표 레코드와 중복 그룹으로 추적 가능하게 연결합니다.
470 RETAINED · 439 CANONICAL2026.08.10—08.11KST · LOCAL SNAPSHOT
OPERATIONKST·출처·엔터티 정규화와 3-gram 텍스트 유사도
OUTPUT470개 보존, 439개 canonical, 25개 중복 그룹
CONFIDENCEID·KST·canonical·원문 행 참조 검증 통과
UNCERTAINTYforwarded_from 부재로 교차 게시는 텍스트 기반 추정
RAW470입력VALID470파싱 실패 0CANONICAL439대표 레코드NEAR DUPLICATES3125 groupsLIMITED INFO36제목·단문 중심- Markdown 번호 항목을 1레코드로 파싱
- 게시 일자와 시각을 KST ISO-8601로 결합하고 원래 메타 문자열 보존
- URL 도메인으로 Telegram·블로그·웹 기사 분류
- 제목·요약 사전으로 회사·확실한 티커·섹터·국가·사건 유형 추출
- 완전·근접 중복을 제거하지 않고 canonical_record_id로 연결
- 제목/링크만 있거나 분석 정보가 제한적인 레코드를 limited로 표기
☑️ 26.08.11 화요일 장전 요약 리포트
같은 채널 안에서 제목 또는 요약의 높은 텍스트 유사도가 확인됨. 후속 업데이트 가능성을 보존함.
시작
같은 채널 안에서 제목 또는 요약의 높은 텍스트 유사도가 확인됨. 후속 업데이트 가능성을 보존함.
타점 읽어주는 여자(타자)
SIM 100–100%<오늘 개장전 꼭 알아야할 5가지_8/10 Bloomberg>
같은 채널 안에서 제목 또는 요약의 높은 텍스트 유사도가 확인됨. 후속 업데이트 가능성을 보존함.
✅ 주요 상승 종목 현황(2026-08-10 10:00 기준)
같은 채널 안에서 제목 또는 요약의 높은 텍스트 유사도가 확인됨. 후속 업데이트 가능성을 보존함.
코스닥 일봉
같은 채널 안에서 제목 또는 요약의 높은 텍스트 유사도가 확인됨. 후속 업데이트 가능성을 보존함.
타점 읽어주는 여자(타자)
SIM 100–100%DUP-006syndicated or cross posted2 RECORDS 2026.08.10 13:52:35
서로 다른 채널에서 제목 또는 요약의 높은 텍스트 유사도가 확인됨. 독립 확인으로 세지 않음.
타점 읽어주는 여자(타자)루팡
SIM 100–100%오후장 테마동향
같은 채널 안에서 제목 또는 요약의 높은 텍스트 유사도가 확인됨. 후속 업데이트 가능성을 보존함.
타점 읽어주는 여자(타자)
SIM 100–100%🌎 글로벌 뉴스 브리핑 - 2026년 8월 11일
같은 채널 안에서 제목 또는 요약의 높은 텍스트 유사도가 확인됨. 후속 업데이트 가능성을 보존함.
InsiderTracking
SIM 88–100%트럼프 발언 및 미국 정치 관련 정리 - 2026년 8월 11일
같은 채널 안에서 제목 또는 요약의 높은 텍스트 유사도가 확인됨. 후속 업데이트 가능성을 보존함.
InsiderTracking
SIM 91–91%금일 실적 발표 리스트
같은 채널 안에서 제목 또는 요약의 높은 텍스트 유사도가 확인됨. 후속 업데이트 가능성을 보존함.
InsiderTracking
SIM 100–100%raw records470
valid records470
parsing failures0
exact duplicates0
near duplicates31
forwarded or syndicated copies3
duplicate groups25
syndicated or cross posted groups3
unique canonical records439
retained records470
limited information records36
missing timestamps0
missing sources0
- 외부 원문 URL 대신 Telegram 게시물 URL만 제공된 항목은 원 발행사를 구조적으로 분리할 수 없음.
- 텍스트 유사도 그룹은 같은 사건의 후속 업데이트를 중복으로 묶을 수 있어 Stage 2에서 사건 단위로 재검토함.
- 티커는 공급 자료에서 확실히 식별 가능한 회사명에만 보수적으로 부여함.