Must Empire

플랫폼별 수집 현황

플랫폼	총 건수	태깅	미태깅	태깅률	소스	기간	크론
TTelegram	153,056	37,763	115,293	24.7%	135채널	2024-01 ~	4h OK
SSlack	118,114	62,337	55,777	52.8%	32채널	2024-01 ~	30m OK
AAlphaSense	9,242	별도	별도	-	별도 테이블	2025-08 ~	OK
DDiscord	6,274	0	6,274	0%	108채널 (69 활성)	2026-03 ~	30m OK
LLinkedIn	1,180	114	1,066	9.7%	17명	2024-03 ~	OK
XX (Twitter)	658	333	325	50.6%	85계정	2014-10 ~	05:00 OK
NNotion	412	293	119	71.1%	377페이지	2024-01 ~	04:00 OK
SSubstack Chat	296	234	62	79.1%	107	2026-01 ~	OK
TOTAL	289,232	101,074	178,916	34.9%

수집 스케줄 & 방식

API 기반 (백그라운드 자동)

브라우저 불필요. 맥 잠금/sleep 상태에서도 동작 가능.

TTelegram	4시간마다	Telethon API
SSlack	30분마다	Slack Web API
DDiscord	30분마다	Discord API (2 tokens)

Chrome 브라우저 제어 (osascript)

Chrome 로그인 세션 필요. 맥이 켜져있고 Chrome이 열려있어야 함.

LLinkedIn 피드	매일 02:00	Chrome JS
LLinkedIn 타겟	매일 02:30	Chrome JS (17명)
NNotion	매일 04:00	Chrome JS
XX (Twitter)	매일 05:00	Chrome JS (85계정)
AAlphaSense	매일 00:00	Chrome JS
SSubstack Chat	매일 06:00	Chrome JS

Chrome 새벽 스케줄: 02:00 LinkedIn 피드 → 02:30 LinkedIn 타겟(~13분) → 04:00 Notion → 05:00 X → 06:00 Substack. 전부 새벽에 몰아서 실행, 낮에는 컴퓨터 작업 방해 없음.

D Discord 상세

서버 구성

지구 공부방43채널 (JKH 토큰)

한국섹터리서치19채널 (기본 토큰)

Marhelm11채널 (shipping/commodity)

Agrippa Investment's8채널

SNUVALUE7채널

Hims House10채널 (2 disabled)

TickerTrends / Datadoor / DMs10채널

Top 채널 (수집량 기준)

한국섹터리서치/바이오763

지구 공부방/offshore565

한국섹터리서치/조선해운536

한국섹터리서치/투자일반505

지구 공부방/china292

한국섹터리서치/원자재227

T Telegram 상세

세션

조주현 (939618078)9채널 | API 27429601

정기홍 (369026088)94채널 | API 37882121

총 구독103채널 (중복 자동 병합)

수집 주기4시간 / MAX 500msg/ch

실행 시간~57초/회

태깅 전략

A Regex KR코드	5채널	1,570건	81%
B Regex $TICKER	5채널	1,999건	58%
C AI (Codex)	123채널	148,572건	20%
D Skip	2채널	730건	-

S Slack 상세

총 채널32개 (4개 신규: flow-데일리-key-insights, flow-운용, flow-투자잡담, 리서치-기업-비상장)

스레드 재스캔최근 7일 스레드 답글 자동 재수집 (conversations.replies)

기타 플랫폼

A AlphaSense

총 문서9,242

기간2025-08 ~ 2026-03

저장alphasense_contents (별도)

X X (Twitter)

총 수집658

추적 계정85개 (87등록, 85 active)

태깅률50.6%

L LinkedIn

총 수집1,180 (846 신규)

추적 대상17명 (개인 13 + 기업 4)

태깅률9.7%

S Substack Chat + Notion

Substack296건 (79% 태깅)

Notion412건 (71% 태깅)

태깅 파이프라인

수집 (크론)

OK

→

Step 1: Regex

OK

→

Step 2: Codex

FIXED

→

DB 업데이트

READY

Codex 워커 현황

Worker	계정	이메일	토큰 만료	상태
worker_0	juhyun	juhyuncho2000@gmail.com	~2026-04 (자동갱신)	OK
worker_1	kate	mj.kate96@gmail.com	~2026-04-08	OK
worker_2	wooju	boys5100@snu.ac.kr	~2026-03-21 (D-2)	만료임박

토큰 저장: ~/.codex/worker_0~2/ (영구 디렉토리, 자동 갱신 보존)

크론잡 (launchd + crontab)

서비스	대상	주기 (KST)	방식	상태
com.must-empire.telegram-crawl	Telegram	4시간	API	OK
com.must.slack-sync	Slack	30분	API	OK
com.must.discord-crawl	Discord	30분	API	OK
com.must-empire.linkedin-crawl	LinkedIn 피드	매일 02:00	Chrome	OK
com.must-empire.linkedin-targets	LinkedIn 타겟	매일 02:30	Chrome	OK
com.must-empire.notion-crawl	Notion	매일 04:00	Chrome	OK
crontab: crawl-x.sh	X (Twitter)	매일 05:00	Chrome	OK
com.must-empire.alphasense-crawl	AlphaSense	매일 00:00	Chrome	OK
com.must-empire.substack-chat	Substack	매일 06:00	Chrome	OK
com.must.tag-feed	피드 태깅	4시간	Codex	OK
com.must.tag-all	전체 태깅	4시간	Codex	OK
com.must.kr-stock-sync	KR 주가 동기화	매일 16:00	KIS API	OK
com.must-empire.server	API 서버	KeepAlive	-	:8790
com.clawdbot.gateway	봇 게이트웨이	KeepAlive	-	:18789
com.must.agentic-research.jhbot	리서치 봇	KeepAlive	-	OK

전체 파이프라인 정상 가동 중

전체 수집량

태깅 완료

미태깅

활성 크론잡