세 에이전트가 돌리고, 서로를 확인합니다.
발표는 정해진 순서가 하루 두 번 합니다. 걸린 조사는 운영 에이전트가 결과표 원문과 대조해 풀고, 감사 에이전트가 밖에서 판정하고, 개선 에이전트가 한 주의 기록으로 규칙을 고칩니다. 이 화면은 그 기록을 손대지 않고 그대로 보여 줍니다.
이 화면이 하루 넘게 새로 그려지지 않았습니다 — 갱신이 멈췄을 수 있습니다.
오늘정해진 순서와 그 결과 — 11월 16일(월)
- 07:40✓새 조사 읽기수집 · 서버
07:43 · 끝남
- 09:00✓오늘의 예측발표 · 서버
09:00 · 새 조사 없음 · 발표판은 오늘 것으로 · 09:00 에 오늘의 예측을 얼림
- 갱신 직후✓걸린 조사 풀기운영 · Claude
23:26 · 1번 돌아 1건을 처리
- 09:40△아침 발표 감사감사 · OpenAI
09:41 · 판정 「주의」
- 18:40✓새 조사 읽기수집 · 서버
18:45 · 끝남
- 19:30✓오늘의 채점발표 · 서버
19:30 · 새 조사 없음 · 발표판은 오늘 것으로
- 20:10△저녁 발표 감사감사 · OpenAI
20:11 · 판정 「주의」
✓끝남△볼 것이 있음✕실패○예정–할 일이 없어 돌지 않음
오늘 있었던 일새것부터
- 23:26운영✓운영 에이전트 — 걸린 것 1건을 원문과 대조해 처리
- 23:26사람✓고침 — 수집이 읽지 못한 조사도 걸린 조사로 · 걸린 조사로 잡혀 원문 값(더불어민주당 34.6 · 국민의힘 43.0)으로 반영 · 기계 대조 「맞음」
- 23:25순서✓갱신(손으로 · 다시 돌림) — 새 조사 1건 반영 · 걸린 것은 운영 에이전트가 풂
- 20:11감사△감사 — 판정 「주의」 · 2026-11-16 발표 날짜와 예측값은 맞습니다. 다만 차기 대선주자의 조사별 예측 성적은 주의가 필요합니다.
- 19:30순서✓정해진 갱신 — 새 조사 없음 · 발표판은 오늘 것으로
- 18:45순서✓수집 — 새 조사 읽기 끝남
- 09:41감사△감사 — 판정 「주의」 · 2026-11-16 발표 날짜와 예측값은 맞습니다. 차기 대선주자의 조사별 예측 성적은 주의가 필요합니다.
- 09:00순서✓오늘의 예측을 얼림 — 이 값은 발표가 끝나면 고치지 않는다
- 09:00순서✓정해진 갱신 — 새 조사 없음 · 발표판은 오늘 것으로
- 07:43순서✓수집 — 새 조사 읽기 끝남
세 에이전트맡은 일 · 마지막으로 한 일 · 바꿀 수 있는 것
- 운영Claude✓걸린 조사 없음
걸린 조사를 결과표 원문과 대조해 풉니다
1번오늘 돈 횟수1건오늘 내린 결정20건지금까지23:26 결과표 원문과 대조 — 원문 값으로 고침 1건 · 남은 것 0건
사람이 뒤집은 결정 1건 — 아래 「결정」에 그대로 남아 있습니다.
바꿀 수 있는 것보정 파일(overrides.json)만, 명령 하나(s2ctl)로만. 값을 넣으려면 쪽 번호와 전체 행의 값을 근거로 적어야 합니다.
- 감사OpenAI Codex△판정 주의
발표가 제대로 됐는지 밖에서, 공개 화면만 보고 판정합니다
2번오늘 판정1가지짚은 것6번지금까지20:11 2026-11-16 발표 날짜와 예측값은 맞습니다. 다만 차기 대선주자의 조사별 예측 성적은 주의가 필요합니다.
판정의 흐름△△△△△△
- 주의차기 대선주자 조사별 예측의 적중률이 낮음engine 누적 8건, 평균 오차 5.49%p, 범위 적중률 12.5%(1/8). 표본은 적음.
그 밖에 확인하고 문제없다고 적은 것 5가지.
서버의 기계 점검 47/47 통과 · 23:30
바꿀 수 있는 것아무것도 바꾸지 못합니다. 읽고 판정만 합니다.
- 개선Claude·사람이 볼 제안 3건
한 주의 결정 · 성적 · 감사 보고를 읽고 규칙을 고칩니다
3줄더한 선례3건열린 제안2건끝난 제안11/15 21:42 매핑/실행 에러와 다자구도 보정 상한 제안은 적용 후 수치로 효과가 확인됐고, 정당표 파서 열순서 점검은 아직 열려 있다. 다만 차기 대선주자의 '조사별 수집 엔진' 성적(n=8·적중12.5%)은 모델 보정 개선과 별개로 감사에 하루 4회 반복 지적됐다.
다음 실행 — 11월 22일(일) 21:40
바꿀 수 있는 것선례 문서와 기관 규칙만. 코드와 모형은 고치지 않고 제안으로 쌓아 사람이 봅니다.
결정걸린 조사를 어떻게 했는지 — 근거와 함께
모두 24건 — 운영 에이전트 20건 · 개발자 검토 3건 · 정당표 문(기계) 1건. 값을 넣거나 받아들인 결정에는 쪽 번호와 전체 행의 값이 적혀 있어야 합니다.
| 때 | 누가 | 조사 | 한 일 | 근거결과표의 어느 쪽 · 어느 줄 |
|---|---|---|---|---|
| 23:26 | 운영 에이전트 | 리얼미터 11/12~11/13정당 지지도 | 원문 값으로 고침걸린 까닭 — 수집이 결과표를 읽지 못함 | p.5 ◈ 정당 지지도 ◈전체◈ 행(n=1004): 더불어민주당34.6 국민의힘43.0 조국혁신당8.7 진보당.9 개혁신당1.9 기타정당2.0 없음7.9 잘모름.9(무당층…p.5 ◈ 정당 지지도 ◈전체◈ 행(n=1004): 더불어민주당34.6 국민의힘43.0 조국혁신당8.7 진보당.9 개혁신당1.9 기타정당2.0 없음7.9 잘모름.9(무당층=없음+잘모름=8.8) |
| 11/15 11:03 | 개발자 검토 | – | 적어 둠 | v5273:party 의 맞바뀜 바로잡기(11/15 02:45 · 정당표 문)의 근거를 잇는다 — 같은 조사의 확인 기록(02:21 v5273:poll)에 쪽과 전체 행이…v5273:party 의 맞바뀜 바로잡기(11/15 02:45 · 정당표 문)의 근거를 잇는다 — 같은 조사의 확인 기록(02:21 v5273:poll)에 쪽과 전체 행이 있다: 19610_V1.1_KIR_천지일보_국정현안여론조사_집계표_20261109시행_003m.pdf p.5 【1. 정당 지지도】 합계(1,001/1,001) 행 — 더불어민주당 32.7 · 국민의힘 45.2 · 조국혁신당 6.1 · 진보당 0.6 · 개혁신당 1.8 · 기타정당 3.6 · 없음 9.2 · 모름 0.7. 저장값은 개혁신당과 진보당이 맞바뀌어 있었다. 03:02 부터는 맞바뀜 기록에 쪽 번호를 함께 적는다. |
| 11/15 02:47 | 운영 에이전트 | 여론조사공정 11/1~11/2정당 지지도 | 원문 값으로 고침걸린 까닭 — 정당 지지도 값이 원문 표와 다름 | p.6/7 【표1】 정당 지지도 전체 행(n=1001): 더불어민주당33.9·국민의힘45.1·조국혁신당6.7·진보당1.6·개혁신당2.8·기타정당2.0·지지정당없다7.1·잘…p.6/7 【표1】 정당 지지도 전체 행(n=1001): 더불어민주당33.9·국민의힘45.1·조국혁신당6.7·진보당1.6·개혁신당2.8·기타정당2.0·지지정당없다7.1·잘모르겠다0.8(무당층=7.1+0.8=7.9) — 격자(pdf_table p.6) 확인, 저장값은 개혁신당·진보당이 맞바뀌어 있었음 (19598_261102-펜앤마이크75차-결과분석v1.pdf) |
| 11/15 02:45 | 정당표 문(기계) | 코리아정보리서치 11/9~11/10정당 지지도 | 맞바뀐 칸 바로잡음 | 정당표 좌표 대조(19610_V1.1_KIR_천지일보_국정현안여론조사_집계표_20261109시행_003m.pdf): 정당 지지도 표 전체 줄에서 개혁신당 1.8 · 진보당…정당표 좌표 대조(19610_V1.1_KIR_천지일보_국정현안여론조사_집계표_20261109시행_003m.pdf): 정당 지지도 표 전체 줄에서 개혁신당 1.8 · 진보당 0.6 — 저장값은 두 칸이 맞바뀌어 있었다 |
| 11/15 02:45 | 개발자 검토 | 리서치웰 기관 전체정당 지지도 | 기관 규칙 | PDF p.7 문1 · 【표1】 「2028년 총선에서 투표할 정당 후보」 — 정당 지지도 문항이 없다(9/10 · 9/22 · 10/15 · 10/29 · 11/12 조사) |
| 11/15 02:45 | 개발자 검토 | 리서치웰 11/11~11/12정당 지지도 | 넣은 값을 도로 뺌걸린 까닭 — 정당 지지도 값이 원문 표와 다름 | PDF p.7 문1 「2028년 총선에서 투표할 정당 후보」(p.17 【표1-1】) — 정당 지지도가 아니라 총선 투표 의향 문항. 리서치웰은 9월부터 정당 지지도를 묻지…PDF p.7 문1 「2028년 총선에서 투표할 정당 후보」(p.17 【표1-1】) — 정당 지지도가 아니라 총선 투표 의향 문항. 리서치웰은 9월부터 정당 지지도를 묻지 않는다(9/10 · 9/22 · 10/15 · 10/29 조사에 정당 문항 없음) |
| 11/15 02:40 | 운영 에이전트 | 리서치웰 11/11~11/12정당 지지도 | 원문 값으로 고침걸린 까닭 — 정당 지지도 값이 원문 표와 다름 | p.17/18 【표1-1,1-2】 전체행 — 격자(pdf_table)로 열 순서 확인: 개혁신당/국민의힘/더불어민주당/조국혁신당/진보당/기타정당/없다/잘모르겠다. 값: 개…p.17/18 【표1-1,1-2】 전체행 — 격자(pdf_table)로 열 순서 확인: 개혁신당/국민의힘/더불어민주당/조국혁신당/진보당/기타정당/없다/잘모르겠다. 값: 개혁2.0/국힘48.1/더불어32.0/조국9.4/진보0.8/기타1.7/없다4.1/모름2.0→무당층6.1(19614_1113_전국_뉴데일리_결과분석_리서치웰.pdf). 저장값은 민주·국힘 맞바뀜, 개혁·진보 맞바뀜, 기타정당은 '없다' 값(4.1)과 혼동되어 있었음 |
| 11/15 02:39 | 운영 에이전트 | 한길리서치 11/7~11/9정당 지지도 | 원문 값으로 고침걸린 까닭 — 정당 지지도 값이 빠짐 | p.6 표0 전체행(19608_결과분석_한길리서치1110.pdf): 더불어32.7/국힘29.3/조국6.6/진보1.0/개혁2.5/기타3.6/정당없다21.5/잘모름2.8 →…p.6 표0 전체행(19608_결과분석_한길리서치1110.pdf): 더불어32.7/국힘29.3/조국6.6/진보1.0/개혁2.5/기타3.6/정당없다21.5/잘모름2.8 → 무당층=21.5+2.8=24.3, 합계100.0 |
앞의 16건 더 보기
| 때 | 누가 | 조사 | 한 일 | 근거결과표의 어느 쪽 · 어느 줄 |
|---|---|---|---|---|
| 11/15 02:39 | 운영 에이전트 | 리서치뷰 11/7~11/8정당 지지도 | 원문 값으로 고침걸린 까닭 — 정당 지지도 값이 원문 표와 다름 | p.8 '2. 정당지지도' 전체행(19607_결과분석_리서치뷰_전국_10월_정기조사_261110.pdf): 더불어31.6/국힘36.9/조국8.6/진보1.0/개혁2.5/기타…p.8 '2. 정당지지도' 전체행(19607_결과분석_리서치뷰_전국_10월_정기조사_261110.pdf): 더불어31.6/국힘36.9/조국8.6/진보1.0/개혁2.5/기타2.7/없음15.8/모름1.0→무당16.8 — 개혁·진보 맞바뀜 확인, 나머지 일치 |
| 11/15 02:38 | 운영 에이전트 | 한국갤럽조사연구소 11/10~11/12정당 지지도 | 원문 값으로 고침걸린 까닭 — 정당 지지도 값이 원문 표와 다름 | p.13 전체행(19612_결과분석_한국갤럽_2026년_11월_2주_정당지지도.pdf): 더불어39%/국힘26%/조국4%/진보1%/개혁3%/기본0.3%/사회0.4%/이외0…p.13 전체행(19612_결과분석_한국갤럽_2026년_11월_2주_정당지지도.pdf): 더불어39%/국힘26%/조국4%/진보1%/개혁3%/기본0.3%/사회0.4%/이외0%(공란)/무당27%(없음24+모름3). 기타정당(0.3+0.4=0.7)은 기존 저장값과 일치 — 개혁·진보만 맞바뀜 |
| 11/15 02:38 | 운영 에이전트 | 한국갤럽조사연구소 11/3~11/5정당 지지도 | 원문 값으로 고침걸린 까닭 — 정당 지지도 값이 원문 표와 다름 | p.13 전체행(19603_결과분석_한국갤럽_2026년_11월_1주_정당지지도.pdf): 더불어36%/국힘28%/조국3%/진보1%/개혁2%/기본소득0.4%/사회민주0%(공…p.13 전체행(19603_결과분석_한국갤럽_2026년_11월_1주_정당지지도.pdf): 더불어36%/국힘28%/조국3%/진보1%/개혁2%/기본소득0.4%/사회민주0%(공란)/이외1%/무당층28%(=없음26+모름2). 기타정당=기본소득+사회민주+이외=1.4. 개혁·진보 맞바뀜 확인 |
| 11/15 02:36 | 운영 에이전트 | 미디어토마토 11/2~11/3정당 지지도 | 원문 값으로 고침걸린 까닭 — 정당 지지도 값이 원문 표와 다름 | p.4 전체행(19600__여심위_202차_통계표.pdf): 더불어37.6/국힘37.7/조국8.7/진보1.5/개혁2.4/기타0.9/없음9.7/모름1.6→무당11.3. 지지…p.4 전체행(19600__여심위_202차_통계표.pdf): 더불어37.6/국힘37.7/조국8.7/진보1.5/개혁2.4/기타0.9/없음9.7/모름1.6→무당11.3. 지지정당 자기교차 n(진보당14→1.4%,개혁신당24→2.3%)으로 열 순서 재확인, 개혁·진보 맞바뀜 |
| 11/15 02:36 | 운영 에이전트 | 코리아정보리서치 11/2~11/3정당 지지도 | 원문 값으로 고침걸린 까닭 — 정당 지지도 값이 원문 표와 다름 | p.5 합계행(19601_V1.1_KIR_천지일보...20261102): 더불어35.3/국힘41.9/조국6.5/진보2.4/개혁1.7/기타2.3/없음9.5/모름0.4→무당9…p.5 합계행(19601_V1.1_KIR_천지일보...20261102): 더불어35.3/국힘41.9/조국6.5/진보2.4/개혁1.7/기타2.3/없음9.5/모름0.4→무당9.9. 진보층 교차(진보당8.9%/개혁신당0.4%)로 열 순서 재확인, 개혁·진보 맞바뀜 |
| 11/15 02:35 | 운영 에이전트 | 조원씨앤아이 10/31~11/2정당 지지도 | 원문 값으로 고침걸린 까닭 — 정당 지지도 값이 원문 표와 다름 | p.9 ▣전체▣ 행(19599_스트레이트뉴스_26년_24차_261103.pdf): 더불어39.7/국힘41.5/조국4.4/진보0.7/개혁1.7/기타1.2/없음10.0/모름0…p.9 ▣전체▣ 행(19599_스트레이트뉴스_26년_24차_261103.pdf): 더불어39.7/국힘41.5/조국4.4/진보0.7/개혁1.7/기타1.2/없음10.0/모름0.8→무당층10.8. 지지정당 자기교차 n으로 재확인: 진보당n=14(0.7%), 개혁신당n=32(1.6~1.7%) — 개혁·진보 맞바뀜 확인 |
| 11/15 02:35 | 운영 에이전트 | 비전코리아 10/31~11/1정당 지지도 | 원문 값으로 고침걸린 까닭 — 정당 지지도 값이 빠짐 | p.19 ■전체■ 행(19597__비전코리아_23차_2601029.pdf): 국힘44.6/더불어33.5/조국7.2/개혁2.6/그외정당1.8/진보0.7/없음8.1/모름1.5…p.19 ■전체■ 행(19597__비전코리아_23차_2601029.pdf): 국힘44.6/더불어33.5/조국7.2/개혁2.6/그외정당1.8/진보0.7/없음8.1/모름1.5 → 무당층=8.1+1.5=9.6, 합계100.0 |
| 11/15 02:35 | 운영 에이전트 | 코리아정보리서치 10/26~10/27정당 지지도 | 원문 값으로 고침걸린 까닭 — 정당 지지도 값이 원문 표와 다름 | p.5 '1. 정당 지지도' 합계행(19590_V1.1_KIR_천지일보...20261026): 더불어38.7/국힘41.7/조국6.7/진보0.6/개혁1.7/기타2.6/없음7…p.5 '1. 정당 지지도' 합계행(19590_V1.1_KIR_천지일보...20261026): 더불어38.7/국힘41.7/조국6.7/진보0.6/개혁1.7/기타2.6/없음7.9/모름0.3→무당층8.2 — 개혁·진보 맞바뀜 확인, 나머지 일치 |
| 11/15 02:34 | 운영 에이전트 | 한길리서치 10/25~10/26정당 지지도 | 원문 값으로 고침걸린 까닭 — 정당 지지도 값이 빠짐 | p.6 표0 전체행(19588_결과분석_한길리서치1026.pdf): 더불어35.7/국힘28.1/조국5.7/진보1.7/개혁2.0/기타4.0/정당없다20.4/잘모름2.4 →…p.6 표0 전체행(19588_결과분석_한길리서치1026.pdf): 더불어35.7/국힘28.1/조국5.7/진보1.7/개혁2.0/기타4.0/정당없다20.4/잘모름2.4 → 무당층=20.4+2.4=22.8, 합계100.0 |
| 11/15 02:21 | 운영 에이전트 | – | 적어 둠 | 새 이름 「한병도」 알림(poll 5046 11/2~3, poll 5273 11/9~10, 둘 다 korea_info) — DB 확인 결과 지금까지 2개 조사(두 조사 넘…새 이름 「한병도」 알림(poll 5046 11/2~3, poll 5273 11/9~10, 둘 다 korea_info) — DB 확인 결과 지금까지 2개 조사(두 조사 넘게 아님)뿐이라 name 등록 보류. 세 번째 조사에서 또 나오면 등록. |
| 11/15 02:21 | 운영 에이전트 | 코리아정보리서치 11/9~11/10조사 전체 | 전국 값으로 확인걸린 까닭 — 전국 값으로 보기 어려움 | 19610_V1.1_KIR_천지일보_국정현안여론조사_집계표_20261109시행_003m.pdf p.5 【1. 정당 지지도】 합계(1,001/1,001) 행: 더불어민주당3…19610_V1.1_KIR_천지일보_국정현안여론조사_집계표_20261109시행_003m.pdf p.5 【1. 정당 지지도】 합계(1,001/1,001) 행: 더불어민주당32.7% 국민의힘45.2% 조국혁신당6.1% 진보당0.6% 개혁신당1.8% 기타정당3.6% 없음9.2% 모름0.7% — 전국 n=1001 전체(합계) 행, 지역 소계 아님. |
| 11/15 02:21 | 운영 에이전트 | 여론조사공정 11/1~11/2조사 전체 | 전국 값으로 확인걸린 까닭 — 전국 값으로 보기 어려움 | 19598_261102-펜앤마이크75차-결과분석v1.pdf p.6 【표1】정당 지지도, 전체(1001/1001) 행: 더불어민주당33.9 국민의힘45.1 조국혁신당6.7…19598_261102-펜앤마이크75차-결과분석v1.pdf p.6 【표1】정당 지지도, 전체(1001/1001) 행: 더불어민주당33.9 국민의힘45.1 조국혁신당6.7 진보당1.6 개혁신당2.8 기타정당2.0 없다7.1 모름0.8 — 전국 n=1001 전체 행, 지역 소계 아님. |
| 11/15 02:21 | 운영 에이전트 | 비전코리아 10/31~11/1차기 대선주자 | 원문 값으로 고침걸린 까닭 — 차기 대선주자 표 이상 | 19597__비전코리아_23차_2601029.pdf p.23 【3. 차기 대선 후보 적합도 (1)】 ■ 전 체 ■ (1,024) 행: 오세훈18.4 장동혁13.6 한동훈1…19597__비전코리아_23차_2601029.pdf p.23 【3. 차기 대선 후보 적합도 (1)】 ■ 전 체 ■ (1,024) 행: 오세훈18.4 장동혁13.6 한동훈12.6 김민석12.4 조국7.5 이진숙5.7 송영길5.3 정청래5.1 추미애2.4 이준석2.3 이외다른인물2.1 적합후보없음9.2 잘모르겠음3.4 (합계 100.0%, 없음/모름=9.2+3.4=12.6). 선례(비전코리아) 그대로. |
| 11/15 02:21 | 운영 에이전트 | 리서치웰 11/11~11/12차기 대선주자 | 싣지 않음걸린 까닭 — 차기 대선주자 표 이상 | 19614_1113_전국_뉴데일리__결과분석_리서치웰.pdf p.10 문4 차기지도자_여당그룹/p.11 문5 차기지도자_야당그룹 — 두 진영으로 나눠 물은 별도 문항. 선…19614_1113_전국_뉴데일리__결과분석_리서치웰.pdf p.10 문4 차기지도자_여당그룹/p.11 문5 차기지도자_야당그룹 — 두 진영으로 나눠 물은 별도 문항. 선례(리서치웰) 그대로. |
| 11/15 02:20 | 운영 에이전트 | 리서치웰 10/28~10/29차기 대선주자 | 싣지 않음걸린 까닭 — 차기 대선주자 표 이상 | 19592_1029_전국_뉴데일리__결과분석_리서치웰.pdf p.9 문3 차기지도자_여당그룹(범여권)/p.10 문4 차기지도자_야당그룹(범야권) — 두 진영으로 나눠 물은…19592_1029_전국_뉴데일리__결과분석_리서치웰.pdf p.9 문3 차기지도자_여당그룹(범여권)/p.10 문4 차기지도자_야당그룹(범야권) — 두 진영으로 나눠 물은 별도 문항. 선례(리서치웰) 그대로. |
| 11/15 02:20 | 운영 에이전트 | 한길리서치 10/25~10/26차기 대선주자 | 싣지 않음걸린 까닭 — 차기 대선주자 표 이상 | 19588_결과분석_한길리서치1026.pdf p.7 문3(범진보 차기 대선주자)/p.8 문4(범보수 차기 대선주자) — 두 진영 문항이 별도 표이며 합쳐 157.6%가 됨…19588_결과분석_한길리서치1026.pdf p.7 문3(범진보 차기 대선주자)/p.8 문4(범보수 차기 대선주자) — 두 진영 문항이 별도 표이며 합쳐 157.6%가 됨. 선례(한길리서치) 그대로. |
개선짚은 것이 고쳐지고, 고친 것을 다시 잽니다
- 짚는다감사 에이전트의 판정 · 운영 기록 · 날마다의 채점
- 제안하거나 고친다선례와 기관 규칙은 개선 에이전트가 바로, 코드와 모형은 사람이
- 다시 잰다고치기 전과 뒤의 값을 같은 잣대로
- 남긴다무엇을 · 누가 짚었나 · 앞뒤 값
고친 것의 기록무엇을 · 누가 짚었나 · 고치기 전과 뒤
- 23:26수집이 읽지 못한 조사도 걸린 조사로
짚은 곳운영 현황 점검(11/16 밤 — 리얼미터 조사가 빠졌는데 현황판은 「걸린 조사 0건」이었음)고친 곳개발자 · 운영자 확인
수집 프로그램은 결과표에서 한 주제도 읽어 내지 못한 조사를 「실패」로 적고 다시 읽지 않습니다. 그런 조사는 여기까지 오지 않아, 세 에이전트도 현황판도 모르는 채 예측에서 빠졌습니다. 이제는 그런 조사를 「걸린 조사」로 빼 두고, 운영 에이전트가 결과표 원문의 전체 행을 읽어 넣습니다. 넣은 값은 기계가 원문과 한 번 더 대조합니다.
모르는 채 빠져 있던 새 조사앞리얼미터 11/12~13 정당 지지도 조사가 빠진 채 「걸린 조사 0건」 — 수집이 무당층 소계를 겹쳐 더해 합계 108.7%로 버림뒤걸린 조사로 잡혀 원문 값(더불어민주당 34.6 · 국민의힘 43.0)으로 반영 · 기계 대조 「맞음」
- 11/15 10:21차기 대선주자 계산
짚은 곳감사(09:42 판정 「주의」) · 개선 에이전트의 제안고친 곳개발자 · 운영자 확인
조사마다 후보 명단이 달라 후보별 평균의 합이 141%였습니다. 그 합이 100%가 되게 모든 후보를 같은 비율로 낮추고 있어, 예측이 실제 조사보다 4%p쯤 낮았습니다. 합으로 나누지 않고, 조사가 적은 후보의 출발값을 바로잡았습니다.
차기 대선주자 7일 예측의 평균 오차(되짚어 본 771번)앞오세훈 12.9% · 95% 범위 적중 71%뒤오세훈 17.9% · 95% 범위 적중 99%
- 11/15 10:19감사의 기계 점검 허용폭
짚은 곳감사(09:42 제안)고친 곳개발자
감사 지시문은 「최근 조사 범위에서 5%p」인데 기계 점검은 두 주제만 6%p 였습니다. 5%p 로 통일하고, 편향 보정이 한도에 붙어 있으면 주의로 적게 했습니다.
앞지시문과 기계 점검의 기준이 다름뒤같은 기준 · 47가지 모두 통과
- 11/15 03:28예약 실행에서도 에이전트가 돌게
짚은 곳리허설(크론과 같은 환경으로 아침 발표 전체)고친 곳개발자
예약 실행은 사람이 서버에 들어가 부를 때와 다른 환경으로 스크립트를 부릅니다. 그 환경에서는 운영 · 개선 에이전트가 Claude 를 찾지 못했고, 실패를 알리는 글의 한글이 깨졌습니다.
앞걸린 조사가 사람이 볼 때까지 빠진 채로 남았을 것뒤걸린 조사를 풀고 다시 발표하기까지 2분 24초
- 11/15 03:21예측을 얼리는 때
짚은 곳개발자(새벽 작업 중 그날의 예측이 02:58 에 얼려짐)고친 곳개발자
그날의 예측은 정해진 발표에서만, 09시 뒤에만 얼립니다. 같은 발표 안에서 에이전트가 조사를 풀어 다시 발표하면 그 값으로 고쳐 적고 앞의 값을 남깁니다. 저녁 갱신과 손으로 돌린 빌드는 아침에 얼린 값을 바꾸지 못합니다.
앞아무 빌드나 그날의 예측을 얼릴 수 있었음뒤열 가지 경우를 시험해 통과
- 11/15 03:11얼린 예측을 채점하는 잣대
짚은 곳하루씩 되돌려 돌리기(멈춰 있던 19일)고친 곳개발자
실제 조사를 그대로 견주면, 맞힐 날에 전화면접 조사만 있을 때 「틀림」이 됐습니다. 페이지의 검증과 같이 기관 · 조사방식 효과를 걷어 낸 값으로 견주고, 걷어 내기 전 값도 함께 남깁니다.
얼린 대통령 예측의 평균 오차(되돌려 돌린 7건)앞대통령 평균 오차 2.37%p · 범위 적중 86%뒤0.92%p · 100%
앞의 4건 더 보기
- 11/15 02:45운영 에이전트의 결정 한 건을 뒤집음
짚은 곳개발자 검토(운영 에이전트의 결정 18건을 따로 대조)고친 곳개발자
리서치웰의 「2028년 총선에서 투표할 정당」 표를 정당 지지도로 넣은 결정이었습니다. 숫자는 원문과 같았지만 다른 질문이었습니다. 그 값을 도로 빼고, 리서치웰의 정당 지지도는 싣지 않는 규칙과 선례를 더했습니다.
앞총선 투표 의향 값이 정당 예측에 들어감뒤값을 빼고 기관 규칙 1개 · 명령이 같은 값을 다시 받지 않음
- 11/15 02:45카드와 그림의 숫자 · 결정 근거의 기준
짚은 곳감사(02:31 판정 「이상」)고친 곳개발자
같은 날의 정당 예측이 카드와 그림에서 다르게 보인다는 것, 운영 결정의 근거 기준이 모자라다는 것을 감사가 짚었습니다. 그림 끝의 숫자를 정리하고, 결정 종류마다 있어야 할 근거를 정했습니다.
앞감사 판정 「이상」뒤감사 판정 「주의」
- 11/15 02:31정당 값을 결과표 원문과 대조하는 문
짚은 곳운영(밀린 조사를 넣다가)고친 곳개발자
새 조사의 정당 값이 결과표의 정당 지지도 표와 다르거나 빠져 있으면, 발표 전에 그 조사의 정당 주제만 빼 둡니다. 개혁신당과 진보당만 맞바뀐 경우는 그 자리에서 원문 값으로 바로잡습니다.
원문과 다른 정당 값앞정당 값 13건이 원문과 다름(맞바뀜 9 · 빠짐 3 · 다른 문항 1) — 1건은 27분쯤 정당 예측에 들어가 있었음뒤새로 들어온 25건의 정당 값이 모두 원문과 일치
- 11/15 01:50걸린 조사만 빼 두고 나머지는 발표
짚은 곳갱신 기록(18일 동안의 보류)고친 곳개발자
조사 한 건이 걸리면 네 주제가 모두 멈추던 것을, 걸린 조사 · 걸린 주제만 따로 빼 두고 나머지는 그날 발표하게 바꿨습니다. 빼 둔 것은 운영 에이전트가 결과표 원문과 대조해 풉니다.
반영하지 못한 조사앞미반영 조사 25건 · 10월 28일부터 18일 멈춤뒤25건 모두 반영 · 날마다 발표
개선 에이전트가 더한 선례운영 에이전트가 다음 날부터 따릅니다
- 11/15운영 공통(swap) — swap 결정 기록에는 쪽 번호와 전체 행 값을 그 자체 기록에 직접 적는다(같은 조사의 앞선 confirm 기록에 의존하지 않음). (선례: 11/15 v5273 — 감사 3회 지적 뒤 11:03 보완)
- 11/15정당표 공통(전 기관) — 「개혁신당」·「진보당」 두 칸이 특히 자주 맞바뀐다(11/15 하루 9건: KIR·갤럽·리서치뷰·스트레이트뉴스·여심위·펜앤마이크·리서치웰). 전체 행을 넣기 전 반드시 지지정당 자기교차 n(사례수÷전체n)으로 그 두 칸만이라도 재확인. (선례: 11/15 다건)
- 11/15한길리서치 — 정당 지지도 전체 행에 '무당층' 칸이 따로 없고 「정당없다」·「잘모름」 두 칸으로 나뉜다 → 둘을 더해 무당층 계산. (선례: 10/26 · 11/10)
사람이 볼 제안코드와 모형은 에이전트가 고치지 않습니다
- ○열림정당표 파서의 개혁신당·진보당 기본 열 순서 점검위험 중간
같은 두 칸이 오늘 하루 서로 다른 9개 기관·출처 PDF에서 반복적으로 맞바뀌어 들어왔다. 매번 ops가 자기교차 n으로 사후에 잡아내고 있지만, 이 정도 빈도라면 표를 읽어오는 코드의 기본 열 순서 가정 자체가 두 정당의 실제 표기 순서와 어긋나 있을 가능성이 크다.
- ○열림차기 대선주자 '조사별 수집 엔진' 성적 지표를 모델 보정 지표와 분리 표시위험 낮음
감사가 같은 수치(n=8·cov=12.5%·mae=5.49)를 네 차례 반복 지적했다. 모델 자체 보정(q003)은 cov 99%까지 개선됐으나 조사별 수집 엔진의 백테스트 지표는 계산 기준이 달라 그대로이며, 둘을 구분 없이 보여주면 신뢰도를 오판하게 한다.
- ○열림q004(민주당 당대표) 보정 상한 고정 — 신규 조사 재개 시 재학습 트리거 필요위험 낮음
8/17 이후 신규 조사가 없어 보정값이 상한(±1.5)에 고정된 채 방치 중이다. 신규 조사가 재개되면 낡은 보정값이 그대로 적용돼 오차가 다시 커질 위험이 있다.
- ✓끝남'매핑/실행 에러' 9일 연속 실패 원인 조사위험 낮음
11/6~11/14 사이 18회 연속 자동 갱신이 반영되지 못해 그 기간 예측이 갱신되지 않았다. 11/15에 원인 없이 저절로 해결된 것인지, 누군가 손으로 고친 것인지 로그에 없어 같은 장애가 재발할 위험이 있다.
어떻게 끝났나원인은 구조였습니다 — 새 이름(한병도) 하나가 매핑에 없으면 갱신 전체가 멈췄습니다. 11월 15일 01:50 에 「걸린 조사 · 걸린 주제만 빼 두고 나머지는 발표」로 바꿨고, 3% 미만의 새 이름은 「그 밖」으로 받아 알림만 남깁니다. 갱신이 실패하면 발표판과 status.json 에 남고, 감사가 「이상」으로 알리고, 현황판의 「발표한 날」에 멈춘 날로 찍힙니다.
- ✓끝남다자구도(차기 대선주자·당대표) 보정 상한 재검토위험 중간
q003·q004 모두 범위 적중률이 90% 밑(71.3%·81.5%)이고 보정값이 상한 ±1.5에 다수 붙어 있어, 실제 편향이 상한보다 커서 보정이 따라가지 못하는 상태로 보인다. 수집엔진 기준 next_leader coverage는 12.5%(n=8)까지 떨어진다.
어떻게 끝났나보정 상한을 푸는 대신 원인을 찾아 고쳤습니다 — 후보별 평균의 합(141%)으로 나누던 계산을 없앴습니다. 차기 대선주자의 평균 오차 2.85 → 1.29%p · 범위 적중 71 → 99% · 편향 보정은 한도에서 떨어졌습니다(「고친 것의 기록」 11/15 10:21). 당대표 주제는 8월 17일로 끝난 기록이라 그대로 둡니다.
결과그래서 발표와 예측이 어떻게 됐는지
발표한 날지난 42일 — 하루 한 칸
새 조사를 반영해 발표새 조사 없음멈춤(보류 · 실패)기록 없음
10월 28일부터 11월 14일까지 18일 동안 새 조사가 들어와도 반영하지 못했습니다. 지금은 2일째 멈춤 없이 발표하고 있습니다.
예측 성적의 흐름고친 것이 숫자를 바꿨는지
7일 뒤 예측의 평균 오차(%p) — 낮을수록 잘 맞힌 것발표가 멈춰 있던 때계산을 고친 날(고치기 전 값에서 뒤의 값으로)
날마다 그날까지의 자료로만 7일 뒤를 예측해 실제 조사와 견준 값입니다(되짚어 계산). 갱신 때마다의 성적표를 그대로 이은 것입니다.
울타리누가 무엇을 바꿀 수 있는지
| 누가 | 바꿀 수 있는 것 | 한도와 검사 | 오늘 |
|---|---|---|---|
| 정해진 순서(서버) | 정본 표와 화면 | 대조 · 품질 검사 · 배포 해시가 하나라도 틀리면 배포하지 않고 표를 되돌린다 | 오늘 3번 실행 |
| 운영 에이전트 | 보정 파일만 — 명령 하나로 | 하루 4번 · 바꿈 12건까지 · 근거 없는 값은 거부 | 오늘 1번 · 1건 |
| 감사 에이전트 | 없음 — 읽기만 | 공개 화면과 공개 기록만 본다 | 오늘 2번 판정 |
| 개선 에이전트 | 선례 문서 · 기관 규칙 | 같은 기관 · 같은 까닭이 두 번 넘을 때만 규칙 · 코드는 제안으로 | 선례 3줄 · 열린 제안 3건 |
| 사람 | 코드 · 모형 · 에이전트의 결정 뒤집기 | 고친 것은 「고친 것의 기록」에 앞뒤 값과 함께 남긴다 | 오늘 커밋 3건 |
에이전트가 쓰는 돈은 이 화면에 싣지 않습니다. 감사는 공개 화면과 공개 기록만 보고 판정하며, 결과표 원문까지 다시 대조하지는 않습니다.
모델은 틀릴 수 있습니다. 그래서 값을 넣는 길을 하나로 좁히고, 넣은 값을 기계가 다시 대조하고, 다른 회사의 모델이 밖에서 봅니다. 사람이 뒤집은 결정도 지우지 않고 남깁니다.