스코어카드: 논문의 사전 등록 예측
논문의 사전 등록 예측과 이번 빌드에서 각 예측의 상황: 사전 등록, 판정 프로그램과 규칙, 분석 버전, 각 예측의 기간·확인일·논문 표현대로의 상태.
2026-10-22 등록: OSF ↗ · doi:10.17605/OSF.IO/9Q86N
판정: resolve.py, 규칙 osf-rules-1, 2026-10-22 읽음: resolve.py · SHA256SUMS
분석 버전: methodology-versions.json · claim-status.json
| # | 예측 | 세트 | p | 구간 시작 | 확인일 | 상태 |
|---|---|---|---|---|---|---|
| F1 | 평의회는 하루 예측에서 독립된 목소리 둘에 못 미친다 The council stays below two independent voices at one day | A | 0.50 | 2026-11-02 | 2026-11-30 | 기한 전 |
| F2 | 시장의 동반 움직임으로는 유사성이 설명되지 않는다 Market co-movement does not explain the likeness | A | 0.50 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F3 | 오류도 공유된다 Errors are shared too a field to be published: N_eff of the error indicators, computed by the filed resolver | B | 0.74 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F4 | 모델은 군중보다 예측의 날카로움이 떨어진다 Models are less sharp than the crowd | B | 0.40 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F5 | 같은 링크는 같은 예측을 뜻한다 Shared links mean shared calls | A | 0.56 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F6 | 모두 함께 틀린다 All wrong together | B | 0.92 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F7 | 옳은 소수는 만장일치 오류보다 흔하다 A right minority is more common than a unanimous error | A | 0.63 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F8 | 표는 일정대로 채워진다 The table fills on schedule | A | 0.88 | 2026-10-19 | 2026-11-30 | 기한 전 |
| F9 | 독립성은 하루보다 한 달에서 더 크다 Independence is greater at the month than at the day | B | 0.30 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F10 | 평균이 선두를 따르는 것보다 낫다 Averaging beats following the leader | B | 0.64 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F11 | 어떤 단일 모델도 감지 가능한 일일 우위를 보이지 않는다 No single model shows a detected daily advantage | B | 0.79 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F12 | 군중이 평의회를 이긴다 The crowd beats the council | B | 0.83 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F13 | 결합이 군중을 이긴다 The combination beats the crowd | B | 0.30 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F14 | 모델은 과신한다 Models are overconfident | B | 0.80 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F15 | 평의회는 단순한 규칙을 뚜렷한 차이로 이기지 못한다 The council does not beat a simple rule by a clear margin | B | 0.80 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F16 | 어떤 기간도 한 시즌 동안 감지 가능한 신호를 갖지 않는다 No horizon carries a detected signal over a season | B | 0.63 | 2026-11-02 | 2027-04-30 | 기한 전 |
| F17 | 기후값 대비 하루가 가장 어려운 기간이다 Relative to climatology, the day is the hardest horizon | B | 0.37 | 2026-11-02 | 2027-04-30 | 기한 전 |
| F18 | 국가는 작은 요인이다 Country is a small factor | B | 0.80 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F19 | 한 시즌 동안 미국 측 점수가 더 좋다 The US side scores better over a season | B | 0.57 | 2026-11-02 | 2027-04-30 | 기한 전 |
| F20 | 같은 뉴스는 이견을 줄인다 The same news means less dispute | A | 0.70 | 2026-11-02 | 2026-11-30 | 기한 전 |
| F21 | 검색은 정확도를 거의 높이지 않는다 Search adds little accuracy unresolved on the files of 21 October 2026: every Closed Book call was asked after the open and has no outcome from its own reference; it resolves once closed calls sealed before the common reference, or each closed call's own reference price, close and outcome, are published | B | 0.72 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F22 | 토론은 실제 위험을 찾아낸다 Discussion finds real risks | A | 0.30 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F23 | 비판을 받아들이면 보상이 있다 Heeding the critique pays | A | 0.42 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F24 | 모델은 자기 자신과 자주 엇갈린다 A model disagrees with itself a lot | A | 0.60 | 2026-11-01 | 2026-11-30 | 기한 전 |
| F25 | 선두는 오래가지 않는다 Leaders do not last | B | 0.62 | 2026-11-02 | 2027-04-30 | 기한 전 |
| F26 | 지수를 이기기는 어렵다 The index is hard to beat | B | 0.60 | 2026-11-02 | 2027-04-30 | 기한 전 |
| F27 | 좋은 예측가가 최고의 트레이더는 아니다 Good forecasters are not the best traders | B | 0.83 | 2026-11-02 | 2027-04-30 | 기한 전 |
| F28 | 첫 예측 전에 모델을 보아도 독자의 Brier 점수는 0.01 이상 개선되지 않는다 Access to the models before the first forecast does not improve readers' Brier score by 0.01 or more | A | 0.46 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F29 | 모델을 보면 독자가 평의회 쪽으로 움직인다 Access moves readers toward the council unresolved on the files of 21 October 2026: the readers' first forecasts of the experiment are not published as rows (a field to be published and documented in arena-dataset.json) | B | 0.41 | 2026-11-02 | 2026-12-31 | 기한 전 |
| F30 | 문체가 모델을 드러낸다 Style gives the model away needs the addendum to the registration naming the fixed guesser (filed before 2 November 2026) and the answer lines of the blind season with the post-season reveal | B | 0.46 | 2026-11-02 | 2027-04-30 | 기한 전 |
이 데이터 인용하기
데이터는 CC BY 4.0으로 공개됩니다. 데이터 릴리스를 인용해 주세요. 사전 등록과 논문도 함께 적었습니다.
- 데이터 릴리스: AI Council · Markets: open league files as of 22 October 2026 (immutable release for "Sealed Before the Open") · Chernets, Vadym (ORCID) · doi:10.5281/zenodo.23552700
- 예측 사전 등록: Sealed Before the Open: registered primary endpoint and 30 dated predictions on AI forecasts of financial markets, 2026 to 2027 · OSF · doi:10.17605/OSF.IO/9Q86N
- 논문: Sealed Before the Open: A Verifiable Standard for Measuring AI Forecasts of Financial Markets · paper-revisions.json
CITATION.cff
출처 표기:
Chernets, Vadym (2026). AI Council · Markets: open league files as of 22 October 2026 (immutable release for "Sealed Before the Open") [Data set]. Zenodo. https://doi.org/10.5281/zenodo.23552700 · CC BY 4.0
BibTeX
@dataset{chernets_2026_23552700,
author = {Chernets, Vadym},
title = {AI Council · Markets: open league files as of 22 October 2026 (immutable release for "Sealed Before the Open")},
year = {2026},
publisher = {Zenodo},
doi = {10.5281/zenodo.23552700},
url = {https://doi.org/10.5281/zenodo.23552700},
note = {CC BY 4.0}
}
@misc{chernets_2026_osf_9q86n,
author = {Chernets, Vadym},
title = {Sealed Before the Open: registered primary endpoint and 30 dated predictions on AI forecasts of financial markets, 2026 to 2027},
year = {2026},
publisher = {OSF Registries},
doi = {10.17605/OSF.IO/9Q86N},
url = {https://osf.io/9q86n/}
}