데이터 다운로드
저희가 계산한 SI-IQ 값, 순위, 매개변수는 CC BY 4.0 라이선스에 따라 자유롭게 재사용할 수 있으며, 출처는 “IQ of SI (iqofsi.com)”로 표기해 주십시오. 입력 점수는 각 출처의 고유 라이선스(CC BY 4.0, Apache-2.0 또는 MIT)를 그대로 따릅니다. scores.json의 모든 레코드에는 출처와 라이선스가 명시되어 있으며, /data/LICENSES.md에는 저작자 표시, 저희가 적용한 변경 사항, 라이선스 전문이 정리되어 있습니다. 데이터를 재배포할 때는 이 내용을 함께 유지해 주십시오.
| 파일 | 내용 |
|---|---|
| /data/models.json · CSV | 전체 모델: SI-IQ, 90% 구간, 순위, 영역별 점수, 개발사, 출시일, 공개 여부, 가격. |
| /data/scores.json · CSV | 평가 기관, 출처 파일, 검증 링크, 수집 시각이 포함된 모든 입력 점수. |
| /data/index.json | SI-IQ를 다시 계산하는 데 필요한 모든 자료: 매개변수, 기준 그룹, 입력값, 중간값. |
| /data/evidence.jsonl | 출처가 게시한 그대로의 모든 입력 행과, 출처 파일의 주소 및 SHA-256을 제공합니다. |
| /data/history.json | 이력 곡선의 바탕이 되는 일별 입력값으로, 모든 지점을 현재 매개변수로 다시 계산할 수 있습니다. |
| /data/LICENSES.md | 출처별 라이선스, 필수 저작자 표시 및 저희가 가한 변경 사항입니다. |
| /data/compare.json | 비교 도구에서 사용하는 경량 데이터. |
| /status.json | 데이터를 마지막으로 확인하고 변경한 시점, 그리고 정상 작동 중인 출처. |
SI-IQ 직접 다시 계산하기
/data/index.json에는 방법론 버전, 모든 벤치마크 매개변수(α, β, σ², ω, 계열, 우연 수준, 상한, 문항 수), 상수 λ와 κ, 아핀 변환(이동, 배율), 기준 그룹이 들어 있습니다. 또한 모든 모델에 대해 각 입력 점수와 함께 출처 URL, 출처 파일 SHA-256, 조회 시각, 평가 날짜, 중간값 p, p*, y, v, 계열 계수 f, 가중치 w가 포함되어 있습니다. /data/evidence.jsonl에는 입력마다 게시된 출처 행이 한 줄씩 담겨 있습니다. 공식은 파일 안에 있으며 방법론 페이지에서도 확인할 수 있습니다. 이 파일로 임의 모델의 SI-IQ를 다시 계산하면 공개된 값이 그대로 재현됩니다.
출처
- Aider polyglot leaderboard data (Apache-2.0) — https://aider.chat/docs/leaderboards/
- Arena leaderboard dataset on Hugging Face (CC BY 4.0) — https://huggingface.co/datasets/lmarena-ai/leaderboard-dataset
- Berkeley Function Calling Leaderboard, Gorilla project (Apache-2.0) — https://gorilla.cs.berkeley.edu/leaderboard.html
- Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0) — https://epoch.ai/benchmarks
- API list prices via LiteLLM's price table (MIT); each price links to the developer's pricing page — https://github.com/BerriAI/litellm/blob/main/model_prices_and_context_window.json
- Source: OpenRouter (openrouter.ai), licensed under CC BY 4.0: reuse and republish with attribution to OpenRouter. — https://openrouter.ai/api/v1/datasets/exports/README.md
데이터 파일은 매시간 갱신됩니다. /status.json에서 데이터를 마지막으로 확인한 시점과 마지막으로 변경된 시점, 그리고 실패한 출처가 있는지 확인할 수 있습니다.