Descargas de datos
Los valores de SI-IQ, las posiciones y los parámetros que calculamos pueden reutilizarse libremente bajo la licencia CC BY 4.0; se debe citar «IQ of SI (iqofsi.com)». Las puntuaciones de entrada siguen sujetas a las licencias propias de sus fuentes (CC BY 4.0, Apache-2.0 o MIT): cada registro de scores.json indica su fuente y su licencia, y /data/LICENSES.md enumera las atribuciones, los cambios realizados y los textos de las licencias. Deben conservarse al redistribuir los datos.
| Archivo | Contenido |
|---|---|
| /data/models.json · CSV | Todos los modelos: SI-IQ, intervalo del 90 %, posición, puntuaciones por área, desarrollador, fecha de lanzamiento, apertura y precio. |
| /data/scores.json · CSV | Todas las puntuaciones de entrada con evaluador, archivo de origen, enlace de verificación y hora de obtención. |
| /data/index.json | Todo lo necesario para recalcular SI-IQ: parámetros, grupo de referencia, entradas y valores intermedios. |
| /data/evidence.jsonl | Cada fila de entrada tal como la publicó su fuente, con la dirección del archivo de origen y su SHA-256. |
| /data/history.json | Las entradas diarias que sustentan las curvas del historial, de modo que cada punto pueda recalcularse con los parámetros actuales. |
| /data/LICENSES.md | Licencias, atribuciones requeridas y cambios que realizamos, por fuente. |
| /data/compare.json | Datos compactos que utiliza la herramienta de comparación. |
| /status.json | Cuándo se comprobaron y cambiaron los datos por última vez, y qué fuentes funcionan. |
Recalcular SI-IQ por cuenta propia
/data/index.json contiene la versión del método, todos los parámetros de cada benchmark (α, β, σ², ω, familia, nivel de azar, techo, número de preguntas), las constantes λ y κ, la transformación afín (desplazamiento, escala), el grupo de referencia y, para cada modelo, cada puntuación de entrada con la URL de su fuente, el SHA-256 del archivo fuente, la hora de obtención y la fecha de evaluación, además de los valores intermedios p, p*, y, v, el factor de familia f y el peso w. /data/evidence.jsonl contiene una línea por cada entrada, con la fila de origen tal como se publicó. Las fórmulas figuran en el propio archivo y en la página de metodología. Recalcular el SI-IQ de cualquier modelo a partir de ese archivo reproduce el valor publicado.
Fuentes
- Aider polyglot leaderboard data (Apache-2.0) — https://aider.chat/docs/leaderboards/
- Arena leaderboard dataset on Hugging Face (CC BY 4.0) — https://huggingface.co/datasets/lmarena-ai/leaderboard-dataset
- Berkeley Function Calling Leaderboard, Gorilla project (Apache-2.0) — https://gorilla.cs.berkeley.edu/leaderboard.html
- Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0) — https://epoch.ai/benchmarks
- API list prices via LiteLLM's price table (MIT); each price links to the developer's pricing page — https://github.com/BerriAI/litellm/blob/main/model_prices_and_context_window.json
- Source: OpenRouter (openrouter.ai), licensed under CC BY 4.0: reuse and republish with attribution to OpenRouter. — https://openrouter.ai/api/v1/datasets/exports/README.md
Los archivos de datos se actualizan cada hora. /status.json indica cuándo se comprobaron los datos por última vez, cuándo cambiaron por última vez y si alguna fuente falló.