자동화된 페이지입니다. AI가 자동으로 작성하고 번역했으며 소프트웨어가 출처와 대조해 검증했습니다. 사람 편집자는 없습니다. SI-IQ는 공개 벤치마크 결과로 만든 지수이며 IQ 검사가 아닙니다. 작동 방식

Hermes 2 Theta Llama-3 70B, 얼마나 똑똑할까요?

Nous Research, Arcee AI에서 2024년 6월 20일에 출시한 모델 Hermes 2 Theta Llama-3 70B의 SI-IQ는 55입니다(90% 구간 50–61). 평가 기관 1곳의 벤치마크 결과 3개로 추정했습니다.

2026년 10월 18일 기준 데이터 · 방법론 1.0.0

모델의 결과가 3개 이상 영역에 걸친 5개 이상의 벤치마크(GPQA Diamond 두 번의 실행은 하나로 계산)에서 나오고, 서로 다른 평가 기관 2곳 이상에서 나왔으며, 각 버전의 출시 간격이 60일 이내이면 순위가 매겨집니다. 이 모델은 아직 이 조건을 충족하지 못합니다(결과가 있는 벤치마크가 5개 미만; 결과가 있는 영역이 3개 미만; 결과를 낸 평가 기관이 2곳 미만). 잠정 추정치는 벤치마크 결과 3개에 기반하므로 결과가 추가되면 크게 바뀔 수 있습니다.

사용한 모든 벤치마크 결과

각 점수는 출처가 게시한 값 그대로의 단일 값입니다. Epoch AI는 실행 설정 중 최고값, OpenRouter는 호스팅 제공업체의 중앙값(개발사가 직접 호스팅하여 테스트한 경우에는 해당 호스팅)입니다. “추정 SI-IQ”는 이 단일 결과가 가리키는 능력치이며, 전체 SI-IQ는 이들의 정밀도 가중 평균입니다.

SI-IQ 방법론 버전 1.0.0(으)로 계산했습니다. 전체 방법론 읽기

데이터 출처: Epoch AI, ‘Capabilities & benchmarking’ (CC BY 4.0) (라이선스 및 변경 사항).