Arena 순위는 왜 우리 순위와 다를까?

순위 읽는 법

각 모델 옆에 붙은 "Arena N위"가 우리 순위와 다르게 보이는 이유를 설명합니다.

한 줄 요약

우리는 실제로 쓸 수 있는 제품만 골라 순위를 매깁니다. 그래서 전체 벤치마크(Arena) 순위와는 번호가 다를 수 있습니다. "Arena N위"는 걸러진 모델까지 포함한 전체 순위를 숨김없이 보여주는 장치입니다.

우리 순위는 두 가지 정보를 합쳐 만듭니다. 하나는 Arena의 성능 점수(누가 더 똑똑한가), 다른 하나는 그 모델을 실제로 어느 앱에서 쓸 수 있는가(무료인지 유료인지)입니다.

문제는 Arena의 명단에는 일반 사용자가 직접 쓸 수 없는 모델도 잔뜩 들어 있다는 점입니다. 연구용으로만 공개됐거나, 이미 서비스에서 내려간 구버전이거나, 개발자 전용(API)이라 앱에서는 못 만나는 모델들이죠.

우리는 "지금 앱을 열어서 실제로 쓸 수 있는" 모델만 남깁니다. 일반 사용자가 만날 수 없는 모델을 순위에 넣으면 "이거 어디서 쓰나요?"라는 혼란만 생기니까요.

예를 들면

Arena 전체 1~3위가 연구용·구버전 모델이라 앱에서 못 쓴다면, 우리는 그 셋을 빼고 실제로 쓸 수 있는 다음 모델을 1위로 올립니다. 그래서 "우리 1위 = Arena 전체 4위"가 되는 겁니다.

아래는 예시입니다. 회색으로 지워진 줄이 "앱에서 못 쓰는 모델"이라 제외된 경우예요. 남은 것 중 맨 위가 우리 1위가 됩니다.

우리전체모델

—Arena 1위연구용 프리뷰 모델 앱 불가

—Arena 2위이미 내려간 구버전 앱 불가

1위Arena 3위실제 유료 모델 유료

2위Arena 5위실제 무료 모델 무료

모델을 걸러내는 건 편의를 위한 선택이지만, 그 때문에 순위가 실제보다 부풀어 보이면 안 됩니다. 그래서 우리는 각 모델 옆에 전체 기준의 진짜 순위("Arena N위")를 숨기지 않고 함께 표시합니다.

이렇게 하면 "우리 목록에서는 1위지만, 세상 전체로는 몇 위"인지 한눈에 알 수 있습니다. 우리가 무엇을 걸렀는지 투명하게 보여드리기 위한 장치예요.

Arena 순위는 왜우리 순위와 다를까?