Step 5 Preview vs Fugu Ultra v2: 둘 중 하나는 모델이고, 다른 하나는 라우터입니다

대부분의 사람들이 Step 5 Preview와(과) Sakana AI의 Fugu Ultra v2 사이에서 원하는 비교는 벤치마크 표입니다. 어느 쪽도 그것을 정직하게 내놓을 수 없습니다. Step 5 Preview에는 지난주에 교체된 평가 기준에 따라 측정된 독립적 측정치가 하나 있습니다. Fugu Ultra v2에는 독립적 측정치가 전혀 없습니다. 지능 지수를 발표하는 평가 기관들이 이 모델을 위한 페이지를 한 번도 올린 적이 없기 때문입니다. 두 모델이 실제로 가진 것은 입력 토큰 기준 정확히 5대 1의 가격 비율과, 그 비율을 거의 무의미하게 만드는 질적으로 다른 차이입니다. 하나는 자체 하드웨어에 다운로드해 실행할 수 있는 6,000억 파라미터 규모의 전문가 혼합(MoE) 체크포인트이고, 다른 하나는 요청을 다른 사람들의 모델 풀에 분배해 응답하는 오케스트레이션 계층입니다.

그 차이는 세부 사항이 아닙니다. 그것은 당신이 실제로 무엇을 구매하는지, 공급업체가 마음을 바꿀 때 당신의 결과에 무슨 일이 일어나는지, 그리고 이 둘 중 하나를 기반으로 구축된 장기 지평 에이전트를 다음 분기에도 동일한 출력을 위해 다시 실행할 수 있는지를 결정합니다.

동일한 마케팅 라벨이 붙은 두 제품

StepFun은 2026년 9월 20일 자사 API에 Step 5 Preview를 출시한 뒤, 10월 15일 Hugging Face와 ModelScope에 BF16 및 FP8 가중치를 공개했습니다. 이는 단일 모델로, 총 6,000억 개의 매개변수와 토큰당 270억 개의 활성 매개변수를 가진 희소 전문가 혼합 모델이며, 352개 중 8개를 라우팅하는 방식에 공유 전문가 하나를 더하고, 공급업체가 "narrow-deep"이라고 설명하는 92개 계층 스택으로 구성됩니다. 컨텍스트 창은 100만 토큰이고, 입력은 텍스트, 이미지 또는 비디오일 수 있으며, 출력은 텍스트입니다.

Fugu Ultra v2는 새로운 아키텍처가 아니라 포인트 릴리스입니다. Sakana AI는 2026년 9월 11일에 6월 22일의 Fugu Ultra를 갱신한 모델로 출시했으며, 모델 ID는 fugu-ultra-v2.0이고 이전 버전에서 한 줄 파라미터 마이그레이션만 필요합니다. 이 모델은 지휘자입니다. 요청이 들어오면 시스템이 자체 풀에서 어떤 모델 또는 모델들이 이를 처리할지 결정하고, 실행한 뒤 답을 합성합니다. 이 풀에서는 Claude Fable 5, Claude Fable 5.1, GPT-6 Astra가 의도적으로 제외됩니다. Sakana가 더 작은 풀을 옹호하는 이유는 약한 멤버들이 전체 성능을 끌어내리고 있었기 때문입니다. Sakana가 공개적으로 알리지 않는 이차 효과는 구매하는 제품의 구성이 버전 번호 없이도 바뀔 수 있는 벤더의 결정이라는 점입니다.

스펙 라인, 양쪽

• 무엇인가 — Step 5 Preview: 다운로드 가능한 단일 600B/27B 전문가 혼합(mixture-of-experts) 모델. Fugu Ultra v2: 상단에 합성 레이어를 갖춘 오케스트레이션된 모델 풀.

• 출시 일정 — Step 5 Preview: API는 2026년 9월 20일, 가중치는 2026년 10월 15일. Fugu Ultra v2: 2026년 9월 11일, 2026년 6월 원본의 리프레시 버전.

• 컨텍스트 윈도 — Step 5 Preview: 1M 토큰. Fugu Ultra v2: 1M 토큰이며, 272k 토큰 초과 시 가격 단계가 적용됩니다.

• 입력 모달리티 — Step 5 Preview: 텍스트, 이미지, 영상. Fugu Ultra v2: 자사의 풀 멤버들이 허용하는 것이라면 무엇이든 가능하며, Sakana는 이를 모달리티별로 열거하지 않습니다.

• 백만 토큰당 입력 가격 — Step 5 Preview: $1.00. Fugu Ultra v2: $5.00, 컨텍스트 272k 토큰 초과 시 $10.00로 인상.

• 백만 토큰당 출력 가격 — Step 5 Preview: $2.70. Fugu Ultra v2: $30.00, 272k 토큰 초과 시 $45.00로 인상.

• 100만 토큰당 캐시 입력 — Step 5 Preview: $1.00에서 90% 할인. Fugu Ultra v2: $0.50, 272k 토큰 초과 시 $1.00로 상승.

• 독립 점수 — Step 5 Preview: Artificial Analysis Intelligence Index v5.0에서 29점. Fugu Ultra v2: Artificial Analysis 페이지가 존재하지 않아 점수가 없습니다.

• 가중치 — Step 5 Preview: StepFun Model License 1.0에 따라 다운로드 가능. Fugu Ultra v2: 없음. 여기서 활용하는 풀은 다른 공급업체의 약관에 따라 제공되는 다른 공급업체의 가중치입니다.

5달러어치 입력으로 실제로 무엇을 얻을 수 있는가

대표 비율은 입력에서 5대1, 출력에서 11대1을 조금 웃돌며, 두 수치 모두 작업당 청구서가 확인해 주지 못할 수 있는 방식으로 Step 5 Preview를 실제보다 좋아 보이게 한다. Fugu Ultra v2는 토큰을 쓰는 것을 전제로 한 시스템처럼 가격이 책정된다. 요청을 보내면 여러 모델이 응답하고, 합성기가 그 결과 위에 글을 쓴다. 더 많은 에이전트를 추가한다고 청구서가 배로 늘지는 않는다는 Sakana의 자체 주장은 구독 등급, 즉 월 $20 Standard, $100 Pro, $200 Max — 모두 Fugu, Fugu Ultra, Fugu Max를 포함 — 에 관한 것이지 종량제 요금표에 관한 것이 아니다. 종량제 요금표에서는 오케스트레이션이 장황한 일이고, 출력은 100만 개당 $30로 청구된다.

Step 5 Preview의 경제성은 반대 방향으로 작동한다. Artificial Analysis는 StepFun의 API에서 초당 출력 토큰 179.1개를 측정했으며, 이는 동급 중앙값 74.1개, 전체 인덱스 작업당 $2.35, 7:2:1 캐시 적중률에서 백만 토큰당 혼합 $0.54에 해당한다. 같은 페이지에서 작업당 동급 중앙값 $1.40과 비교하면, 이는 빠르면서도 저렴한 모델이다.

그러므로 정직한 표현은 “Fugu가 다섯 배 비싸다”가 아니다. 정직한 표현은 Fugu가 Step 5 Preview가 주장하지 않는 기능, 즉 요청마다 여러 모델 사이를 중재하는 기능에 대해 프리미엄을 부과한다는 점, 그리고 그 프리미엄을 지불할 가치가 있는지는 전적으로 그 중재가 당신이 맡은 작업을 수행하는 데 하나의 강력한 모델보다 낫다고 믿는지에 달려 있다는 점이다. 그 믿음에 대한 Sakana의 공개 증거는 공급업체가 직접 실행한 것이다: Chartography 48.3 대 Claude Opus 5의 27.3 및 Claude Fable 5의 29.5, DeepSWE 74.3, 8개 벤치마크 중 5개에서 최고 또는 공동 최고, 8개 중 7개에서 상위 2위. 이는 제품을 판매하는 회사가 산출한 실제 수치이며, 그것이 존재하는 유일한 수치다.

진짜 차이인 휴대성 테스트

여기에 어떤 점수보다도 두 가지를 더 명확하게 구분해 주는 질문이 있습니다. 2026년 9월에 Fugu Ultra v2 위에 에이전트를 구축했고, 그것이 작동한다고 가정해 봅시다. 11월에 Sakana가 풀에 모델을 하나 추가하거나 하나를 제거합니다 — 이미 한 번 세 개의 프런티어 모델을 제거한 적이 있습니다 — 또는 합성기를 재가중합니다. 프롬프트는 동일하고, 입력은 동일한데, 출력은 다릅니다. 고정할 수 있는 버전 상향도 없고, 어떤 동작이 바뀌었는지 알려 주는 변경 로그 항목도 없습니다. 당신은 모델을 사는 것이 아니라, 모델들에 대한 정책을 사는 것이며, 그 정책은 공급업체가 돌리는 다이얼입니다.

그것은 Sakana에 대한 비판이 아닙니다. 그것은 제품의 본질이며, 많은 워크로드에서 바로 원하는 것일 수 있습니다 — 요청마다 알맞은 모델을 고르는 일이 전업인 벤더는 종종 직접 구축한 선택보다 나을 때가 많습니다. 하지만 그것은 자산이 아니라 지속적인 서비스 관계라는 본질에 맞게 가격이 책정되어야 합니다.

Step 5 Preview는 또 다른 형태입니다. 가중치는 존재합니다. OSI가 말하는 의미의 오픈은 아닙니다 — StepFun Model License 1.0은 실질적으로 사용된 출력에 출처 표시 조건을 유지하고, 하드웨어 제조사가 별도 라이선스를 협상하도록 요구하며, 연 매출 2,000만 달러를 초과하는 모델 서비스(MaaS) 운영자에게는 상업용 라이선스를 요구합니다 — 하지만 오늘 테스트하는 동작은 1년 뒤에도 통제 중인 하드웨어에서 허가를 구하지 않고 실행할 수 있는 동작입니다. FP8 체크포인트는 약 773 GB의 VRAM과 최소 4개의 GPU가 필요하며, 기본 타깃은 B300입니다. Hopper 경로에는 H200 8개가 필요합니다. NVFP4 변형은 이를 약 473 GB로 줄이고 사용 가능한 컨텍스트를 320k 토큰으로 제한합니다. 어느 경로도 저렴하지 않으며, 모델을 직접 호스팅하기보다 호출하는 쪽을 선호하는 통상적 근거인 API만큼 저렴하지도 않습니다.

공개 격차는 양방향으로 작용한다

양측은 각각 상대가 공개하는 무언가를 놓치고 있습니다.

Step 5 Preview는 가중치가 공개된 날 가격표, 컨텍스트 한도, 파라미터 수, 라이선스, vLLM 및 SGLang용 서빙 레시피, 그리고 하나의 독립 점수를 공개한다. 공개하지 않는 것은 어떤 경쟁사와도 하네스를 맞춘 정면 대결이며, 벤더 벤치마크 표 — Terminal-Bench 4.0 33.3, DeepSWE v1.1 67.7, FrontierFinance 66.4, CyberGym 84.7 — 는 바로 그렇다, 벤더 표일 뿐이다.

Fugu Ultra v2는 아키텍처 설명, 풀 정책, 자체 벤치마크 표, 그리고 이 시장에서 진정으로 이례적인 구독 가격을 공개한다. 하지만 공개하지 않는 것은 독립 평가자가 검증한 단 하나의 숫자이며, 평가자들은 그 숫자를 위한 페이지를 만들지 않았다. 이는 점수가 낮다는 것이 아니라 점수가 존재하지 않는다고 말하는 가장 깔끔한 방식이다.

양측 모두 벤더가 보고한 수치일 때, 판가름의 기준은 "어느 벤더가 더 신뢰할 만한가"가 아니다. 어느 벤더가 검증 가능한 것을 걸었는가이다. StepFun이 10월 15일에 가중치를 걸었다는 것은 검증 가능한 주장이다. 누구나 체크포인트를 내려받아 그 동작을 재현할 수 있다. Sakana가 다운로드 가능한 산출물 없이 점수를 건 것은 검증 가능한 주장이 아니다.

둘 중 어느 하나라도 오늘 콜 가능한 경우

어느 쪽도 OrcaRouter에 없습니다. 실시간 카탈로그에는 16개 제공업체에 걸쳐 214개 모델 ID가 있으며 이는 하나의 키와 하나의 청구서로 이용할 수 있습니다. 그리고 2026년 10월 29일 기준으로 여기에는 StepFun 항목도 Sakana 항목도 없습니다 — "step" 문자열도 "fugu" 문자열도 없습니다. Fugu Ultra v2를 원하시면 Sakana로 가시고, Step 5 Preview를 원하시면 StepFun의 API나 체크포인트로 가십시오. 이 글의 어떤 내용도 우리가 둘 중 어느 쪽을 제공한다는 주장으로 읽혀서는 안 됩니다.

이 비교에서 플랫폼이 존재하는 이유는 그다음 단계에 있습니다. 이 두 가지 형태 중 어느 것이 워크로드에 맞는지 결정한 뒤, 요청마다 실제로 라우팅하는 모델 — 분류에는 저렴한 모델, 합성에는 비싼 모델 — 은 수작업으로는 규모를 키우기 어려운 부분입니다. OrcaRouter의 라우팅 설정에서는 이를 하드코딩된 모델 ID 대신 프라이머리 및 폴백 체인으로 선언할 수 있으며, 공급자 성능이 저하되면 자동 장애 조치가 이루어집니다. 또한 공급자 정가로 청구하고 마크업이 없어서, 공급업체의 가격 인하가 발표되는 당일 플랫폼에 적용됩니다. 이는 우리가 실제로 제공하는 모델의 속성이지, 이 두 가지의 속성은 아닙니다.

그것을 결정짓는 질문

“어느 쪽이 더 높은 점수를 받는가”가 아니다. 둘 중 하나만 점수가 매겨졌고, 그 점수는 10월 27일에 등장해 복합 지표가 무엇을 측정하는지를 다시 써버린 평가 기준 아래에서 29점이기 때문이다. 대신 질문은 이것이다. 당신의 워크로드가 비전 입력을 갖춘 단일 1M 컨텍스트 모델이 100만 토큰당 $1.00과 $2.70의 비용으로 충분히 좋은 종류인가 — 그리고 그렇다면 Step 5 Preview가 훨씬 더 저렴하고 이식성이 높은 선택지다. 요청별 라우팅이 어려운 부분인 워크로드라면 Fugu Ultra v2는 당신이 직접 해야 했을 노동을 대신 해주는 것이며, 5대 1 비율은 같은 상품에 붙는 마크업이 아니라 그 노동에 대한 가격이다.

당신이 해서는 안 되는 일은 Chartography 48.3을 StepFun이 공개한 어떤 것과도 비교하는 것입니다. 이 둘은 서로 다른 두 공급업체의 수치이며, 서로 다른 두 공급업체의 하네스에서, 서로 다른 두 종류의 제품을 대상으로 한 것입니다. 누구도 이 둘을 서로 겨뤄 본 적이 없고, 누군가 그렇게 하기 전까지 이 둘 사이의 정직한 비교는 오직 이 둘이 무엇인지에 관한 비교뿐입니다.