코그니션 SWE-2, FrontierCode 50.0%에 비용 64% 절감 — 데빈 실사용자는 차분했다
코그니션 SWE-2 공개 발표의 수치와 데빈 실사용자들의 차분한 반응이 같은 자리에서 엇갈렸다.
발표가 내세운 숫자
저녁 대화에 코그니션의 SWE-2 발표가 그대로 옮겨 왔다. 기반 모델을 바꿔 사후 훈련을 돌렸고, 점수와 비용을 함께 내세운 내용이었다.
"SWE-2는 Kimi-K3에서 사후 훈련되었으며, 우리의 RL 레시피가 더 강력한 기본 모델에서 계속해서 확장된다는 것을 증명합니다. FrontierCode에서 SWE-2는 50.0%의 점수를 달성합니다. SWE-1.7, Grok 4.6, GPT 5.6 Sol을 능가하면서 Fable 5.1과 맞먹는 성능을 64% 낮은 비용으로 보여줍니다."
정리하면 FrontierCode 50.0%로 자사 이전 버전과 경쟁 모델들을 앞서고, 클로드 계열인 페이블(Fable) 5.1급 성능을 64% 낮은 비용에 낸다는 주장이다. 적용 경로도 붙었다. 데빈 데스크톱과 CLI에서 바로 쓸 수 있고, 한 달간 Pro·Max·Teams 구독자에게는 무료로 열린다는 조건이었다. 방의 첫 반응은 짧았다.
"코그니션 열일하는군요"
실사용자의 온도는 달랐다
발표 수치와 달리 이미 쓰고 있는 쪽의 평가는 차분했다. 한 참가자는 도구의 쓸모를 낮게 잡았다.
"데빈은 뭔가 장난감정도로 쓸만한 느낌"
더 구체적인 불만은 성능이 아니라 한도 쪽에서 나왔다.
"데빈 사용량정책이 좀 킹받는게있긴 합니다"
무엇이 불편한지도 이어서 설명됐다. 주 단위로 한도를 쓰는 구조가 아니라 하루 단위로 끊겨 있어, 남은 양을 마지막에 모아 쓰는 방식이 막힌다는 이야기였다.
"그리고 한주에 다 쓸수있는게아니고 일당 사용량 제한이있어서..마지막날 몰아쓰기가 불가능하구요"
숫자와 체감 사이
같은 제품을 두고 발표는 벤치 점수와 비용을, 사용자는 한도 설계를 말한 자리였다. 코딩 에이전트는 한 번에 긴 작업을 맡기는 쓰임이 많아 하루치 상한이 곧 작업 단위의 상한이 된다. 점수가 같아도 한도를 어떻게 끊어 주느냐에 따라 실제로 할 수 있는 일이 달라진다는 뜻이라, 이 방의 평가 기준이 벤치마크에서 한도 구조로 내려와 있음을 시사한다.
비용을 64% 낮췄다는 부분은 다른 대화와도 맞물린다. 같은 날 이 방에서는 판단은 상위 모델에 맡기고 양이 많은 일은 값싼 모델에 넘기는 분업 구성이 절충안으로 오갔다. 성능이 일정 선을 넘으면 경쟁이 더 빨라진다는 관전평이 뒤따른 것도 같은 맥락으로 읽힌다. 선택의 축이 성능 1위 경쟁에서 단가와 한도로 옮겨가는 중이라면, 발표의 무게는 50.0%보다 64% 쪽에 걸려 있는 셈이다.
발표가 비교 대상으로 자사 이전 버전과 타사 상위 모델을 함께 올려 둔 배치도 눈에 띈다. 같은 성능을 누가 더 싸게 내는지로 논점을 옮겨 놓은 구성이라, 무료 개방 한 달이라는 조건과 묶어 보면 점수보다 사용자 확보를 앞세운 발표로 읽힌다.