로컬 LLM 조합 실험과 스파크 가격 급등
아침 8시 40분 무렵, 한 참여자가 무료로 쓸 수 있는 LLM 여러 개를 한꺼번에 묶어 쓰는 사례를 보고 놀랐다고 전했다. 곧바로 돌아온 것은 자동차 비유였다. 작은 차를 여러 대 붙인다고 경주차 한 대가 되지는 않는다는 지적이었다.
"모닝 여러개 묶는다고 f1차가 되는건 아닌거같습니다 ㅎㅎ"
다만 대화는 비유를 부정하는 쪽이 아니라 비유가 성립하는 조건을 따지는 쪽으로 흘렀다. 실제로 조합을 시도해 본 경험담이 곧 붙었는데, 한 참여자는 젬마4와 qwen3.8 두 모델에게 앞서 공유된 것과 비슷한 논문 작업을 시켜 보면서 둘을 묶으면 어떨지 시험해 본 적이 있다고 밝혔다. 성능이 앞서는 한 대냐, 값싼 여러 대냐를 실제로 굴려 본 사람의 이야기였다.
그 비유에 다른 참여자가 곧 단서를 달았다. 애초에 작은 차를 사면서 경주차의 성능을 기대하지는 않지만, 쓰임과 목적이 정해져 있으면 오히려 그쪽이 더 맞을 수 있다는 것이었다.
"당연히 F1을 기대하고 모닝을 사진 않겠지만 스파크 1000마력짜리같이 용도와 목적안에서는 훨씬 적합할수있겠죠"
이야기는 자연스럽게 장비 값으로 넘어갔다. 로컬 구동용으로 거론되던 스파크의 값이 700에서 1000까지 올랐다는 말이 오갔고, 얼마를 더 얹으면 로컬 모델이 어느 정도 돌아가는지 저울질하던 시점이 이미 지났다는 반응이 붙었다.
"스파크 700 와 비싸다 근데 800이면 로컬 어느정도 돌아가나요 이러고 있었는데"
"1개월전에 Lenovo 버전 700만원대에 드린다고 했었는데 아무도 말씀이 없으셨던...ㅎㅎ;;;;;"
앞선 발언과 겹쳐 보면 여기서 오간 700이나 1000은 만 원 단위의 값으로 보이며, 한 달 사이 같은 급의 장비를 구할 기회가 지나갔다는 뒤늦은 아쉬움이 함께 묻어난다. 값을 재던 시점과 실제로 살 수 있었던 시점이 어긋났다는 이야기이기도 하다.
한편 다른 참여자는 1테라 규모의 모델을 종류별로 올려 실험하는 중이라는 근황을 전했다. 조합이든 단일 대형 모델이든, 결국 어느 쪽도 손에 든 장비의 용량 안에서만 시험해 볼 수 있다는 사정이 이 근황과 앞선 비유를 하나로 묶는다.
이 대화가 보여 주는 것은 로컬 모델 이야기의 무게 중심이 옮겨가고 있다는 점으로 보인다. 어떤 모델이 더 똑똑한가보다, 손에 쥔 장비 안에서 어떤 조합이 목적에 맞는가가 실제 판단 기준으로 쓰이고 있기 때문이다. 조합 실험이 늘어나는 것도 한 대로 다 해결하려는 접근이 장비 값 앞에서 먼저 막히기 때문일 수 있다.
동시에 값이 오르는 흐름은 로컬 구동의 문턱이 기술이 아니라 조달 쪽에 서 있음을 시사한다. 모델 자체는 무료로 받을 수 있어도 그것을 돌릴 상자의 값이 몇 달 만에 뛴다면, 로컬로 간다는 결정은 성능 비교표가 아니라 구매 시점의 문제가 된다. 방 안에서 실험기와 시세 이야기가 한 흐름으로 붙어 다닌 것도 그래서로 읽힌다.