자동개선 200번, 남는 건 결국 스킬이었다

오전 10시 58분, 방 안에 누적된 기록 하나가 올라왔다. 한 참여자는 자동개선을 반복 실행하는 프로세스가 어느덧 200번을 넘어섰다며 그동안의 내용을 정리했다고 전했다.

"어느덧 자동개선 하는 프로세스가 200번을 넘어서 내용을 정리해봤습니다"

저녁 7시 35분, 이 기록을 쭉 읽은 다른 참여자가 피드백을 남겼다. 온톨로지를 만들었던 시대의 사람들이 가졌던 생각과 철학을 한 번 더 들여다보고, 왜 그 시대에 그것을 만들었는지에 대한 시선이 더 들어가면 좋겠다는 제안이었다. 지금 상태로는 기술 설명만 보인다는 지적도 함께였다.

"쭉 읽어봤는데 온톨로지를 만든 그시대의 사람의 생각이랑 철학을 한번더 보시고 그시대에 왜 저걸만들었는가라는 생각과 표현이 더들어가있으면 좋을듯해요 지금보기에는 그냥 기술들만 보이는 느낌?"

기술의 겉모습만 보인다는 지적은, 결과물을 만드는 과정에서 맥락과 배경을 함께 남기는 일이 얼마나 쉽게 빠지는지를 짚은 셈이다. 200번의 반복이라는 양적 성과 뒤에 질적인 서사가 따라붙어야 한다는 뜻으로도 읽힌다.

밤 10시 19분에는 화제가 자동화 스킬 자체로 옮겨갔다. 한 참여자는 블로그 글에서 오토리서치(autoresearch)라는 단어를 보니 반갑다며, 아직도 잘 쓰고 있는 스킬 중 하나라고 밝혔다. 랄프(ralph)나 골(goal) 기능과 겹치는 부분도 있지만, 미묘하게 효과가 달라 필요할 때마다 각각 돌려본다고 설명했다.

"블로그의 autoresearch 단어가 반갑네요 ㅋ 아직까지 잘쓰고 있는 스킬중 하나입니다. goal이랑 겹치는것도 있지만, 미묘하게 ralph, auto research, goal 효과가 달라서, 필요할때 각각 돌려보고 있습니다"

7분 뒤인 밤 10시 26분, 다른 참여자는 좀 더 근본적인 자문을 던졌다. GPT 계열 모델(솔)이 스킬을 알아서 잘 골라 쓰는 걸 보면서, 오토리서치 스킬도 요즘 자주 알아서 등장한다고 짚었다. 그러면서 하네스(harness, 에이전트 실행 환경)가 결국 모델에 흡수되고 나면 남는 것은 날카롭게 벼려낸 스킬 하나뿐이지 않겠냐는 생각을 밝혔다. 클로드도 최근 불필요한 md 파일을 덜어내라고 한다는 말도 덧붙였다.

"sol 특징이 스킬을 진짜 알아서 잘쓰더라구요, 요즘 auto research 스킬도 자주 알아서 등장합니다. 뭔가 하네스가 모델에 흡수당하면서 또 다시 남는건 날카롭게 깍은 스킬일까? 이런생각도 해봅니다. 클로드도 요즘 md 파일 덜어내라고 하고…"

200번의 반복 기록에서 시작된 대화는 결국 자동화 도구의 본질에 대한 질문으로 옮겨갔다. 하네스와 모델의 경계가 흐려질수록, 사람이 손으로 다듬어 남긴 스킬 하나의 가치가 오히려 도드라진다는 시선이 방 안에 퍼진 저녁이었다.