교내 RAG 경진대회 상담, '리뷰까지 오모 네이티브, 하나만 쓴다면 코덱스' 조언이 붙었다

새벽 0시 51분, 한 참가자가 교내 대회를 앞두고 질문을 올렸다.

"교내에서 rag 성능개선 작은 대회 있는데 개선점 찾고 기획 세우는 모델 페이블 쓸까요 sol xhigh 쓸까요? 다 같은 기본 fastapi + 똑같이 작은 오픈웨이트 모델 쓰는 거 같은데 파인튜닝 하기에는 어려운 부분이라 시간도 많이 잡아먹고 하기도 어려워서.."

6분 뒤 그는 대회 조건을 좀 더 구체적으로 덧붙였다.

"3일 가량인데, 첫째 날 오후 시간은 대부분 기본 베이스 라인 fastapi + 리트리버랑 제너레이터 검색 성능 튜닝 안된거 똑같이 연결하는 시간이고, 사실상 개선 가능한 시간은 2일 남짓 같습니다. Rag 인덱싱 과정에 사용할 문서는 약관 문서라고 들었어요"

3일 중 하루는 베이스라인 구축에 그대로 쓰이고 실질적으로 손댈 수 있는 시간은 이틀 남짓이라는 설명이었다. 새벽 1시 7분, 다른 참가자가 상세한 답을 내놨다. 그는 리서치와 계획 수립, 그리고 리뷰까지 오모 네이티브 계열이나 유사 도구에 맡겨두는 방식을 권했다.

"페이블과 sol을 같이 쓰시면 좋을듯한데 여기서 자주 언급되는 omo native나 가재코드로 reserach -> plan 시켜두고 리뷰수행까지 하는게 가장 좋긴할거구요. 미리 관련 스킬 레포나 레퍼런스 문서들을 많이 검색 후에 프롬프트로 같이 넣어주시는게 좋지 않을까 합니다. 코덱스나 클로드 둘중하나만 사용해야한다면 전 코덱스를 추천합니다.. 페이블은 너무 그 사이버 보안이슈때문에 작업이 끊기거나 fallback되는게 아직도 있는것같고 비용도 비용이라 5시간 한도가 너무 빨리 차요. "

여러 도구를 함께 쓸 수 있다면 오모 네이티브 계열이 낫지만, 코덱스와 클로드 가운데 굳이 하나만 골라야 한다면 코덱스 쪽이라는 조건부 답변이었다. 이어 그는 한도까지 조정해야 하는 상황이라면 페이블이 작업 중 멈추는 시간이 더 길어질 수 있다고 덧붙였다. 질문을 올렸던 참가자는 구독 비용 계산으로 답했다.

"코덱스 클로드 둘 다 월 20달러 구독이고 페이블 끝날때 준 100달러 크레딧 80프로만 남아서.. 너무 고계획으로 돌리기엔 중간에 다 쓰고 멈출까봐 겁나긴 하네요"

곧이어 다른 참가자는 20달러 구독이라도 복잡한 작업이나 상위 모드를 쓰면 20분 만에 한도가 동날 수 있다고 경고를 보탰다.

이 상담이 구체적인 숫자로까지 이어진 배경에는, 대회 시간이 실질적으로 이틀뿐이라는 제약이 자리한 것으로 보인다. 시간이 촉박한 만큼 도구를 잘못 고르면 만회할 여유가 없고, 그래서 정확히 얼마나 오래 쓸 수 있는지를 따지는 계산이 곧바로 뒤따른 것으로 읽힌다. 리서치·계획·리뷰는 오모 네이티브 계열에 맡기되, 코덱스와 클로드 가운데 딱 하나만 골라야 하는 상황이라면 코덱스를 우선한다는 조건부 조언은, 도구 하나를 정답으로 내미는 대신 상황에 따라 갈리는 실전 판단 기준을 보여준 사례로 남았다.