대화방 AI 봇 호출 시험과 참가자가 느낀 제약

23일 밤 10시를 넘기자 에이전트코리아 대화방에서 한 참가자가 방에 들어와 있는 AI 봇을 연달아 불러 보기 시작했다. 계기는 달리기 이야기였다. 마라톤 페이스가 화제가 된 끝에 그 참가자가 봇을 태그해 속도 환산을 맡겼다.

1키로미터 3분대면 시속 몇키로야 ?

이 기록에는 봇의 답이 본문 없이 호출 표시로만 남아 있다. 그래서 무엇이라고 답했는지는 알 수 없고, 아래 내용은 시킨 사람의 말과 주변 반응으로만 짚을 수 있다. 곁에서 지켜본 다른 참가자는 똑 부러진다는 뜻으로 반응했다.

똑띠하네요

계산에서 검색까지

환산 요청 뒤 요청은 사실 확인으로 넘어갔다. 출처를 찾아 팩트체크를 해 달라고 한 직후 이 참가자는 사진은 인식하지 못하는 듯하다고 적었다. 어떤 사진이었는지는 기록에 없다.

음.. 사진은 인식 못하나 부네

곧이어 달리기 이야기를 하던 다른 참가자가 3분대라고 했지 3분00초는 아니라고 짚었다. 시킨 참가자는 표의 한 줄처럼 보이는 3분 59초와 시속 15.06킬로미터 숫자를 올린 뒤, 3분 59초도 3분대이긴 하다며 이렇게 덧붙였다. 그 숫자를 봇이 내놓은 것인지는 기록에 없다.

9990원도 9천원대인거 처럼

그다음에는 깃허브에서 별을 가장 많이 받은 저장소를 찾아 달라고 했고, 곧이어 한 달 새 별이 급격히 늘어난 저장소와 온톨로지(개념을 체계적으로 정리하는 방식) 분야에서 주목받는 저장소를 다섯 개씩, 사용법과 함께 정리해 달라는 긴 요청을 올렸다. 기간을 일주일로 줄여 다시 검색해 달라는 요청도 이어졌다.

기간을 1주일로 줄여서 다시 검색해줘

태그에 놀라고, 문서에서 막히다

한참 뒤 다른 참가자가 태그로 불린다는 점에 놀라워했다. 여기서 '얘'는 봇을 가리키는 것으로 보인다. 어떻게 했는지 궁금해하는 말이 이어졌다.

ㅁㅊ 얘 태그도 되네요??

시킨 참가자는 이어 첨부 문서 요약도 가능한지 물었고, 세 줄로 요약해 달라고 한 뒤 아까 요약이 된다고 하지 않았느냐며 문서를 어떻게 줘야 하느냐고 되물었다. 봇이 가능하다는 취지로 답했다는 뜻으로 읽히지만, 그 답도 기록에는 없다.

첨부문서 아까 요약 된다며.. 어떻게 줘야해?

참가자는 호출 이름을 바꿔 방금 올라온 논문과 이 문서를 분석해 달라는 말을 두 줄 적어 보기도 했다. 결과는 대화에 나타나지 않는다. 대신 제약이 있는 듯하다는 추측이 나왔다.

오카방이라 좀 제약이 있는거 같기도 함

여기서 오카방은 오픈카톡방을 줄인 말로 보인다. 곧 결론이 적혔다. 방 안에서 직접 하는 것은 안 되는구나 싶다는 것이다.

아.... 방에서 직접은 안되는구나

곧이어 이 참가자는 이미지 제작까지 별도 창에서 된다고 적었다. '별도 창'이 정확히 무엇인지, 봇과의 개별 대화창인지는 기록에서 확인되지 않았다.

이어진 그림 이야기

바로 뒤 대화는 뇌를 그린 이미지로 옮겨 갔다. 시킨 참가자는 사람이 기억하는 방식과 연결해 AI 기억을 발전시키려고 모아 둔 자료라고 설명했다.

ai 기억 하는거 디벨롭 할라고 모았던 자료

다른 참가자는 그림이 조금 불편하다며 위치가 조금씩 다른 듯하다고 했다. 이 이미지가 별도 창에서 만든 것인지는 기록에 없으므로 둘을 이어서 읽을 수는 없다.

해석

이 실험이 보여 주는 것은 대화방에 들어온 봇이 호출마다 8초에서 40초 안에 응답 표시를 올린 것으로 기록돼 있으나, 사진과 첨부 문서처럼 파일을 넘겨야 하는 일은 방 안에서 막힌다고 참가자가 체감했다는 점이다. 같은 날 저녁 8시대에는 다른 참가자가 방에서 별칭으로 부르는 에이전트를 두고 이미지는 못 읽는 모양이라고 적기도 했다.

두부전트는 이미지는 못읽나보네요

다만 막힌 이유가 방 환경 때문인지 봇 자체 한계인지는 대화에서 확인되지 않았다. 오카방이라는 제약은 참가자 본인의 추측이다.