SBS Biz

구글이 '최고의 AI 모델'이라며 최근 공개한 제미나이(Gemini)의 성능이 도마 위에 올랐습니다.

제미나이 시연 영상이 사전에 편집된 것으로 드러났고 질문에 대한 답변도 기대에 미치지 못한다는 지적이 잇따르고 있습니다.

현지시간 8일 CNBC에 따르면 구글은 지난 7일 가장 성능이 뛰어난 AI 모델이라고 자랑하며 제미나이 출시를 발표하며 시연 영상을 공개했습니다.

6분짜리 영상은 제미나이를 기반으로 한 챗봇이 이용자와 대화하면서 시각적인 그림과 물체를 인식하는 능력을 보여줬습니다.

사람이 종이에 펜으로 오리를 그리자 제미나이가 '새'임을 인식하고 오리 옆에 물결 표시를 그리자 '오리'라고 답하기도 했습니다. 또 수학 문제와 함께 오답을 낸 풀이 과정을 보여주자 틀린 부분을 정확히 지적하고 올바른 수식도 내놓았습니다.

영화 '매트릭스'처럼 사람이 총알을 피하는 모습을 보여주자 "영화 '매트릭스'의 유명한 장면"이라고 답하기도 했습니다.

짧은 시간에 완벽한 답을 내놓는 것처럼 보여줬던 이 영상은 사실 실시간으로 이뤄진 것이 아닌 걸로 드러났습니다.

실제 제미나이는 구글이 얘기한 것처럼 실시간으로 주변에 반응하면서 이용자와 음성 대화를 할 수 있다는 것과 상당히 다르다는 지적이 제기된 겁니다.

구글도 "시연은 실시간으로 진행되지 않고 미리 준비된 이미지와 텍스트 프롬프트를 기반으로 제작됐다"며 "영상은 제미니가 멀티모달 기능으로 상호작용할 수 있다는 것을 예시적으로 묘사한 것"이라고 밝혔습니다.

시연 영상이 사실상 사전에 편집됐다는 겁니다.

일각에서는 제미나이가 질문에 정확한 답을 하지 못하거나 논란이 되는 주제에 대해 답을 회피한다고 지적도 나왔습니다.

구글은 제미나이가 오픈AI의 최신 모델인 'GPT-4'보다 성능이 우수하다며 AI의 학습량에 따라 울트라, 프로, 나노의 3개 모델로 출시했습니다. 이 중 가장 범용으로 쓰이는 프로는 구글의 AI 챗봇 바드에 탑재됐습니다.

현지 매체에 따르면 이용자들은 제미나이 프로가 탑재된 바드가 올해 오스카 시상식에서 누가 남우주연상을 받았는지 모르는 것 같았다며 질문에 버벅거렸다고 말했습니다.

또 영어가 아닌 다른 언어로 답을 제공해 달라는 요청을 제대로 이해하지 못하는 것 같았다고 지적했습니다. 바드는 100여개 언어로 제공됩니다.

특히 논란이 되는 주제에 대한 답을 사실상 회피하는 모습도 보였습니다.
 
이스라엘과 팔레스타인 무장정파 하마스의 전쟁을 업데이트 해달라고 하자 "최신 정보를 얻으려면 구글 검색을 사용해보라"며 답을 하지 않았습니다.

구글은 "바드가 제공하는 답이 다른 AI 챗봇과 같이 부정확한 정보가 제공될 수 있다"며 "반드시 더블 체크가 필요하다"며 주의를 당부했습니다.

제미나이 3개 모델 중 사람에 버금가며 가장 성능이 우수한 것으로 평가받는 울트라는 내년 초 출시될 예정입니다.

이 때문에 구글이 챗GPT의 최신 언어모델 'GPT-4'에 맞서 제미나이를 성급하게 공개한 것이 아니냐는 분석이 나옵니다.