‘제미나이’ 답변 제대로 못하고 예민한 주제엔 “구글 검색해 보라”피해
구글이 이를 공개하면서 시연한 영상이 사전에 편집된 것으로 드러났고, 질문에 대한 답변도 기대에 미치지 못한다는 지적이 잇따르고 있다.
8일 경제 매체 CNBC 방송에 따르면 구글은 지난 7일 가장 성능이 뛰어난 AI 모델이라고 자랑하며 제미나이 출시를 발표하며 시연 영상을 공개했다.
사람이 종이에 펜으로 오리를 그리자 제미나이가 ‘새’임을 인식하고, 오리 옆에 물결 표시를 그리자 ‘오리’라고 답하는가 하면, 수학 문제와 함께 오답을 낸 풀이 과정을 보여주자, 틀린 부분을 정확히 지적하고 올바른 수식도 내놓았다.
영화 ‘매트릭스’처럼 사람이 총알을 피하는 모습을 보여주자, “영화 ‘매트릭스’의 유명한 장면”이라고 답하기도 했다.
영상은 제미나이가 짧은 시간에 완벽한 답변을 제공하는 것처럼 보였지만, 이 영상은 실시간으로 이뤄진 것이 아닌 것이었다.
실제 제미나이가 “구글이 얘기한 것처럼 실시간으로 주변에 반응하면서 이용자와 음성 대화를 할 수 있다는 것과 상당히 다르다”는 지적이 제기됐다.
이에 구글도 “시연은 실시간으로 진행되지 않고, 미리 준비된 이미지와 텍스트 프롬프트를 기반으로 제작됐다”며 “영상은 제미니가 멀티모달 기능으로 상호작용할 수 있다는 것을 예시적으로 묘사한 것”이라고 밝혔다.
사실상 사전에 편집된 영상이라는 것이다.
제미나이가 질문에 정확한 답을 하지 못하거나 논란이 되는 주제에 대해 답을 회피한다고 지적도 나왔다.
구글은 제미나이가 오픈AI의 최신 모델인 ‘GPT-4’보다 성능이 우수하다며 AI의 학습량에 따라 울트라, 프로, 나노의 3개 모델로 출시했다.
이 중 가장 범용으로 쓰이는 프로는 구글의 AI 챗봇 바드에 탑재됐다.
비즈니스 인사이더에 따르면 이용자들은 제미나이 프로가 탑재된 바드가 올해 오스카 시상식에서 누가 남우주연상을 받았는지 모르는 것 같았다며 질문에 버벅거렸다고 말했다.
또 영어가 아닌 다른 언어로 답을 제공해 달라는 요청을 제대로 이해하지 못하는 것 같았다고 지적했다. 바드는 100여개 언어로 제공된다.
특히, 논란이 되는 주제에 대한 답을 사실상 회피했다.
이스라엘과 팔레스타인 무장정파 하마스의 전쟁을 업데이트 해달라고 하자 “최신 정보를 얻으려면 구글 검색을 사용해보라”며 답을 하지 않았다.
이는 더 상세한 답변을 하는 챗GPT 프로와 빙, 일론 머스크의 그록 등 실시간 정보를 제공하는 경쟁 챗봇과도 대조적이라고 인사이더는 지적했다.
다만, 구글은 “바드가 제공하는 답이 다른 AI 챗봇과 같이 부정확한 정보가 제공될 수 있다”며 “반드시 더블 체크가 필요하다”며 주의를 당부했다.
제미나이 3개 모델 중 사람에 버금가는, 가장 성능이 우수한 것으로 평가받는 울트라는 내년 초 출시될 예정이다.
이 때문에 구글이 챗GPT의 최신 언어모델 ‘GPT-4’에 맞서 제미나이를 성급하게 공개한 것이 아니냐는 지적이 나왔다.
CNBC 방송은 올해 초 구글이 챗GPT 대항마인 바드를 공개할 당시 시연에서 오답을 제공해 비판이 나왔다며 이번 영상 역시 이를 연상케 한다고 지적했다.
