구글 AI '제미나이' 카메라로 실시간 인식…수학 첨삭도 척척
사람이 총알 피하는 모습 보여주자, 매트릭스의 유명한 장면
보스톤코리아  2023-12-06, 15:11:54 
구글의 AI 기반 대규모 언어모델인 제미나이 울트라 시연 모습
구글의 AI 기반 대규모 언어모델인 제미나이 울트라 시연 모습
(샌프란시스코=연합뉴스) 김태종 특파원 = 구글이 6일(현지시간) 공개한, 인공지능(AI)의 기반이 되는 대규모 언어모델(LLM)인 '제미나이'(Gemini)는 멀티모달 기능을 갖췄다. 이에 따라 텍스트는 물론, 사진과 영상, 음성도 인식한다.

지금까지 멀티모달 AI 모델을 만드는 방식은 서로 다른 모달리티를 각각 학습시킨 다음, 이를 서로 연결해 일부 기능을 비슷하게 모방하는 수준이었다.

이는 이미지 설명과 같은 일부 작업은 잘 수행할 수 있지만 더 개념적이거나 복잡한 추론을 하는 데는 어려움을 겪을 수 있었다.

그러나 제미나이는 개발단계 처음부터 다양한 모달리티에 대한 사전 학습을 통해 설계돼 기존 멀티모달 모델보다 훨씬 뛰어나다고 구글은 설명했다.

울트라, 프로, 나노의 3개 모델 중 가장 많은 양을 학습한 제미나이 울트라의 경우 성능 평가항목에서 오픈AI의 GPT-4를 뛰어넘는 것으로 나타났다.

특히, 50여개 주제를 복합적으로 활용해 지식과 문제 해결 능력을 평가하는 대규모 다중작업 언어 이해(MMLU)에서는 사람의 점수를 넘는다고 구글은 강조했다.

제미나이는 AI가 카메라로 실제 사람의 행동을 보며 상호 소통을 한다.

실제 구글이 공개한 영상에서 제미나이는 실시간 시야 인식 능력을 갖추며 사람과 같은 사물 인식과 판단력을 갖춘 모습이 구현됐다.

사람이 종이에 펜으로 오리를 그리자 제미나이가 '새'임을 인식하고, 오리 옆에 물결 표시를 그리자 '오리'라고 답했다.

오리의 몸을 파란색으로 칠하자 "흔치 않지만, 파란 오리도 있다"고 소개하는가 하면 파란색 장난감 오리를 보여주자 "고무(장난감) 오리다"라고도 했다.

이 장난감이 물에 뜰지 물어보자, 잠시 멈칫하더니 '고무 오리'를 손으로 누르는 모습을 보여주자, "속이 비어 있어 물에 뜨겠다"고 말했다.

수학과 물리학에 대한 인식도 정교해졌다.

앞면이 네모난 모양의 차량과 삼각형인 차량 중 어느 차량이 더 빠를지를 묻자 "공기역학이 적용된 세모난 차가 더 빠르다"는 답이 돌아왔다.

수학 문제와 함께 오답을 낸 풀이 과정을 보여주자, 틀린 부분을 정확히 지적하고 올바른 수식도 내놓았다.

영상과 음악에서도 높은 인지 능력을 보였다.

영화 '매트릭스'처럼 사람이 총알을 피하는 모습을 보여주자, "영화 '매트릭스'의 유명한 장면"이라고 답했다.

기타를 그리면 기타로만 연주한 곡을, 드럼과 베이스를 그리면 밴드 곡을 연주하기도 했다.

이날 시연한 제미나이 울트라는 내년 초 출시된다.

엘리 콜린스 구글 딥마인드 프로덕트 부사장은 "울트라 출시 연기는 안전성을 보다 확실히 하기 위한 것"이라고 말했다.

taejong75@yna.co.kr


ⓒ 보스톤코리아(http://www.bostonkorea.com), 무단전재 및 재배포 금지
의견목록    [의견수 : 0]
등록된 의견이 없습니다.
이메일
비밀번호
테슬라 북유럽서 사면초가…연기금들, 수백억대 주식매각 2023.12.08
(로스앤젤레스=연합뉴스) 임미나 특파원 = '무노조' 방침을 고수하는 미국 전기차업체 테슬라가 스웨덴에서 노동자 임금 단체협약을 거부한 이후 북유럽..
답변 피하는 구글AI '제미나이'…논란주제엔 "구글 검색해 보라" 2023.12.08
(샌프란시스코=연합뉴스) 김태종 특파원 = 구글이 최근 공개한 최신 인공지능(AI) 모델 제미나이(Gemini)에 대해 구글은 '최고의 AI 모델'..
구글 AI '제미나이' 카메라로 실시간 인식…수학 첨삭도 척척 2023.12.06
(샌프란시스코=연합뉴스) 김태종 특파원 = 구글이 6일(현지시간) 공개한, 인공지능(AI)의 기반이 되는 대규모 언어모델(LLM)인 '제미나이'(G..
완화된 고용지표에 또 랠리…10년만기 국채금리 4.17%로 '뚝' 2023.12.05
미국 노동시장의 구인 건수가 대폭 줄었다는 소식에 미국 연방준비제도(Fed·연준)가 내년 금리인하에 나설 것이라는 전망이 확산되면서 10년 만기 국채..
JP모건 "美 경기둔화가 기업실적에 영향…증시 위태" 2023.12.05
미국 월가가 대체로 내년에 주가가 상승할 것으로 전망하는 것과 달리 JP모건은 비관하는 목소리를 계속해서 내고 있다.5일(이하 현지시간) 블룸버그통신에 따르면 J..