전체기사 최신뉴스 GAM 라씨로
KYD 디데이
글로벌 미국·북미

속보

더보기

AI 최강자 등극 구글 '제미나이', GPT-4와 비교해 보니

기사입력 : 2023년12월07일 14:53

최종수정 : 2023년12월08일 07:49

[서울=뉴스핌] 최원진 기자= 구글이 오픈AI의 최신 생성형 인공지능(AI) 거대언어모델(LLM) 'GPT-4'를 능가하는 자체 모델 '제미나이(Gemini) 1.0'을 6일(현지시간) 공개해 화제다.

지난해 11월 챗GPT로 생성형 AI의 미래를 제시한 오픈AI가 기술 최강 자리를 굳건히 지킬 것이란 예상이 GPT-4 출시 후 불과 약 9개월 만에 깨진 것이다. 구글 제미나이가 AI 업계의 치열한 개발 경쟁에 다시 한번 불을 지폈다.

◆ 제미나이의 강점은 '멀티 플레이어'

제미나이는 3가지 버전으로 나온다. 구글이 지금까지 내놓은 것 중 가장 강력한 LLM이자 데이터센터와 기업용 모델인 '제미나이 울트라', 구글의 AI 챗봇 '바드'의 모델인 '제미나이 프로', 스마트폰 등 모바일 기기에서 사용 가능한 컴팩트한 사이즈의 '나노'다.

제미나이 프로는 제품 공개한 이날 바로 바드에 탑재됐다. 제미나이 프로가 적용된 바드는 170개 이상 국가 및 지역에서 영어로 제공되며, 향후 서비스 확장 및 새로운 지역과 언어도 지원될 예정이다. 

'제미나이 울트라'는 내년 초 '바드 어드밴스드'라는 이름으로 바드에 장착되며, '제미나이 나노'는 구글이 지난 10월 공개한 최신 스마트폰인 '픽셀8 프로'에 탑재된다.

구글은 제미나이가 "선천적"(natively)으로 멀티모달(Multi-Modal·다중모드) AI 모델이라고 소개한다. 멀티모달은 말그대로 텍스트뿐만 아니라 이미지, 동영상 등 비언어 입력값도 이해해 응용할 수 있는 '멀티 플레이어'다.

오픈AI가 이미지 생성 AI '달리'(DALL-E), 음성 인식 AI '위스퍼'(Whisper)를 각각 개발한 방식과 달리 구글은 애초부터 텍스트·이미지·오디오 등 다양한 데이터로 제미나이를 훈련해왔다는 것이다.

제미나이가 학생의 물리학 문제를 풀이해주는 예시. [사진=구글 딥마인드 제공]

특히 제미나이는 이미지와 동영상을 이해한 데이터를 응용하고 상호 작용하는 데 강점을 보인다.

예컨대 한 학생이 물리학 문제를 풀이하는 과정을 펜으로 쓴 이미지를 교사가 제미나이 프롬프트에 넣어 문제 풀이 과정에 어떤 부분이 틀렸는지 질문하면 제미나이는 정확히 문제의 정답과 학생의 손 글씨를 이해해 잘못된 문제 풀이 과정을 수정해 준다.

구글 딥마인드는 "제미나이가 이미지 속 텍스트를 이해하는 것을 넘어 교사가 어떻게 문제를 다르게 설정했는지 등을 이해해야 가능하다"고 설명했다. 제미나이는 오답 풀이 뿐만 아니라 학생이 틀린 유형의 다른 연습 문제도 제공해 교육 환경에서의 활용도가 높다는 게 자체 평가다.

이 밖에 제미나이는 동영상 속 언어를 감지해 번역 자막을 달아주고, 동영상 속 상황을 이해해 질문에 답할 수 있다.

◆ 32개 벤치마크 테스트 중 30개, 최고 성적

이미지와 영상의 이해부터 수학적 추론까지 가능한 제미나이 울트라가 업계에서 LLM 연구개발 평가 시 널리 사용되는 학술 벤치마크 기준 32개 가운데 30개 항목에서 GPT-4를 뛰어넘는 성적을 기록했다.

구체적으로 제미나이 울트라는 텍스트와 추론 벤치마크 부문 12개 중 10개, 이미지 이해 부문 9개 중 9개, 동영상 이해 벤치마크 6개 중 6개, 음성 인식 부문 5개 중 5개에서 GPT-4보다 높은 신기록을 썼다.

특히 대규모 다중작업 언어 이해(MMLU) 벤치마크에서 제미나이 울트라는 90% 이상의 정답률을 기록했다.

MMLU는 수학, 물리학, 역사, 법률, 의학, 윤리 등 57개의 주제를 복합적으로 활용해 지식과 문제 해결 능력을 평가하는 대표 격 LLM 벤치마크다.

구글 딥마인드는 제미나이 울트라의 MMLU 점수가 GPT-4의 86.4%를 앞선 것에서 나아가 AI 모델로는 최초로 인간 전문가 점수인 89.8%를 뛰어넘었다고 밝혔다. 

이 밖에 여러 단계의 추론을 요구하는 여러 문제 해결 능력을 평가하는 빅 벤치 하드(BIG-Bench-Hard)와 독해력 벤치마크인 DROP에서 각각 80%가 넘는 점수로 GPT-4를 능가했다. 

WMT23 벤치마크는 LLM의 번역 능력을 평가한다. 제미나이 울트라는 74.40%로 GPT-4보다 번역 능력이 우수했다.

다만 일상에 필요한 상식 추론 능력을 보는 헬라스웨그(HellaSwag) 벤치마크에서는 제미나이 울트라가 GPT-4에 못미쳤다. 

제미나이 울트라의 이미지 이해 능력은 GPT-4 보다 뛰어났다.

과학, 기술, 인문 과학, 음악 등 6개 핵심 부문 대학교 시험과 교과서에서 수집된 차트, 표, 악보 이미지를 이해하는 능력을 평가하는 다소 새로운 벤치마크인 MMMU에서 제미나이 울트라는 59.4%를 기록, GPT-4를 앞섰다.

이미지를 보고 이해해 관련 질문에 답할 수 있는 능력을 확인하는 VQAv2 벤치마크와 서류상 이미지를 이해하는 능력을 보는 DocVQA, 그래프 등을 보고 수학적 추론 능력을 보는 매스 비스타(MathVista) 벤치마크에서도 GPT-4 보다 좋은 성적을 거뒀다.

AI 모델의 동영상 이해를 평가하는 벤치마크들에서도 제미나이 울트라는 두각을 보였다. 

영상 속 상황을 텍스트로 옮기는 능력을 평가하는 VATEX 벤치마크와 영상과 관련된 질문에 답해 전반적인 영상 이해도를 평가하는 인식 테스트 MCQA 벤치마크 모두 GPT-4를 뛰어넘었다. 

이밖에 중국어 텍스트로 영상 속 상황을 옮기는 능력을 평가하는 VATEX ZH, 영어로 복잡한 요리 과정이 담긴 영상을 텍스트로 옮기는 YouCook2 등 여러 벤치마크에서도 높은 성적을 거뒀다.

제미나이 프로의 음성 인식 이해도도 우수했다. 21개 언어의 음성을 인식해 텍스트로 변환하는 능력을 평가하는 CoVoST 2 벤치마크에서 제미나이 프로는 40.1을 기록, 오픈AI의 음성 인식 AI 모델 '위스퍼' 버전 2(v2) 보다 10 이상 높았다.

62개 언어로 음성 인식 여부를 확인하는 FLEURS 벤치마크에서도 제미나이 프로는 7.6%를 기록, 위스퍼 v3 보다 월등했다. FLEURS는 AI 모델이 음성 인식 정확도를 측정하는 테스트로 점수가 낮을 수록 인식 오류가 적다는 의미다. 

이밖에 제미나이는 파이선(Python), 자바(JAVA), C++, Go 등 세계에서 널리 사용되는 프로그래밍 언어로 코드를 이해하고 생성할 수 있다. 

코딩 작업 성능을 평가하는 업계 표준인 휴먼이발(HumanEval) 벤치마크에서 제미나이 울트라는 74.4%를 기록해 GPT-4(67.0%)를 능가했다. 파이썬 코드 생성 능력을 평가하는 내추럴2코드(Natural2Code) 벤치마크에서도 GPT-4 보다 1%포인트(p) 높은 74.9%를 기록했다. 

[사진= 구글 홈페이지]

wonjc6@newspim.com

 

[뉴스핌 베스트 기사]

사진
재계 총수들, '트럼프 Jr' 만남 총출동 [서울=뉴스핌] 서영욱 남라다 김아영 조민교 기자 = 30일 미국 도널드 트럼프 대통령의 장남 도널드 트럼프 주니어를 만나려는 재계 인사들의 발길이 이어지고 있다. 미국 내 사업 현안을 전달하고 정책적 협력을 요청하기 위한 행보다. 트럼프 주니어와 재계 인사들의 면담은 트럼프 주니어가 묵고 있는 서울 강남구 조선팰리스 호텔의 한 구역에서 열렸다. 트럼프 주니어를 초청한 정용진 신세계그룹 회장의 집무실이 있는 건물이다. 건물 주변에 많은 취재진이 대기 중이지만, 철저한 보안으로 인해 오고 가는 재계 인사들을 마주치기 어려운 상황이다. 30일 오전 트럼프 주니어가 묵고 있는 서울 강남구의 한 호텔 인근 커피 매장에서 포착된 김동선 부사장(왼쪽)과 김동원 사장 [사진=독자 제공] 이날 오전 한화그룹의 김동관 부회장, 김동원 한화생명 사장, 김동선 한화갤러리아 부사장 3형제가 트럼프 주니어를 만난 재계 인사 중 가장 먼저 언론에 포착됐다. 한화솔루션은 미국 조지아주에 태양광 모듈 일관 생산단지 '솔라 허브' 프로젝트를 조성 중이다. 연간 8.4GW 규모의 이 시설은 약 130만 가구가 사용할 수 있는 전력을 생산할 수 있다. 현지 생산 비중을 70%까지 높여 미국의 자국 우선 조달 정책에 대응하고 관세 부담도 줄이겠다는 구상이다. 한화그룹은 방산·조선 사업에서도 미국과 밀접한 연관이 있다. 최근 호주의 방산 조선업체 오스탈 지분을 확보하며 미국 시장 공략에 나선 상황이다. 오스탈은 앨라배마와 샌디에이고에 조선소를 보유하고 있으며, 미 해군 소형 수상함 시장에서 점유율 1위를 기록 중이다. 롯데그룹도 트럼프 주니어와의 접촉에 나섰다. 신동빈 회장과 인도네시아 출장에 나섰던 장남 신유열 롯데지주 미래성장실장 부사장은 이날 오전 귀국해 트럼프 주니어를 만났다. 롯데는 미국 뉴욕 시러큐스에 보유한 바이오 공장을 중심으로 CDMO(위탁개발생산) 사업을 본격화하고 있다. 최근에는 아시아 바이오기업과 항체약물접합체(ADC) 신약 임상 물질 생산 계약을 체결했으며, 이 공장에서 첫 양산이 이뤄질 예정이다. 미국 내 관세 정책 변화에 대응하기 위해 선제적 설비 확충과 고객사 확보에 나선 롯데는, 신 부사장을 통해 트럼프 주니어와 심도 있는 논의를 진행한 것으로 보인다. [서울=뉴스핌] 최지환 기자 = 도널드 트럼프 미국 대통령의 장남 트럼프 주니어가 29일 오후 서울 강서구 김포국제공항에 도착해 탑승기에서 내리고 있다. 2025.04.29 choipix16@newspim.com 이재현 CJ그룹 회장도 이날 트럼프 주니어와 비공개 개별 면담을 가졌다. CJ제일제당은 미국 중서부 사우스다코타주 수폴스에 북미 최대 규모의 아시안 식품 신공장을 짓고 있다. 총 7000억 원이 투입되는 이 공장은 2027년 완공을 목표로 하며, 미국 시장 내 K푸드 수출 거점으로 활용될 예정이다. 이 회장은 미국 내 식품 수출 시 애로사항과 관세 이슈를 전달한 것으로 전해졌다. 이 외 이해진 네이버 의장, 허용수 GS에너지 사장 등도 트럼프 주니어와 만난 것으로 알려졌다. 네이버는 이날 "인공지능(AI)과 테크, 글로벌 진출에 대한 의견을 나누고 상호 협력에 대한 긍정적인 이야기 나눴다"고 설명했다.   이날 오후에도 트럼프 주니어를 만나려는 재계 인사들의 발길이 이어질 전망이다. 이번 트럼프 주니어의 방한은 정용진 회장의 초청으로 이뤄졌다. 트럼프 미 행정부와의 소통 채널을 만들어달라는 재계 요청에 따른 것으로 알려졌다. 전날 김포비즈니스항공센터를 통해 입국한 트럼프 주니어는 곧장 정 회장 자택으로 이동해 만찬을 가진 것으로 알려졌다. 트럼프 주니어는 재계 면담이 끝나는 대로 이날 밤 출국할 예정이다. syu@newspim.com 2025-04-30 14:24
사진
'김문수·한동훈' 최종 승자는 누구 [서울=뉴스핌] 박서영 김가희기자 = 국민의힘 대통령선거 결선 진출자에 김문수·한동훈 후보가 이름을 올렸다. 반탄(탄핵반대)파 김 후보와 찬탄(탄핵찬성)파 한 후보가 2파전을 겨루게 된 가운데 최종 1인 자리를 놓고 치열한 공방이 펼쳐질 것으로 보인다. 국민의힘 대선 후보 경선 선거관리위원회는 29일 오후 3차 경선에 진출할 후보자 2명을 발표했다. 안철수·홍준표 후보는 탈락했다. [서울=뉴스핌] 윤창빈 기자 = 29일 서울 여의도 국민의힘 당사에서 열린 제21대 대통령 후보자 국민의힘 3차 경선 진출자 발표 행사에서 3차 경선에 진출한 김문수(가나다순) 후보와 한동훈 후보가 기념촬영을 하고 있다. 2025.04.29 pangbin@newspim.com 황우여 국민의힘 선거관리위원장은 경선 결과를 발표하며 "과반 득표자가 없어 3차 경선으로 이어지게 됐다"며 "우리 당과 대한민국의 미래를 위해 깊이 고민하시고 이번 투표에 참여해주신 존경하는 당원 여러분께 진심으로 감사하다"고 말했다. 2강 후보에 진입한 김 후보는 "한 후보와 같이 마지막 경선을 하게 된 것을 매우 감사하게 생각한다. 미래가 창창한 대한민국을 위해 한 후보께서 많은 역할 해주시길 기대한다"고 인사를 전했다. 한 후보는 "어려운 대선 상황에서 김 후보와 제가 생각은 조금 다르지만 2인 3각의 마음으로 하나의 후보로서 이재명 더불어민주당 대선 후보와 맞서야 한다"며 "남은 경선 과정에서 김 후보를 경쟁자가 아닌 동반자로 생각하고 함께 이재명과 싸워 이기는 한 팀이 되겠다"고 목소리를 높였다. 앞서 홍 후보는 경선 결과 발표 직전 한덕수 대통령 권한대행을 입당시켜, 3차 경선에 진출하는 2명의 후보와 '원샷 국민 경선'을 진행하자고 제안했다. 이에 대해 김 후보는 "그 부분은 조금 더 논의를 해봐야 한다"고 말을 아꼈다. 그는 경선 결과 발표 직후 기자들과 만나 "한 대행도 아직 출마선언을 하지 않았다. 지금 제가 답을 드리는 것 자체가 너무 앞서가는 것이고 당에서도 생각이 있을 것이기 때문에 차차 논의될 것으로 본다"고 즉답을 피했다. 한 후보는 한 대행을 포함한 '원샷 경선'이 공정성에 어긋난다고 강조했다. 그는 "나머지 (탈락한) 6명은 치열한 과정을 통해 여기까지 왔기 때문에 갑자기 (한 대행이) 들어와서 여기서 경선한다는 것은 현실적이지 않다"며 "우리는 전통이 있고 룰이 있는 정당"이라고 반대 의사를 내비쳤다. [서울=뉴스핌] 윤창빈 기자 = 29일 서울 여의도 국민의힘 당사에서 열린 제21대 대통령 후보자 국민의힘 3차 경선 진출자 발표 행사에서 진출에 실패한 안철수 후보가 소감을 밝히고 있다. 2025.04.29 pangbin@newspim.com 한편 이날 결선 문턱을 넘지 못한 안 후보는 "누가 최종 후보가 되든 이재명을 막고 정권교체 이루는 데 제 힘을 바치겠다. 우리 당의 승리가 국민 승리고 역사의 승리"라고 소회를 전했다. 홍 후보는 이날 결선 탈락을 끝으로 정계 은퇴를 선언했다. 홍 후보는 "정치인생을 오늘로서 졸업하게 되어 감사하다. 이제 시민으로, 자연인으로 돌아가서 좀 편하게 살도록 하겠다. 이번 대선에서 제 역할은 여기까지"라고 했다. 앞서 지난 27∼28일 진행된 국민의힘 2차 경선은 당원투표 50%, 국민 여론조사 50%의 룰이 적용됐다. 당원 투표엔 76만5773명 중 39만4명(50.93%)이 참여했고 국민 여론조사는 5개 기관에서 6000명(역선택 방지 적용)을 대상으로 이뤄졌다. 후보들의 순위와 득표율은 공개되지 않았다. 따라서 결선에 진출한 김 후보와 한 후보 중 누가 앞섰는지 알 수 없다. 이날 3차 경선에 진출한 김문수·한동훈 후보 2명은 오는 30일 양자 토론회를 진행한다. 국민의힘 선관위는 다음달 1∼2일 양일 동안 선거인단 투표(50%)·국민 여론조사(50%)를 거친 후 같은달 3일 전당대회에서 최종 1명을 선출할 계획이다. seo00@newspim.com 2025-04-29 15:44
안다쇼핑
Top으로 이동