LG AI연구원, 세계 최고 권위 학회서 최고논문상 수상

기사입력 : 2025년04월30일 10:00

최종수정 : 2025년04월30일 10:00

'빅젠 벤치' 개발 성과 인정

[서울=뉴스핌] 김정인 기자 = LG는 자사 인공지능(AI)연구원이 자연어 처리(NLP) 분야 세계 최고 권위 학회 중 하나인 북미 전산언어 학회(NAACL) 2025에서 '최고논문상(Best Paper Award)'을 수상했다고 30일 밝혔다.

LG AI연구원은 지난해 NAACL 2024에서 AI 모델의 문화적 편견에 관한 분석을 통한 AI 시스템의 안정성 및 공정성을 주제로 발표한 연구 논문이 '소셜임팩트상(Social Impact Award)'을 받은 데 이어 올해는 생성형 AI 모델 성능을 평가하는 새로운 벤치마크 연구 논문이 같은 학회로부터 최고논문상을 수상했다.

◆ '빅젠 벤치' 개발해 최고논문상 수상

LG AI연구원은 NAACL 2025에 채택된 1400편이 넘는 논문 중 단 하나만 선정해 수여하는 '최고논문상'을 받았다.

'최고논문상'은 자연어 처리 분야에서 새로운 연구 방향을 제시하거나 중요한 문제를 해결한 연구 중 올해 가장 혁신적이고 중요성이 높다고 평가를 받은 연구가 선정된다.

빅젠(BIGGEN) 벤치마크는 생성형 AI 모델이 갖추어야 할 9가지 핵심 역량을 기준으로 77개의 세부 역할 수행 능력을 객관적이고 종합적으로 평가하도록 설계됐다. [사진=LG]

논문 1 저자인 김승원 카네기멜론대 박사과정 연구생은 LG AI연구원 초지능랩의 인턴 과정 중 이문태 초지능랩(Super Intelligence Lab)장, 이경재 데이터 스쿼드(Data Squad)리더, 서민준 KAIST 교수 연구팀과 함께 생성형 AI 모델 성능을 평가하는 '빅젠 벤치(BIGGEN BENCH)'를 개발해 최고논문상을 수상했다.

LG AI연구원과 서민준 KAIST 교수 연구팀이 주도한 이번 연구에는 연세대, 코넬대, 일리노이대, MIT, 워싱턴대 등 여러 대학의 연구진이 함께 참여했다.

기존 생성형 AI 모델 평가 방식은 '유용성', '무해성'과 같은 추상적인 개념 지표에 의존하고 있어 사람이 평가했을 때의 결과와 차이가 발생하고, 특히 AI 모델이 보유하고 있는 세부 역량에 대한 측정이 어렵다는 한계가 있었다.

빅젠 벤치는 ▲지시사항 수행 ▲논리적 추론 ▲도구 사용 능력 ▲안전성 ▲다양한 언어와 문화적 맥락 이해 능력 등 생성형 AI 모델이 갖춰야 할 핵심 역량을 9가지로 분류하고 77개의 세부 역할을 잘 수행하는지 평가하는 765개 항목으로 구성되어 있다.

이는 실제 사람의 평가와 유사한 결과를 도출하기 위해 생성형 AI 모델을 사용하고 평가할 때 주변의 다양한 상황과 주관적 요소를 고려하는 사람의 평가 방식을 모방한 것이다.

LG AI연구원은 빅젠 벤치를 사용해 103개의 생성형 AI 모델들을 평가한 결과 전문가 집단과의 교차 검증에서 높은 수준의 신뢰도와 타당도를 보여 새로운 벤치마크로의 가능성을 확인했다.

이문태 LG AI연구원 초지능랩장은 "빅젠 벤치는 생성형 AI의 다양한 능력을 객관적이고 종합적으로 평가할 수 있도록 설계됐으며, 기존 벤치마크들의 한계를 극복하고 인간의 정교한 평가기준에 부합하여 AI 모델의 능력을 파악할 수 있다는 장점이 있다"고 말했다.

서민준 KAIST 교수는 "빅젠 벤치는 생성형 AI 모델을 평가할 때 사람들이 실제로 사용할 때 느끼는 실용성을 지표화 할 수 있다는 점이 가장 큰 장점"이라며 "빅젠 벤치에서 좋은 결과를 얻는다는 것은 실제로 사용할 때 만족스러운 성능을 보이는 생성형 AI 모델이라는 의미"라고 강조했다.

LG AI연구원은 연구 과정에서 평가자 역할을 하는 AI 모델 5개 중 하나인 프로메테우스-2(Prometheus-2)도 오픈소스로 공개했다. 프로메테우스-2는 글로벌 상용모델 중 최고 성능을 보이는 GPT-4와 큰 차이 없이 평가자 역할을 하며 높은 평가 신뢰도를 보였다.

LG AI연구원은 빅젠 벤치를 기반으로 생성형 AI 모델 개발 과정에서 세부 항목별 성능을 자동으로 평가하는 후속 연구도 진행 중이다.

◆ AI 분야 글로벌 최상위 학회서 논문 234편 발표…특허 228건 출원

LG AI연구원이 2020년 12월 출범 이후 NAACL을 비롯해 NeurIPS, AAAI, CVPR, ICML, ACL 등 AI의 각 분야별 글로벌 최상위 학회에서 발표한 논문은 234편이다.

LG AI연구원은 ▲불량 제품을 감지하는 비전 검사 ▲신물질 합성 및 물성 예측 ▲멀티모달 AI ▲차세대 배터리 개발 ▲의료용 이미지 분석 등 실제 산업에 적용할 수 있는 AI 기술 등 2022년부터 현재까지 국내 120건, 국제(PCT) 108건 등 총 228건의 특허를 출원했다.

kji01@newspim.com

[관련기사]

[관련키워드]

LG AI

GAM - 해외주식 투자 도우미

패스틀리 ② 월가 목표가 상향 '잠재력 과소평가된 AI 수혜주'

패스틀리 ① AI 트래픽 급증 힘입어 주가 72% 폭등

[홍콩 대장주] 메이퇀 ③ 신성장 동력의 '폭발적 성장'

[홍콩 대장주] 메이퇀② 실적은 고속 상승, 밸류는 역대 저점

[뉴스핌 베스트 기사]

사진

황대헌 "결승서 플랜B 급변경" [서울=뉴스핌] 박상욱 기자 = 한국 남자 쇼트트랙 선수로는 처음으로 3개 대회 연속 메달을 따낸 황대헌(강원도청)은 "이 자리에 오기까지 너무 많은 시련과 역경이 있었다. 너무 소중한 메달"이라고 말했다. 황대헌은 "월드투어 시리즈를 치르면서 많은 실패와 도전을 했고, 그런 부분을 제가 많이 연구하고 공부해서 좋은 결과로 이어졌다"고도 했다. 황대헌은 15일(한국시간) 2026 밀라노·코르티나담페초 동계 올림픽 쇼트트랙 남자 1500m 결승에서 옌스 판트 바우트(네덜란드)에 이어 2위로 은메달을 거머쥐었다. 그는 2018 평창 대회 남자 500m 은메달을 시작으로 2022 베이징 대회에서 남자 1500m 금메달과 남자 5000m 계주 은메달을 땄다. [밀라노 로이터=뉴스핌] 박상욱 기자= 황대헌이 15일(한국시간) 2026 밀라노·코르티나담페초 동계올림픽 쇼트트랙 남자 1500m 시상식에 오르며 주먹을 불끈 쥐고 있다. 2026.02.15 psoq1337@newspim.com 황대헌에게 이번 올림픽은 출발부터 쉽지 않았다. 지난해 11월 네덜란드 도르드레흐트에서 열린 2025-2026 국제빙상경기연맹(ISU) 쇼트트랙 월드투어 4차 대회에서 왼쪽 무릎을 다쳤다. 부상 치료가 완전히 끝나지 않은 상태에서 올림픽을 준비했다. 이날 결승은 9명이 함께 뛰었다. 황대헌은 "2022년 베이징 대회 때는 결승에서 10명이 뛰었다. 그리 놀라운 상황은 아니었다"며 "쇼트트랙 레이스의 흐름이 많이 바뀌어서 공부도 많이 했고, 계획했던 대로 경기를 풀어갈 수 있었다"고 설명했다. 이어 "경기 운영엔 다양한 전략이 있었다. 순간적으로 플랜B로 바꿨다"며 "자세한 내용은 제가 많이 연구한 결과라 소스를 공개할 수는 없다"며 미소를 보였다. psoq1337@newspim.com 2026-02-15 09:10

사진

최가온이 전한 긴박했던 순간 [서울=뉴스핌] 장환수 스포츠전문기자= "들것에 실려 나가면 그대로 끝이었어요." 2026 밀라노·코르티나담페초 동계올림픽 스노보드 여자 하프파이프에서 한국 설상 종목 사상 첫 금메달을 따낸 최가온(세화여고)이 가장 아찔했던 순간을 돌아봤다. 최가온. [사진=대한체육회] 최가온은 14일(한국시간) 이탈리아 밀라노 코리아하우스에서 열린 대한체육회 공식 기자회견에서 전날 결선 1차 시기를 떠올렸다. 그는 리비뇨 스노파크에서 열린 결선 1차 시기에서 크게 넘어지며 한동안 일어나지 못했다. 의료진이 내려와 상태를 확인했고, 들것이 대기한 긴박한 상황이었다. 최가온은 "들것에 실려 나가면 병원으로 가야 했고, 그러면 대회를 포기해야 하는 상황이었다"며 "포기하면 평생 후회할 것 같았다. 다음 선수가 기다리고 있어 시간이 많지 않았는데 잠시만 시간을 달라고 하고 발가락부터 힘을 주며 움직이려 했다"고 말했다. 다행히 걸을 수는 있었지만 코치는 기권을 권유했다. 최가온은 "나는 무조건 뛰겠다고 했지만 코치님은 걸을 수 없는 상태로 보셨다"며 "이를 악물고 계속 걸어보려 했고, 다리 상태가 조금씩 나아져 2차 시기 직전 기권을 철회했다"고 설명했다. [리비뇨 로이터=뉴스핌] 장환수 스포츠전문기자= 최가온이 13일 스노보드 여자 하프파이프 결선 1차 시기에서 넘어지자 의료진이 달려와 상태를 살펴보고 있다. 2026.02.13 zangpabo@newspim.com 1, 2차 시기 연속 실수로 벼랑 끝에 몰렸지만 3차 시기에서 반전이 일어났다. 최가온은 "긴장감이 오히려 사라졌다. 기술 생각만 하면서 출발했다. 내 연기를 완성하겠다는 생각뿐이었다"고 돌아봤다. 그리고 900도와 720도 회전을 안정적으로 연결하며 90.25점을 받아 극적인 역전 우승을 완성했다. 은메달을 차지한 교포 선수 클로이 김(미국)과 관계도 화제가 됐다. 최가온은 "클로이 언니가 안아줬는데 정말 행복했다. 그 순간 '내가 언니를 넘어섰구나' 하는 감정이 몰려왔고 눈물이 터졌다"고 했다. 이어 "경기 전에는 언니가 금메달을 땄으면 좋겠다는 생각이 들 정도로 마음이 복잡했다. 존경하는 선수라 기쁨과 서운함이 동시에 들었다"고 솔직하게 털어놨다. 부상 직후 재도전에 대한 두려움은 없었을까. 그는 "어릴 때부터 겁이 없었다. 언니, 오빠들과 함께 타며 자연스럽게 생긴 승부욕이 두려움을 이겨낸 것 같다"며 웃었다. [리비뇨=로이터뉴스핌] 밀라노-코르티나 2026 동계올림픽 스노보드 여자 하프파이프에서 금메달을 획득한 최가온 선수가 지난 12일 이탈리아 리비뇨 스노파크에서 열린 시상식에서 태극기를 들어 보이고 있다. 2026.02.13 photo@newspim.com 많은 눈이 내린 경기 환경에 대해서도 담담했다. "첫 엑스게임 때 눈이 정말 많이 왔는데 그때에 비하면 괜찮았다. 경기장에 들어갔을 때 함박눈이 내려 오히려 예쁘다고 느꼈다. 시상대에서도 눈이 내려 클로이 언니와 '이렇게 눈이 내리니 좋다'고 이야기했다"고 전했다. 몸 상태는 완전하지 않았다. 그는 "무릎이 아주 아팠지만 많이 좋아졌다"며 "올림픽을 앞두고 훈련 중 다친 왼쪽 손목은 귀국 후 점검해야 한다"고 밝혔다. 이어 "이번 올림픽에서 최고의 경기력을 보여드리지는 못했다. 기술 완성도를 더 높이고 긴장감을 다스리는 법도 보완하고 싶다"며 "먼 미래보다 당장 지금의 나보다 더 나은 선수가 되는 게 목표"라고 말했다. 최가온. [사진=올댓스포츠] 가족에 대한 고마움도 전했다. 최가온은 "아버지가 내가 어릴 때 일을 그만두고 이 길을 함께 걸었다. 많이 싸우기도 했지만 끝까지 포기하지 않고 함께해줘 지금 이 자리에 있는 것 같다"며 고개를 숙였다. 귀국 후 계획을 묻자 "할머니가 해주는 밥을 먹고 싶다. 친구들과는 파자마 파티를 하기로 했다"며 수줍게 웃었다. 금메달과 함께 포상금과 고급 시계를 받게 된 데 대해서는 "과분한 것들을 받게 돼 영광이다. 시계는 잘 차겠다"고 말했다. 스노보드 꿈나무들에게는 "하프파이프는 즐기면서 타는 게 가장 중요하다. 다치지 말고 즐기면서 탔으면 좋겠다"고 조언했다. 들것 앞에서 멈추지 않았던 17세의 선택은 결국 한국 설상 종목의 새 역사가 됐다. zangpabo@newspim.com 2026-02-14 22:35