전체기사 최신뉴스 GAM
KYD 디데이
전국 대전·세종·충남

속보

더보기

내년 3천억원 들인다는 AI 데이터 구축사업...'품질검증' 시급

기사입력 : 2020년12월22일 18:12

최종수정 : 2020년12월22일 18:12

전수조사 불가해 사실상 '땜빵식 검증'…저품질 데이터 납품도
정부, 품질강화 나서…TTA '데이터밸런스' 표준 제정 주목

[서울=뉴스핌] 김수진 기자 = A씨는 얼마 전부터 한 회사에서 데이터 구축 아르바이트를 하고 있다. 대부분 이미지나 동영상을 기준에 맞춰 라벨링 하는 작업이어서 업무가 어렵지 않았다. 하지만 '적당한 자료를 찾아달라', '입력 시 특정 단어(그림)만 들어가게끔 해달라' 등 작업 기준이 불명확한 경우도 있어 당혹스러웠다고 한다.

A씨는 "지시를 내리는 담당자도 잘 모르는 것 같아 나만의 가이드를 만들어 작업했다"라며 "물론 회사 자체 검증을 거치긴 했지만 통과된 데이터가 제대로 AI에 활용될 수 있을지 걱정"이라고 토로했다.

인공지능(AI) 교육용 데이터의 철저한 품질 검증이 시급하다는 주장이 업계 안팎에서 제기되고 있다. 정부가 내년부터 본격적으로 관련 사업을 확대할 계획이고 중장기 사업으로 진행할 예정인 만큼 검증 시스템 확보가 시급하다는 지적이다.

현재 데이터 구축 사업 중 상당수가 AI 교육을 목적으로 한다. 과학기술정보통신부는 AI 개발을 위한 양질의 데이터를 구축하기 위해 20개의 'AI 학습용 데이터 구축 사업'을 지난 7월 확정했다.

텍스트와 영상, 이미지 등 다양한 분야의 AI 개발을 위해 총 21종 4650만 건에 이르는 AI 학습용 데이터를 구축하는 사업으로 국민 누구나 참여할 수 있다.

[서울=뉴스핌] 김수진 기자 = 과학기술정보통신부가 진행한 '데이터 주간' 데이터댐 구축 성과보고회에서 민기영 한국데이터산업진흥원장이 주요 혁신 성장 우수사례를 발표하고 있다. [사진=과학기술정보통신부 공식 유튜브 화면 캡쳐] 2020.12.22 nn0416@newspim.com

일단 정부의 적극적인 지원으로 짧은 시간에도 성과는 상당한 것으로 나타났다.

지난 15일 과기정통부가 주최한 '데이터 댐' 사업 성과보고회에 따르면, 올해 구축된 AI 학습용 데이터 종류와 누적 구축 수는 지난해 21종 4650만종에서 8배 증가한 170종 3억 7500만건에 달했다.

정부는 내년도 AI 학습용 데이터 구축 사업에 2925억원을 투입해 헬스케어 및 농·축·수산 등 주요 분야에서 AI 학습용 데이터 150종을 새롭게 개방한다. 다년도 중장기 프로젝트를 활성화하고 활용성 측면도 갖춘다.

문제는 이렇게 구축된 데이터를 제대로 검증하지 못한다는 것이다.

국회 우상호(더불어민주당) 의원실에 따르면 사업을 담당하는 한국지능정보사회진흥원 등이 데이터 품질 검증을 제대로 하지 못한 것으로 밝혀졌다.

지난 10월 국정감사에서 우 의원은 문용식 한국지능정보사회진흥원장에게 "저품질의 데이터가 납품되고 있어도 담당기관이 이에 대한 검증을 못하고 있다"라며 "제대로 된 데이터를 납품했는지를 확인하는 검증 시스템이 없다보니 질 낮은 데이터를 납품하고 다시 사업에 참여하는 경우도 발생하고 있는 걸로 아는데 대책이 필요하다"고 지적했다.

이에 문 원장은 "지금까지 데이터 품질 인증을 못한 건 사실"이라며 "향후 관련 기준을 세우겠다"고 입장을 밝혔다.

플랫폼 데이터 품질 저하도 문제로 지목되고 있다.

국회 윤영찬(더불어민주당) 의원실에 따르면 지난해 공공 데이터 품질관리 수준이 중앙행정기관은 76점, 지자체는 56점에 각각 그친 것으로 나타났다.

윤 의원은 "현 구축된 데이터를 보면 통계 등 정형 데이터가 대부분인데 공공 및 민간에서 필요로 하는 비정형(그림, 동영상 등) 데이터는 부족한 실정"이라며 "기관들이 일회성으로 데이터를 모으는 데만 집착하지 말고 실제 활용할 수 있는 질 높은 데이터를 확보할 수 있도록 품질 검증 및 향상에 힘써야 할 것"이라고 강조했다.

[서울=뉴스핌] 김수진 기자 = 인공지능 학습용 데이터 구축 시 검증이 필요하다는 목소리가 높아지고 있다. [사진=픽사베이] 2020.12.22 nn0416@newspim.com

업계는 데이터 품질 이슈가 언제든 수면 위로 올라올 수 있는 문제라고 보고 있다. 이미 전부터 관련 문제가 제기된 상황이다.

특히 올해 많은 사업들이 8월에서 10월 사이에 발표되면서 현장에서는 실제 데이터 구축 시간이 부족했다는 볼멘소리가 나왔다.

적게는 수천 개에서 많게는 수억 개의 제출된 데이터를 담당기관이 전수 조사하는 것은 사실상 불가능한 만큼 품질 이상이 발생할 가능성이 높을 수밖에 없다는 지적이다.

한 업계 관계자는 "'어느 회사가 대충 수집한 데이터를 납품했는데 문제없이 통과되고 거기에 더해 추가 사업까지 받았다더라'는 이야기가 시장에서 파다하다"라며 "구축 과정부터 검수 전반으로 품질 검증없이 사업을 계속 진행할 경우 세금낭비가 될 가능성이 높지 않겠느냐"고 꼬집었다.

문제는 낮은 품질 데이터로 인해 AI 정확성이 떨어질 수 있다는 점이다.

업계 한 연구원은 "관련 없는 정보(데이터)는 AI를 혼동하게 만들어 정확도를 떨어뜨릴 수 있고, 데이터가 누락되거나 중복된 데이터로 양을 채우고 정작 필요한 데이터는 수집하지 못할 경우 AI가 부정확하게 동작할 가능성이 높다"라며 "만약 처리해야 할 내용과 전혀 무관한 데이터가 입력될 경우 AI가 학습할 특징값이 희석되기 때문에 심할 경우 학습 자체가 되지 않을 가능성이 높다"고 설명했다.

또한 "데이터 품질을 검증하고 높이기 위해 빠르게 대안을 찾지 못하면 기하급수 속도로 구축되고 있는 AI 학습용 데이터들이 쓸모없는 '빅쓰레기'가 될 수도 있다"라고 지적했다.

정부 또한 데이터 품질 확보 중요성을 인지하고 이에 대한 대책 마련에 나서고 있다. 사실 AI 데이터 품질에 대한 가이드라인은 전 세계 어느 국가에서도 확립하지 못한 상황이다. 구글이나 마이크로소프트 등 세계적인 기업이 구축한 데이터 정확도도 43~83%에 불과한 것으로 알려졌다.

정부는 향후 구축될 데이터 품질을 확보하기 위해 지난 9월 AI 학습용 데이터 품질관리를 대폭 강화하는 내용을 발표했다.

하지만 "구축단계에서의 품질검증이 어려워 사후 활용단계에서 유지보수 및 업데이트를 한다"는 내용이 담기는데 그쳐 소극적 대응에 불과하다는 비판을 받고 있다.

이에 최근 데이터 구축 전 설계 단계에서부터 데이터 다양성을 확보하는 방법으로 품질 관리에 나서야 한다는 주장이 힘을 얻고 있다.

한국정보통신기술협회 로고 [사진=한국정보통신기술협회] 2020.12.22 nn0416@newspim.com

한국정보통신기술협회(TTA)는 데이터 검증 및 품질 확보를 위해 지난 10일 6가지 지표를 담은 '데이터밸런스' 기술을 단체표준으로 제정했다.

데이터 댐에 모인 데이터가 실제 현장에서 유용한지, 해당 데이터로 훈련받은 AI이 오작동 가능성이 있는지를 검증하는 프로그램이다.

설계 단계에서 데이터 수집 기준을 잡을 수 있는데 이는 사실상 국내 첫 데이터 가이드라인에 가깝다.

협회 측은 "정확하면서도 다양한 데이터를 통해 데이터 품질 저하를 막고 AI 정확성을 높이기 위해 해당 기술을 단체표준으로 제정했다"고 밝혔다.

기술을 개발한 씽크포비엘 박지환 대표는 "데이터 댐의 궁극적 목적은 다양성과 정확성을 바탕으로 구축된 AI를 실제 산업현장에서 활용하는 것인데 아직 다양성 수준을 평가하는 공인 기준이 없다보니 현장에서 어려움을 겪는 것이 현실"이라며 "데이터 댐 사업이야 말로 AI 기술 분야를 빠르게 성장할 수 있는 기회인만큼, 데이터 품질을 위한 다양성을 확보할 수 있는 가이드 마련 등 정부의 현실적인 정책 마련이 시급하다"고 강조했다.

nn0416@newspim.com

[뉴스핌 베스트 기사]

사진
뉴욕을 뒤흔든 맘다니 돌풍 [뉴욕=뉴스핌]김근철 특파원= "빨리 뉴욕에 파트타임 일자리라도 알아봐야 할 것 같아요." 지난 주말 뉴욕 인근에 사는 지인들과의 모임 도중 나온 얘기다. 이날 저녁 자리 화제의 중심은 단연 '민주당 뉴욕 시장 후보 조란 맘다니'였다.'뉴욕 파트타임' 얘기도 맘다니 덕분에 나온 농담이다. 맘다니는 자신이 시장에 당선되면 뉴욕의 최저 임금을 시간당 30달러로 올릴 것이라고 약속했다. 지금 환율로 따지면 4만 600원 정도다. 현재 뉴욕의 최저 임금 시급은 16.50달러다. 이미 미국 내 최고 수준이다. 그런 뉴욕 최저 임금을 2배로 올리겠다는 얘기다. 물론 2030년까지라는 전제는 달렸다. 그렇다 하더라도 귀가 솔깃해질 만한 공약임은 분명하다. 비단 이날 모임뿐 아니다. 요즘 '뉴요커'들 사이에서 맘다니는 최고의 뉴스메이커다. 어디서든, 누구와든 맘다니 얘기를 꺼내면 10분~20분은 쉽게 대화를 나눌 수 있다. 그만큼 맘다니의 등장 자체가 뉴욕 사람들에게도 충격이자 파격이다. 조란 맘다니 미국 민주당 뉴욕시장 후보. [사진=로이터 뉴스핌] 뉴욕 시장 자리는 한국으로 치면 거의 서울 시장급이다. 뉴욕은 미국의 최대 도시이자, 전 세계에서 사람과 돈이 가장 많이 몰려드는 중심지다.  이런 뉴욕의 유력한 차기 시장 후보가 불과 33세라니. 그것도 아프리카 우간다에서 태어나 7세 때 뉴욕으로 이민 온 인도계 무슬림이다. 더구나 그는 26살이 되던 2018년에야 뒤늦게 미국 시민권을 취득하고 투표권을 받았다. 맘다니가 하버드 같은 아이비리그의 명문대를 졸업한 것도 아니다.  그는 평범한 학창 시절을 보내고 대학 졸업 후 저소득층 주택 압류 방지 상담사로 활동했다. 그러다가 2020년 뉴욕 주의회 하원의원 선거에 민주당 후보로 나서 선출된 것이 사회 경력의 전부다. 시쳇말로 '듣보잡' 수준이다. 예전 같았으면 뉴욕 시장 후보에 명함도 못 내밀 커리어다. 그런 맘다니가 불과 몇 개월의 선거 운동으로 민주당의 뉴욕 시장 후보가 됐다는 것은 믿기지 않는 스토리다.  그것도 뉴욕 주지사 3선에, 한때 차기 대선 후보 물망에 올랐고, 당내 유력 인사와 후원 그룹의 지원을 받는 '거물' 앤드루 쿠오모를 꺾었다. 그야말로 이변이 일어난 것이다. 민주당 전략가 트립 양은 뉴욕타임스(NYT)에 "현대 뉴욕시 역사에서 가장 큰 반전이 일어났다"고 평가했을 정도다. 맘다니는 1일 발표된 민주당 3차 경선 결과 과반이 넘는 56%를 득표했다. 이로써 그는 당당히 민주당의 뉴욕 시장 후보로 공식 선출됐다. 뉴욕은 아직도 민주당의 아성으로 불린다. 민주당 후보 공천은 뉴욕 시장 당선의 보증수표처럼 여겨진다. 뉴욕타임스(NYT)를 비롯한 미국 언론들의 관심은 이제 '맘다니 돌풍'이 과연 어디까지 이어질지에 모아진다. 숱한 전문가들은 아직 맘다니의 본선 경쟁력에 의문을 거두지 못하는 분위기다. 맘다니의 민주당 경선 승리의 발판이 됐던 급진적인 공약들이 결국 부메랑이 돼서 발목을 잡을 것이란 분석이 많다.  맘다니가 내세운 핵심 공약은 실제로 급진 좌파 성향의 포퓰리즘 정책으로 불릴 만하다. 시내버스 무임승차, 0세부터 5세까지 무료 보육 및 유치원 교육 실시, 뉴욕시 관리 아파트 임대료 동결, 값싼 시립 식료품점 설립, 부자 증세 등이 그것이다. 구체적 재정 대책이 없다는 질타와 비판이 나올 만하다. 게다가 맘다니는 학창 시절부터 팔레스타인을 지지하는 운동에 가담했다. 뉴욕과 민주당의 돈줄을 쥔 유대인들의 거부감도 크다.  민주당 주류와 온건그룹에선 벌써 부담스러운 티를 낸다. 너무 과격해서 중도층 이탈을 야기할 것이란 우려의 목소리를 낸다. 그래서 민주당을 지지하는 월가의 큰손들은 이미 온건 성향의 대항마를 찾고 있는 것으로 알려졌다. 당내 경선에서 패배했던 쿠오모 전지사나 경선에서 중도 사퇴한 에릭 애덤스 뉴욕 시장이 독립 출마 형태로 시장 선거에 나서려는 것과도 이와 연결돼 있다. 도널드 트럼프 대통령도 일찌감치 맘다니를 '100% 공산주의자 미친 놈'이라고 부르며 파상 공세를 퍼붓는 중이다.  급진 좌파 프레임을 씌워 민주당 전체를 싸잡아 비판하려는 의도도 깔려있다. 트럼프와 공화당은 색깔론 공세에 더해 민주당 측 후보 난립을 잘 이용하면 뉴욕 시장까지 손에 쥘 수 있겠다는 기대도 하고 있는 눈치다.  지하철에 탑승한 조란 맘다니 미국 민주당 뉴욕 시장 후보. [사진=로이터 뉴스핌] 이런 정치판의 셈법과 보도를 따라가다 보면 '맘다니가 11월 4일 선거에서 뉴욕 시장에 당선되기는 힘들겠구나' 하는 생각도 든다. 최근에 월가 금융기관에서 오래 기간 일했던 지인을 만난 자리에서도 '만다니의 한계'에 대해 얘기를 나눴다. 하지만 그의 견해는 좀 달랐다. 자신의 사무실에 근무하는 한 직원 때문에 생각이 바뀌었다고 한다. 그 직원은 줄곧 보수 성향을 보여왔고 지난 대선에서도 트럼프를 열렬히 지지했다고 한다. 그런 사람이 이번에 민주당 경선에 참여해 맘다니에게 표를 던졌다. 이유를 물으니, "뉴욕에서 사는 게 너무 힘들다. 물가가 미쳤다. 부자들은 상관없겠지만 우리 같은 단순 사무직은 열심히 일해도 렌트비, 교통비, 식료품비 내기에도 너무 벅차다. 내게 이념은 크게 상관없고, 누구라도 이 힘든 생활에 도움을 준다면 표를 안 찍을 이유가 없다"라는 답이 돌아왔다고 한다. 이 말을 들으니 맘다니의 공식 홈페이지 첫 화면에 큼직하게 적힌 슬로건이 새삼 머릿속에 다시 선명히 떠올랐다. "조란 맘다니는 뉴욕의 근로자들의 생활비를 낮추기 위해 시장직에 도전하고 있습니다"였다. 맘다니는 얼마전 NBC 방송의 간판 시사 프로그램 '미트 더 프레스'에 출연해 자신을 공산주의자라고 공격한 트럼프의 언급에 "나는 공산주의자가 아니다."라고 반박했다. 그리고는 "나는 트럼프가 힘을 실어주겠다고 대선 운동 기간 약속했던 바로 그 노동자들을 위해 싸우고 있다. 트럼프 대통령은 이후 그들을 배신해왔다"라고 말했다. '빨갱이 프레임'을 씌우는 트럼프에게 시원하게 한 방 먹이면서 자신이 노동자들을 위한 진짜 일꾼임을 드러내는 패기와 영리함이 번뜩이는 발언이다. 그래서 맘다니가 이념 프레임의 덫에 갇히지 않고, 뉴욕 시민의 민생과 민심을 파고드는데 성공한다면 '정말 큰일을 낼 수도 있겠다'는 생각도 든다. 그건 그가 뉴욕 시장에 당선된다는 의미만이 아니다. 인류 역사상 가장 풍요롭다는 21세기에도 팍팍안 일상을 견뎌내야 하는 노동자 계층과 밀레니얼 세대들에게 과거의 이념과 정치적 문법의 약발이 먹히지 않는다는 점을 확인시켜줄 '사건'이 될 수 있다.  맘다니 열풍과 논란이 뉴욕의 일회성 정치 이벤트로 그치지 않고 앞으로도 계속 증폭되고 변모하면서 확산될 것이란 예감이 드는 이유다.   kckim100@newspim.com 2025-07-03 04:16
사진
트럼프 "머스크 추방도 검토" [서울=뉴스핌] 고인원 기자= 도널드 트럼프 미국 대통령이 기자들에게 "(일론) 머스크의 추방 문제도 고민해보겠다"고 발언하며, 두 사람 간 갈등이 또 한 번 수위를 높였다. 일론 머스크 테슬라 최고경영자(CEO)가 트럼프의 감세·재정 법안을 비판한 데 이어, 트럼프는 머스크의 정부 보조금과 계약에 대한 전수조사와 함께 추방 가능성까지 언급해 정치적·법적 논란이 확산되고 있다. 트럼프는 1일(현지시간) 백악관 앞에서 기자들과 만난 자리에서 "머스크를 추방할 수 있느냐"는 질문에 "모르겠다. 한번 살펴보겠다(I don't know, we'll have to take a look)"고 답했다. 그는 이어 "머스크는 많은 보조금을 받았으며, 전기촤 의무화 폐지에 매우 화가난 듯 하다"고 덧붙였다. 도널드 트럼프 미국 대통령과 일론 머스크 테슬라 최고경영자(CEO).[사진=로이터 뉴스핌] 2025.06.21 mj72284@newspim.com 트럼프는 전기차 강제 규정을 "바이든 시대의 유산"으로 규정하고 폐지를 추진 중이다. 그는 "나는 전기차를 원하지 않는다. 휘발유도, 하이브리드도, 언젠가는 수소차도 원할 수 있다"며 "다만 수소차는 터지면 5블록 떨어진 데서 시신을 찾는다"고 비꼬기도 했다. 트럼프의 '추방' 발언이 담긴 클립이 퍼지자, 머스크는 X(옛 트위터)에 "이걸 더 키우고 싶어 죽겠지만, 지금은 참겠다"고 의미심장한 글을 올렸다. 이 논란은 머스크가 트럼프의 '크고 아름다운 하나의 법안 법(OBBBA)'을 "완전히 미치고 파괴적 법안"이라며 비판한 데서 촉발됐다. 트럼프는 이에 대해 "머스크는 역사상 가장 많은 보조금을 받은 사람"이라며, 정부효율성부(DOGE)가 머스크의 보조금 수혜 내역을 조사할 필요가 있다고 응수했다. 이어 트럼프는 "보조금이 없으면 로켓 발사도, 전기차 생산도 못할 것"이라고 몰아세웠다. 전문가들은 연방정부의 보조금·계약 중단이나 규제 강화 가능성을 주목하고 있으며, 이는 테슬라와 스페이스X의 사업에 실질적인 타격으로 이어질 여지가 있다고 지적한다. 머스크는 세금안 반대뿐 아니라 "새로운 정당(America Party)을 만들겠다"고 맞불을 놓으며 대선 기간부터 이어온 트럼프와 머스크 간 '브로맨스'가 균열 조짐을 보이고 있다. koinwon@newspim.com 2025-07-01 22:23
안다쇼핑
Top으로 이동