전체기사 최신뉴스 GAM
KYD 디데이
산업

속보

더보기

네이버 이미지 타임라인의 본질은 '딥러닝'

기사입력 : 2016년10월25일 16:37

최종수정 : 2016년10월25일 17:27

네이버 개발자, 딥러닝 활용한 자사 이미지 검색 서비스 사례 공유
"이미지 분석과 텍스트 마이닝 종합적으로 활용"

[뉴스핌=이수경 기자] 네이버가 자사 이미지 검색 서비스에 지도학습과 자율학습 등 다양한 딥러닝 기술과 전통적인 언어 처리 기술을 활용하고 있다.

25일 네이버는 강남 코엑스에서 개발자 컨퍼런스 '데뷰 2016'를 열고 딥러닝을 활용한 이미지 검색 개선 사례를 공유했다.

각각 이미지 검색 개선과 인물 이미지∙동영상 검색 개선을 담당하는 조근희 네이버 개발자, 김시연 개발자가 발표자로 나서며 '포토요약'과 '이미지 타임라인'에 대해 설명했다.

                         네이버 개발자 컨퍼런스 '데뷰 2016' <사진=이수경 기자>

포토요약은 식당, 미용실, 명소에 관한 리뷰와 사진을 분석해 주제별로 사진을 구성해서 보여주는 서비스다. 서비스별로 서로 다른 클러스터(군집화) 랭킹을 적용한 것이 특징이다. 식당 섹션에서는 메뉴(음식) 사진을, 미용실에서는 시술 사진, 명소에서는 네이버가 자체적으로 보유한 DB 사진과 유사도가 높은 이미지를 먼저 보여준다.

이미지 타임라인은 모바일에서 유명인의 고화질 현장 이미지를 시간 순서에 따라 이벤트별로 묶어서 보여준다. 생방송, 콘서트, 공항 출국 등 스케줄에 따라 관련 이미지가 생성되는 점을 고려했다. 형태소 분석을 통해 문장에서 '누가', '언제', 어디서'라는 메타 데이터를 추출한다. 문서 제목과 본문, 조사의 위치를 파악해 사진과 관련해 중요한 명사구를 파악하는 것이 핵심이다.

조 개발자는 "텍스트 질의어로 이미지를 찾을 때 가장 중요한 것은 이미지에 대한 묘사가 잘된 문서"라며 "이미지와 관련된 텍스트를 잘 추출하고 텍스트에 직접 언급되지 않은 묘사를 직접 생성하는 것도 중요한 요소 중 하나"라고 말했다.

사실 유추 과정에서 여전히 단어(텍스트)가 중요하다는 점에서 텍스트 마이닝 기법은 이미지 검색 품질 개선에 크게 기여하고 있다. 텍스트 마이닝은 비정형 텍스트 데이터에서 의미 있는 정보를 찾아내는 기술이다. 이미지 분석은 정확도 개선을 위해 보조적으로 활용된다.

김 개발자는 "타임라인에서 이벤트는 같아도 문서의 작성 목적이 다를 경우 성능 저하의 문제가 발생했다"며 "사진 속 인물의 옷차림이나 헤어스타일과 같은 시각적 요소(Visual Feature)는 텍스트 마이닝으로도 발견하지 못한 아웃라이어(패턴에서 벗어나는 것) 제거에 사용할 수 있다"고 말했다.

마지막으로 조 개발자는 이미지 타임라인에서 두 번째로 중요한 요소인 시각적 요약(Visual Summary)에 대해 설명했다. 시각적 요약은 이벤트 하나당 연관되는 500~600장의 사진을 20~30장으로 추리기 위해 랭킹 시스템을 적용한 것이 특징이다.

그는 "이미지 자체 품질 등 다양성을 최대한 반영한 랭킹 시스템을 운영하고 있으며 시각적 요소를 비교하는 방식으로 중복 이미지는 제거한다"며 "그 결과 메타 데이터에서 추출한 단어를 검색했을 때 이미지 타임라인이 검색 결과에 우선 노출될 수 있는 것"이라고 설명했다.

 

[뉴스핌 Newspim] 이수경 기자 (sophie@newspim.com)

[뉴스핌 베스트 기사]

사진
손흥민, 다저스 홈서 생애 첫 시구 [서울=뉴스핌] 남정훈 기자 = 미국 프로축구 메이저리그사커(MLS) 로스앤젤레스FC(LAFC)에서 활약 중인 손흥민이 생애 첫 시구로  미국프로야구(MLB) 무대에서 특별한 순간을 즐겼다. LA 다저스의 초청을 받은 손흥민은 28일(한국시간) 캘리포니아주 로스앤젤레스 다저스타디움에서 열린 다저스와 신시내티 레즈의 홈 경기에 앞서 시구자로 등장했다. [서울=뉴스핌] 손흥민이 28일 LA 다저스와 신시내티의 경기 전 시구자로 나섰다. [사진 = MLB X] 2025.08.28 wcn05002@newspim.com 마운드에 선 손흥민은 다저스의 상징적인 파란 모자와 함께, 자신의 이름과 등번호 'SON 7'이 새겨진 유니폼을 착용해 팬들의 환호를 받았다. 첫 시구라는 긴장감이 있었지만, 손흥민이 던진 공은 정확히 스트라이크존으로 향하며 '완벽한 시구'라는 찬사를 받았다. 그는 이번 기회를 위해 LAFC 동료들과 가볍게 연습을 이어왔던 것으로 알려졌다. 시구를 마친 뒤 손흥민은 모자를 벗어 관중들에게 감사 인사를 전했고, 시포를 맡았던 다저스의 투수 블레이크 스넬과 포옹하며 미소를 지었다. 손흥민의 이번 시구는 단순한 이벤트 이상의 의미를 가진다. 올여름 그는 지난 10년간 몸담았던 잉글랜드 프리미어리그(EPL) 토트넘 홋스퍼를 떠나 MLS 무대로 이적했다. 세계 정상급 공격수의 합류에 LA는 물론 미국 스포츠계 전체가 들썩였고, 다저스를 비롯해 미국프로농구(NBA) LA 클리퍼스, 미국프로풋볼(NFL) LA 램스 등 현지 메이저 구단들이 공식 SNS를 통해 손흥민을 환영할 정도였다. [서울=뉴스핌] 손흥민이 28일 LA 다저스와 신시내티의 경기 전 시구자로 나서 유니폼을 입고 있다. [사진 = MLB X] 2025.08.28 wcn05002@newspim.com MLS 무대에 입성한 손흥민은 빠르게 자신의 가치를 증명하고 있다. 데뷔전이었던 지난 10일 시카고 파이어와의 경기(2-2 무)에서는 페널티킥을 유도했고, 17일 뉴잉글랜드 레볼루션 원정 경기(2-0 승)에서는 도움을 기록했다. 이어 24일 FC 댈러스전(1-1 무)에서는 환상적인 프리킥으로 데뷔골까지 터뜨리며 세 경기 연속 공격포인트를 기록했다. 이번 프리킥 데뷔골로 손흥민은 MLS 30라운드 '이주의 골' 팬 투표에서 60.4%라는 과반이 넘는 압도적인 지지를 얻어 1위에 올라 '이주의 골'에 선정됐다. LAFC는 오는 9월 1일 오전 11시 45분(한국시간) 홈구장인 BMO 스타디움에서 샌디에이고FC와 홈 경기를 치른다. 입단 후 계속해서 원정 경기를 치른 손흥민은 홈 팬들과 가질 예정이다. wcn05002@newspim.com 2025-08-28 10:36
사진
장동혁, 김문수 누르고 국힘 새 당 대표 [서울=뉴스핌] 박서영 기자 = 국민의힘 새 당 대표에 재선 장동혁 의원이 26일 당선됐다. 장동혁 신임 당 대표는 이날 오전 서울 여의도 국회도서관에서 열린 제6차 전당대회 결선에서 김문수 후보를 꺾고 당권을 거머쥐었다 [서울=뉴스핌] 윤창빈 기자 = 국민의힘 장동혁, 김문수 당 대표 후보가 26일 오전 서울 여의도 국회 도서관에서 열린 제6차 전당대회 결선에서 기념촬영을 하고 있다. 2025.08.26 pangbin@newspim.com 이번 결선투표는 지난 24일부터 25일까지 이틀 동안 추가 투표를 거친 후, 당원 선거인단 투표(80%)와 일반 국민 여론조사(20%)를 합산한 결과다.  장 대표는 22만301표 김 후보는 21만7935표를 각각 득표했다. 국민의힘은 지난 22일 제6차 전당대회를 열고 투표 결과를 발표했으나 과반 이상의 득표자가 나오지 않아 김 후보와 장 후보의 결선 행이 확정됐다. 안철수 후보와 조경태 후보는 낙선했다. 당시 득표율 및 순위는 따로 공개되지 않았다. 앞서 최고위원에는 신동욱·김민수·양향자·김재원 후보가 당선됐다. 청년최고위원은 우재준 후보가 선출됐다. 국민의힘 지도부를 구성하는 최고위원 및 청년최고위원은 반탄(탄핵반대) 3명(신동욱·김민수·김재원)과 찬탄(탄핵찬성) 2명(양향자·우재준) 구도다. 장 대표와 최고위원, 청년최고위원의 임기는 이날부터 시작된다. seo00@newspim.com 2025-08-26 10:47
안다쇼핑
Top으로 이동