[현장] AI로 네이버 블로거가 숏폼 만들고 폰만 있으면 라방

네이버가 온서비스(On Service) AI 전략을 영상 서비스에도 담았다. 최첨단 인공지능(AI) 기술을 활용해 고품질의 끊김없는 라이브 영상 서비스를 제공한다. 이를 통해 라이브 방송이 중요한 커머스 사업자와 스트리머들에게는 원활한 영상 송출 환경을, 시청자에게는 끊김없는 영상과 실시간 소통 환경을 지원한다. 

네이버는 이러한 AI 기반 미디어·영상 기술을 고도화해 연내 AI가 접목된 다양한 영상 기술과 확장현실(XR) 콘텐츠 플랫폼을 출시할 예정이다. 

네이버는 지난 16일 경기도 성남시 분당구에 위치한 사옥 그린팩토리에서 '이머시브 미디어 플랫폼(Immersive Media Platform) 테크 포럼'을 열고 이 같이 밝혔다. 

네이버는 ‘NAVER TV 캐스트’를 선보인 지난 2012년부터 현재까지 영상 콘텐츠의 모든 과정에 소요되는 미디어 기술 역량을 자체 고도화했다. 현재는 쇼핑라이브, 치지직 등 실시간 상호작용이 중시되는 고화질 라이브 스트리밍 서비스를 안정적으로 제공하고 있다. 이를 통해 글로벌 브랜드의 대형 쇼핑 행사나 K-POP 콘서트도 실시간 시청 가능한 수준의 영상 기술력을 갖추고 있다.

독자 개발 'AI인코드'로 영상 품질 유지하고 전송은 더 빠르게  

네이버는 그동안 축적해온 영상 기술력에 AI 기술을 더하며 영상 분야의 새로운 지평을 열고 있다.  

대표적인 것이 지난해 도입한 ‘AI인코드(AIEncode)’ 기술이다. 이 기술은 영상 품질은 유지하면서도 단위 시간당 전송률 부담을 최대 30%까지 낮출 수 있는 네이버의 독자 기술이다.

학습된 AI모델이 최적화된 인코딩 결과물을 창출한다. 이는 동영상 압축, 이미지 최적화, 실시간 스트리밍 최적화 등에 두루 활용되고 있다. 이로 인해 사업자와 치지직 스트리머 등 콘텐츠 생산자가 보다 안정적인 스트리밍을 진행할 수 있고, 전송률을 낮춘 만큼 사용자는 더욱 빠르게 영상을 경험할 수 있는 미디어 환경을 제공한다. 

네이버는 AI로 영상의 맥락을 심층 이해하는 기술 ‘MUAi’ 플랫폼을 연내 확대하여 선보인다. 저작권 관리와 유해성 및 저품질 영상을 감지하는 기술 기반 고도화한 것이다. 올해는 영상 이해 기술의 범위를 확대해 △영상의 챕터를 구분하고 설명을 제공하는 오토 챕터(Auto-Chapter) 기술 △태그, 분위기, 장소, 액티비티, 감정 등 영상의 세부 내용을 분석하고 메타 데이터화 하여 네이버 피드의 추천고도화 등 사용자 경험을 개선할 예정이다. 

'오토클립Ai'로 블로거도 숏폼 만든다 

또한 네이버는 텍스트 콘텐츠를 영상으로 자동 변환해주는 ‘오토클립Ai(AutoClipAi)’ 공개도 예고했다. 멀티모달 LLM을 활용해 블로그 맥락을 이해하고 요약하여, 숏폼에 최적화된 내용을 자동 생성하는 기술이다. 음성, 배경음악, 화면 효과 등 내용에 맞는 편집 기법을 자동 적용하여 최적화한 콘텐츠를 생성한다.

블로그 창작자도 손쉽게 숏폼을 제작하고, 클립(Clip) 기반으로 활동 영역을 넓힐 수 있어 텍스트가 강점인 기존 네이버 UGC 서비스 기반에서 한층 풍성한 영상 콘텐츠 생태계로 확장할 것으로 기대된다. 

버추얼 콘텐츠 전문 스튜디오 '비전∙모션 스테이지'도 호평 

1784 사옥에 구축된 버추얼 콘텐츠 특화 스튜디오 비전스테이지와 모션스테이지도 이머시브 미디어 플랫폼 구현의 대표 사례다.

‘비전스테이지’는 다양한 주제에 맞춰 초현실화한 가상 배경을 제공할 수 있는 스튜디오다. 커머스, 숏폼 부터 드라마나 영화까지도 제작 가능다.

‘모션스테이지’는 고품질 3D 콘텐츠를 제작하고자 하는 치지직 스트리머들이 활용할 수 있도록 전문 기술력과 인력 등을 지원하는 스튜디오다. 캐릭터에 움직임을 부여하고 가상 배경을 혼합하여 끊김 없는 실시간 방송이 가능하다.

실제 치지직의 대표 버추얼 스트리머들과 함께 협업한 프로젝트는 가시적인 성과로 이어졌다. 프로젝트 공개 기간 동안 타 플랫폼에서 치지직으로 버추얼 스트리머가 대거 이적해온 것으로 확인됐다. 

글로벌 다운로드 1위 '프리즘 라이브 스튜디오', 폰만 있으면 라방 가능   

라이브 스트리밍 앱 프리즘 라이브 스튜디오도 모바일에서 손쉽게 3D 아바타 기반 콘텐츠를 제작할 수 있도록 지원한다. 글로벌 사용자를 대폭 모으고 있다.

2019년 정식 출시된 프리즘 라이브 스튜디오 앱은 현재까지 누적 9300만 건 이상의 방송을 송출했으며, 일 평균 약 13만 건의 라이브가 생성된다. 전체 이용자의 약 90%가 해외 사용자다. 글로벌 동종 송출 앱 상위 20위 내에서 약 47%의 다운로드 점유율을 기록하고 있다. 국내 다운로드 점유율은 약 80%로 해당 분야 1위를 유지하고 있다. 

네이버가 자체 개발한 ABP(Adaptive Bitrate Publish) 기술을 적용한 결과다. 이 기술은 실시간 네트워크 상태에 맞춰 영상 품질을 자동 조정하고, 전 세계 어디서든 원활한 송출 환경을 제공한다.

특히 스마트폰만 있으면 누구든지 모바일로 라이브 방송을 할  수 있다. 고가의 제반 장비를 구비할 필요가 없도록 기술 장벽을 낮춰 누구나 손쉽게 3D 아바타 기반 콘텐츠를 제작할 수 있다. 나를 표현할 수 있는 3D 아바타로 전 세계 어디서든 라이브 방송을 할 수 있는 것이다. 

다음 단계는 XR…XR 콘텐츠 플랫폼 출격 준비  

네이버 영상 서비스의 다음 단계는 XR 콘텐츠 시장이다. XR은 증강현실(AR), 가상현실(VR), 혼합현실(MR)을 포괄하는 기술이다. 현재 글로벌 콘텐츠 시장에서 가장 주목받는 분야다. 이에 네이버는 안드로이드 운영체제 기반의 XR 콘텐츠 플랫폼을 준비하고 있다.

네이버 이머시브 미디어 플랫폼 김성호 리더는 "곧 도래할 VR 기기의 보급 및 대중화 시대를 맞이해 XR 관련 미디어 기술력 개발에 주력하고 있다"며 "이번에 선보인 비전 AI 창작 기술로 창작의 활성화를 이끌고 사용자들에게 온오프라인을 넘나드는 생생한 미디어 경험을 제공할 수 있도록 관련 콘텐츠와 플랫폼을 개발할 예정"이라고 밝혔다.