이 AI 시스템은 실시간으로 활동, 사물, 감정, 위치 등을 식별하여 새로운 방식으로 비디오를 구성하고 컨텍스트(Context)를 제공할 수 있다.

Netra는 인공지능을 사용하여 기업이 비디오 콘텐츠를 이해하고 구성할 수 있도록 지원한다.(이미지:MIT)

순간에 수천 개의 새로운 비디오가 유튜브(YouTube), 카톡 및 틱톡(TikTok), 인스타그램 등과 같은 사이트에 게시되고 있다. 점점 더 많은 비디오가 녹화되고 실시간으로 스트리밍되고 있다.

그러나 모든 동영상 콘텐츠에서 무슨 일이 일어나고 있는지 이해하는 것은 거의 불가능하다.

여기에, MIT 졸업생인 샤시 칸트(Shashi Kant)와 아미트 판살카(Amit Phansalkar)가 2013년에 설립한 네트라(이하, Netra)는 인공지능(AI)을 사용하여 대규모 비디오 분석을 개선하고 있다.

이 AI 시스템은 실시간으로 활동, 사물, 감정, 위치 등을 식별하여 새로운 방식으로 비디오를 구성하고 컨텍스트(Context)를 제공할 수 있다.

분석 및 요약: 비디오의 활동, 개체, 안전 및 분류에 대한 개요를 IAB 카테고리로 제공한다.(사진:Netra)
분석 및 요약: 비디오의 활동, 개체, 안전 및 분류에 대한 개요를 IAB 카테고리로 제공한다.(사진:Netra)

예를 들어, 현재 많은 기업들은 상품과 브랜드 이미지 개선을 위해 Netra의 AI 솔루션을 사용하여 유사한 콘텐츠를 하이라이트 영상 또는 뉴스 세그먼트로 그룹화하고 무작위로 노출되는 과도한 노출과 폭력적인 영상을 식별하고 기업의 광고 게재 위치를 개선하고 있다. 

활동 탐지: 비디오 요약 및 개별 장면의 수준에서 비디오 내부의 활동을 분석할 수 있다.
활동 탐지: 비디오 요약 및 개별 장면의 수준에서 비디오 내부의 활동을 분석할 수 있다.

Netra는 시스템을 통해 과대 광고를 차단하며, 사람들이 비슷한 일을 하고 비슷한 감정을 표현하고 비슷한 제품을 사용하는 장면을 포함하여 다양한 클립에서 진행되는 작업을 기반으로 비디오를 빠르게 분석하고 콘텐츠를 구성할 수 있다.

객체 검출: 관심 대상(예: 인간, 자동차, 오토바이 등)을 식별하고 추적한다
객체 검출: 관심 대상(예: 인간, 자동차, 오토바이 등)을 식별하고 추적한다

이 AI 솔루션의 분석은 다양한 장면에 대한 메타 데이터를 생성하지만 시스템은 키워드 태그 지정 이상의 기능을 제공하며 활동, 객체 및 위치를 탐지하고, 수집기에 대한 유용한 타임스탬프(Timestamped) 메타데이터를 생성한다. 콘텐츠 큐레이션, 세그먼트 생성 및 실시간 광고 삽입을 자동화 한다.

안전하지 않은 콘텐츠 플래그 지정: 안전하지 않은 콘텐츠 검토를 네 가지 광범위한 범주로 제공한다. 전쟁/분쟁, 재난, 포르노 및 질병 등에서 위험 점수로 통합된다.
안전하지 않은 콘텐츠 플래그 지정: 안전하지 않은 콘텐츠 검토를 네 가지 광범위한 범주로 제공한다. 전쟁/분쟁, 재난, 포르노 및 질병 등에서 위험 점수로 통합된다.

특히, 포르노 등의 과도한 노출과 증오, 재난, 질병 등을 콘텐츠에서 감지하고 상황에 맞는 정보를 제공하여 적합성을 판단한다.

한편, Netra의 AI 솔루션은 API 형태로 지원되며, 선택한 프로그래밍 언어로 단 몇 줄의 코드로 비디오를 처리한다. 또 API로 비디오를 처리하는 과정은 동영상 URL (실시간 스트림 또는 동영상 파일)을 API로 보내는 것만 큼 간단하다.

또한 이 API는 요구 사항에 맞춰 탄력적으로 확대·축소하며 아무리 복잡해도 비디오 워크 플로우를 지원하며, 실시간으로 비디오 스트림을 처리하여 더 빠르고 풍부한 실행 가능한 인사이트를 제공한다. 메타 데이터를 풍부하게 하고, 도달 범위를 측정하고, 데이터 기반 권장 사항을 만들어 ROI를 극대화한다. 

저작권자 © 인공지능신문 무단전재 및 재배포 금지