AI 기반 임베디드 영상분석 솔루션 전문벤처기업 넥스리얼(대표 전석호)은 24일부터 26일까지 서울 삼성동 코엑스에서 열리는 ‘국제인공지능대전(AI EXPO KOREA 2021)’에 참가해  AI 기반 영상객체 탐지·추적·식별 기술과 솔루션을 공개한다.

솔루션은 자체 비전 AI 플랫폼을 내장한 카메라(AI@Camera) 및 게이트웨이(AI@Edge) 장비와 서버용 프로그램 S/W(AI@Server)로 구성된 3-Tier 분산·통합 시각인공지능(Vision AI) 솔루션을 선보인다.

AI@Camera는 넥스리얼이 자체 설계 제작한 임베디드 Vision AI 플랫폼 모듈이 내장된 지능형 센서 카메라로 RGB 센서, Depth 센서(스테레오, 3D ToF), Thermal 센서(LWIR)와 선택적 결합해 2D AI 카메라, 3D AI 카메라, 열화상 AI 카메라 또는 멀티모달(RGB-Depth-Thermal) AI 카메라 형태로 제공된다.

내장된 임베디드 Vision AI 플랫폼은 탐지 정확도(mAP)와 처리속도(FPS) 성능의 균형 관점에서 SOTA(State-of-the-Art) 수준의 경량 실시간 객체 탐지 모듈을 기본 내장하고 있으며, 객체 추적 모듈과 객체 재식별 모듈을 추가할 수 있다.

특히, AI@Camera는 무거운 영상정보를 가벼운 메타정보로 변환시켜 사물인터넷(IoT)에 바로 연결할 수 있어 ▷네트워크 대역폭 및 지연 이슈, ▷서버 및 스토리지 등 인프라 비용증가, ▷상시 장시간 육안감시에 따른 비용증가와 업무비효율, ▷운영장애로 인한 전체 서비스 중단 등 클라우드 기반 AI 시스템의 취약점을 보완해 줄 수 있는 유일한 대안으로 기대된다.

이와 함께, 신제품 AI@Edge는 넥스리얼의 임베디드 Vision AI 플랫폼 기술이 적용된 제품으로 RTSP 또는 HDMI 비디오 스트림을 수신하여 AI 기반 객체 탐지·추적·식별 등 영상분석을 수행하고, 영상분석 메타 데이터를 원본 비디오와 함께 RTSP로 재전송하는 변환장치이다.

예를 들어, AI@Edge를 기존 IP 카메라 바로 뒤에 인라인(In-Line) 모드로 연결하여 사용할 경우 AI 카메라로 사용할 수 있으며, 아웃오브밴드(Out-of-Band) 모드로 네트워크를 구성할 경우 AI 엣지 박스로 사용한다.

또한, AI@Edge를 HDMI 출력 카메라 또는 HDMI 입력 모니터에 인라인(In-Line) 모드로 연결하여 사용할 경우 출력영상 또는 입력영상을 분석해 메타 데이터와 영상을 RTSP 스트림으로 원격지에 전송할 수 있다.

AI@Server는 넥스리얼의 딥러닝, 머신러닝, 영상분석 및 컴퓨터 비전 기술이 집약된 지능형 영상통합관제 소프트웨어다. 엔비디아 GPU 환경에서 윈도우즈 MFC 기반 또는 리눅스 기반으로 동작하며 최대 16채널 실시간 처리를 지원한다.

특히, 이 솔루션은 AI융합 해안경비시스템 구축 사업을 통해 실제 해안소초 CCTV 영상과 TOD 영상 대상으로 대분류 기준 선박/사람/차량/비행기 4종(Class)에 대한 객체식별 성능시험에서 1차년도 평가기준을 통과했다.

자체 고유의 이동 카메라 이동 객체 탐지 및 PTZ 자동추적 알고리즘과 SOTA(State-of-the-Art) 수준의 딥러닝 기반 영상객체 탐지(Detection)·추적(Tracking)·식별(Re-Identification) 기술 프레임워크를 결합해 다양한 현장 상황과 운영 시나리오에 대응한다.

부가기능으로 레이더 영상정보와 선박 항적정보를 판독하여 CCTV 및 TOD 영상정보와 결합해서 미확인 선박과 이상항적 선박을 탐지해 알람하거나 실시간 PTZ 카메라 자동추적과 PTZ 카메라간 자동연계추적을 실시할 수 있으며, 이상상황탐지, 자동영상검색, 다중카메라 기반 사람 및 차량 객체 자동영상추적(Person and Vehicle Re-Identification) 등 기능확장이 계속되고 있다.

한편, ㈜넥스리얼은 인공지능 정책을 담당하는 과기정통부(NIPA)와 출입국관리를 담당하는 법무부가 협력하여 2019년부터 2022년까지 추진 중인 인공지능 식별추적 시스템 구축 및 실증 사업에 컨소시엄으로 참여하고 있다.

매년 컨소시엄간 경쟁방식으로 진행되는 본 사업에서 넥스리얼은 출입국 심사시간 단축을 위한 워크스루형 차세대 자동 출입국심사대 구현과 공항내 테러 및 범죄 예방을 위해 이상행동과 위험인물을 자동으로 식별추적 하는 이상행동자 통합관제시스템을 구현하고 있다.