그래프 컨볼루션 네트워크(GCN)를 이용해 보행자의 위치, 속도, 변위 등 다양한 정보를 모델링할 수 있는 새로운 형태의 딥러닝

전해곤 교수는 “그래프 기반의 네트워크 구조를 통해 보행자의 움직임을 다양한 관점에서 모델링했다는데 학술적 의미가 있다”면서, “딥러닝 기반 방법론 특유의 빠른 추론 속도와 제안한 알고리즘의 강인한 성능이 맞물려 보행자 경로 예측 기술의 실용화를 앞당길 것으로 기대된다”고 말했다.
전해곤 교수는 “그래프 기반의 네트워크 구조를 통해 보행자의 움직임을 다양한 관점에서 모델링했다는데 학술적 의미가 있다”면서, “딥러닝 기반 방법론 특유의 빠른 추론 속도와 제안한 알고리즘의 강인한 성능이 맞물려 보행자 경로 예측 기술의 실용화를 앞당길 것으로 기대된다”고 말했다.

보행자의 경로를 파악하는 것은 자율주행과 서비스 로보틱스 기술을 위한 필수요소 중 하나이다. 이를 위해 관측된 비디오 영상을 이용해 보행자의 보행가능 경로와 최종 도착위치를 추정하는 연구가 최근 컴퓨터 비전과 기계학습 분야에서 큰 각광을 받고 있다.

지스트(광주과학기술원, 총장 김기선) AI대학원의 전해곤 교수와 전기전자컴퓨터공학부 석사과정의 배인환 학생은 인공지능 기법을 이용한 정확한 보행자 경로 예측 알고리즘을 개발했다.

이를 통해 보행자의 움직임이 중요하게 사용되는 자율주행의 회피 기술과 서비스 로보틱스 분야에 접목될 것으로 기대된다.

기존 방법론들은 일정한 구조를 갖는 딥러닝 네트워크를 통해 보행자간의 위치를 모델링하여 보행가능 경로와 최종 도착지를 추론하는 반면, 본 연구에서는 그래프 컨볼루션 네트워크를 이용해 보행자의 위치, 속도, 변위 등 다양한 정보를 모델링할 수 있는 새로운 형태의 딥러닝 구조를 제안하였다.

제안한 그래프 컨볼루션 네트워크 구조. 보행자 개개인의 위치, 속도, 변위를 그래프 형태로 모델링하고 인공신경망을 통해 향후 경로는 예측하는 구조
제안한 그래프 컨볼루션 네트워크 구조. 보행자 개개인의 위치, 속도, 변위를 그래프 형태로 모델링하고 인공신경망을 통해 향후 경로는 예측하는 구조

그래프 컨볼루션 네트워크(GCN)는 객체들과 그 객체들 간의 관계로 표현되는 그래프 형태의 데이터를 학습할 수 있는 딥러닝 네트워크이다.

장면 내 모든 보행자를 시공간 그래프(Spatio-Temporal Graph)로 형상화해 사회적 상호작용을 표현하였으며, 보행자 꼭짓점 간 강한 결속을 풀어 부분 그래프 집합을 만드는 방법을 도입해 효율성과 정확성을 높였다.

또한, 종래 예측 방법과 달리 누적 오류를 보상하는 벡터를 통해 오버슈팅을 방지하고 본래의 목적지 방향으로 경로가 복구될 수 있도록 하는 새로운 방법론을 제시했다.

연구결과 예시. 파란색: 입력 영상, 녹색: Ground-truth, 주황색: CVPR2020에 발표된 관련 분야 최신 연구 결과, 노란색: 제안된 방법으로부터 산출된 경로 예측 결과
연구결과 예시. 파란색: 입력 영상, 녹색: Ground-truth, 주황색: CVPR2020에 발표된 관련 분야 최신 연구 결과, 노란색: 제안된 방법으로부터 산출된 경로 예측 결과

제안된 방법을 통해 기존 방법론들이 해결하지 못하는 보행자의 집단합류, 집단 움직임, 급격한 회전 등 복잡하고 다양한 형태의 경로 예측이 가능해졌다. 게다가 제안된 방법론의 네트워크 용량이 가벼워 실용화 관점에서도 그 우수성을 인정받았다.

전해곤 교수는 “본 연구 그래프 기반의 네트워크 구조를 통해 보행자의 움직임을 다양한 관점에서 모델링했다는데 학술적 의미가 있다”면서, “딥러닝 기반 방법론 특유의 빠른 추론 속도와 제안한 알고리즘의 강인한 성능이 맞물려 보행자 경로 예측 기술의 실용화를 앞당길 것으로 기대된다”고 말했다.

한편, 지스트 AI대학원 전해곤 교수(교신저자)와 전기전자컴퓨터공학부 석사과정 배인환(제1저자) 학생의 주도로 수행된 이번 연구는 인공지능 분야 최고 권위의 국제 학술대회인 AAAI Conference on Artificial Intelligence(이하 AAAI)에 지난 5일 '보행자 궤적 예측을위한 분리 된 다중 관계형 그래프 컨벌루션 네트워크(Disentangled Multi-Relational Graph Convolutional Network for Pedestrian Trajectory Prediction)'이란 제목으로 발표됐다.

저작권자 © 인공지능신문 무단전재 및 재배포 금지