유재연의 ‘인사이드 트랜D’
영상 인식·분석 분야를 공부하다 보면, 객체를 어떻게 탐지하느냐를 넘어서서 이것을 어떻게 모을지에 대한 고민을 하게 된다. 기업 입장에서는 고객의 행동 데이터가 필요할 수 있고, 코로나19와 같은 보건 차원에서는 전염력을 가진 사람들의 움직임을 예의주시할 필요가 있다. 하지만 개인정보나 초상권 문제가 걸려있기 때문에, 정보에 대한 비식별화를 통해 아주 예민하게 접근해야 한다.
밀도에 접근하는 방법: 로그 데이터, 또는 부분을 통한 예측
지난해 말 한국에서 열린 세계적인 컴퓨터 비전 학회(ICCV 2019)에서도 관련 논문을 꽤 볼 수 있었다. 흥미롭게도 영상 속에서 ‘군집 내 사람 수 세기’ 방법을 낸 논문이 예닐곱 편 있었는데, 대부분이 중국(계) 연구진이 낸 것이었다. 중국에서는 원래부터 기계의 영상 인식 관련 논문을 많이 내는 편이고, 공교롭게도 그해 초에는 홍콩에서 반정부 집회가 잦았다.
연구진의 셈법은 사람의 얼굴에 대해, 아주 작은 부분이라도 찍혔다면, 그것이 한 사람으로 인지되도록 한 것이었다. 당시엔 대다수 얼굴 인식 프로그램이 눈·코·입 등 주요 부위가 온전히 검출되지 않으면 얼굴로 인식이 되지 않았기에, 더욱 눈길을 끄는 연구였다. 키가 작은 사람이나 어린이는 집계가 힘들다는 한계점을 극복하기 위해, 사람 한 명당 평균적으로 차지하는 공간을 계산해 이를 토대로 밀도를 계산하는 연구 또한 소개되기도 했다.
군집뿐 아니라, 사람 개개인의 움직임을 예측하는 연구도 굉장히 활발하게 진행되고 있다. 일명 ‘보행자 예측’이라는 연구 섹터가 따로 있는데, 자율주행 차 기술에서 특히 필요한 연구다. 기계에 다량의 보행자 데이터를 학습시켜 ‘사람’을 먼저 인지하게 하고, 그 다음에 벌어지는 일들(사람이 길을 건널 것인가, 말 것인가)을 기계 스스로 패턴으로써 익히도록 하는 것이다.
캐나다 요크대 연구진의 경우 사람의 의도를 판단하는 것은 굉장히 주관적인 작업인 만큼, 사람들의 집단지성도 필요하다고 판단했다. 따라서 보행자 샘플에 대해 클라우드 워크 플랫폼(MTurk)을 활용해 사람들의 의견을 수집했고, 이를 기계 학습에 반영했다. 그뿐만 아니라 보행자 주변의 환경적인 요인도 모두 모아 보행 예측에 활용했다. 예를 들어 사람 앞에 택시가 있으면, 길을 건너기보단 택시를 탈 것이라고 예측하도록 한 것이다.
세부적으로 사람의 움직임을 알려거든 ‘뼈대’를 떠올려라
최근 아마존웹서비스(AWS) 연구진이 발표한 논문에서는 여러 사람이 뒤섞인 비디오에서 그들의 포즈를 추출하고 이를 트래킹하는 연구가 나왔다. 방법론적으로는 ‘가정’-‘연결’-‘예측’ 파이프라인이 돋보인다. 화면상 사람1에게 가려서 보이지 않는 사람2의 신체 부위 일부를 ‘왼쪽 무릎일 것’이라고 가정해서 사람의 존재 여부를 판단하고, 무릎(관절)으로부터 이어지는 뼈대를 예측하여 “비디오 속 가려진 사람은 농구 게임에서 디펜스를 하는 중”이라는 식으로 해석해낸다고 한다.
공간 내부의 사람들 협업 행동을 파악하는 연구도 있다. 오토데스크(Autodesk)의 연구진은 사무실 곳곳에 캠을 설치한 뒤, 책상의 위치나 크기에 따라 사람들이 어떻게 뭉치고 흩어지는지, 커뮤니케이션 스타일은 어떻게 달라지는지를 연구한 바 있다. 공간을 사람 중심적(human-centered)으로 구성하기 위해서, 본질적으로 사람들의 협업 패턴을 찾아본 것이다. 이때에도 마찬가지로 관절을 잇는 그래프 타입으로 사람을 인지하는 모델링을 썼다. 자칫 근태 감시가 되지 않도록, 구성원들을 철저히 비식별화한 것이다.
포스트 코로나 시대라 해도 사람 간 물리적 거리는 영원히 2ｍ일 수 없다. 사람 대 사람으로 뒤엉키는 일 또한 사라질 수 없다. 바이러스는 여전히 우리의 옆에 있고, 그렇기 때문에 우리의 행동 하나하나가 굉장히 예민하고 조심스러운 데이터가 될 것이다. 이를 관찰하는 사람들(연구진이나, 기업 내 인사 담당자 등) 입장에서는 어떻게 하면 개개인의 사생활을 침해하지 않으면서 위험 발생률을 낮출지, 혹은 어떻게 하면 더 나은 ‘세미-언택트’ 일터를 만들 수 있을지 고민해야 할 것이다. 개인을 비식별 해 분석하는 이러한 방법과 시도들은, 요즘 같은 때 특히 돋보이는 배려 중 하나일 것이다.
▶ 소름돋게 잘 맞는 초간단 정치성향테스트
▶ 넌 뉴스를 찾아봐? 난 뉴스가 찾아와!
▶ 당신이 궁금한 코로나, 여기 다 있습니다
ⓒ중앙일보(https://joongang.co.kr), 무단 전재 및 재배포 금지
.png?type=nf190_130)
