카메라 없이 벽 너머를 본다 — MIT 연구팀, 와이파이 신호와 AI로 숨겨진 물체 3D 복원에 성공
MIT 연구팀이 밀리미터파 무선 신호와 생성형 AI를 결합해 벽 뒤에 숨겨진 물체를 3D로 복원하는 기술을 공개했습니다. 기존 대비 정확도 20% 향상, 실내 장면 복원 정밀도는 2배입니다.
집이나 사무실에 있는 와이파이 공유기에서 나오는 것과 비슷한 무선 신호만으로, AI가 벽 뒤에 숨겨진 물체의 모양을 맞히고 방 안 전체 구조를 파악할 수 있게 됐습니다. MIT 연구팀이 3월 19일 발표한 두 편의 논문이 그 방법을 보여줍니다.
카메라는 벽을 통과할 수 없고, 사생활 침해 우려도 큽니다. 하지만 밀리미터파(mmWave)라 불리는 고주파 무선 신호는 벽·상자·포장재를 그대로 통과합니다. 문제는 이 신호가 한 방향으로만 반사되기 때문에 물체의 일부분만 보인다는 점이었습니다. MIT 팀은 생성형 AI를 훈련시켜, 보이지 않는 나머지 부분을 '상상'해서 채우도록 만들었습니다.
Wave-Former — 상자 안의 물건을 맞히는 AI
첫 번째 시스템 Wave-Former는 포장 안에 숨겨진 물체의 3D 형태를 복원합니다. 드릴, 머그컵, 통조림, 과일 등 70여 종의 일상 물건을 테스트한 결과, 기존 최고 기술 대비 리콜(찾아낸 비율)이 54%에서 72%로 향상되었고, 정밀도는 85%를 유지했습니다.
핵심 아이디어는 간단합니다. 무선 신호는 물체 표면의 일부만 반사하지만, AI가 그 부분적인 정보를 보고 나머지를 추론하는 것입니다. 마치 퍼즐 조각 몇 개만 보고 전체 그림을 맞히는 것과 비슷합니다. 연구팀은 기존 컴퓨터 비전 데이터셋에 무선 신호의 물리적 특성을 반영한 합성 데이터를 만들어, 새 데이터를 수년간 모을 필요 없이 AI를 훈련시켰습니다.
RISE — 사람이 지나가기만 해도 방 구조를 파악한다
두 번째 시스템 RISE는 더 야심찬 목표를 가지고 있습니다. 고정된 무선 센서 하나만으로 방 전체의 구조와 가구 위치를 파악합니다.
비결은 '유령 신호(ghost signals)'입니다. 무선 신호가 사람에게 부딪힌 뒤 벽이나 가구에 한 번 더 반사되면서 생기는 2차 반사 신호인데, 사람이 방 안을 돌아다니면 이 유령 신호의 패턴이 계속 바뀝니다. AI는 이 변화를 분석해서 벽의 위치, 가구의 크기와 배치를 역으로 계산해냅니다.
결과는 인상적입니다. 100개 이상의 실내 경로에서 테스트한 결과, 방 구조 복원 오차가 기존 대비 60% 감소(오차 16cm)했고, 물체 탐지에서는 IoU(겹침 비율) 58%를 기록했습니다. 이 분야에서 밀리미터파만으로 달성한 최초의 수치입니다.
카메라 대신 무선 신호를 쓰면 좋은 이유
사생활 보호 — 카메라와 달리 무선 신호는 사람의 얼굴이나 행동을 직접 촬영하지 않습니다. 물체의 윤곽과 위치만 파악하기 때문에 집이나 요양시설에서 어르신 안전 모니터링에 적합합니다.
어둠·연기·장애물 무관 — 카메라나 라이다(LiDAR)와 달리 조명이 없어도, 연기가 자욱해도 작동합니다. 재난 현장이나 어두운 창고에서도 사용할 수 있습니다.
물류 혁신 — 택배 상자를 열지 않고도 안의 내용물이 맞는지 확인할 수 있습니다. 아마존 같은 물류 창고에서 검수 시간을 크게 줄일 수 있는 기술입니다.
연구팀과 향후 전망
이 연구는 MIT 전기공학·컴퓨터과학과 파델 아딥(Fadel Adib) 교수가 이끄는 Signal Kinetics 연구그룹에서 진행했습니다. 아딥 교수는 "우리는 AI를 활용해서 마침내 무선 시각(wireless vision)을 실현했다"고 말했습니다.
두 논문 모두 세계 최고 권위의 컴퓨터 비전 학회인 IEEE CVPR에서 발표될 예정이며, 미국 국립과학재단(NSF), MIT 미디어랩, 아마존이 연구를 지원했습니다. 논문 원문은 arXiv에서 무료로 읽을 수 있습니다: Wave-Former 논문 | RISE 논문
아직 실험실 단계이지만, 밀리미터파 센서는 이미 자율주행차에 탑재되어 있고 최신 스마트폰에도 들어가고 있습니다. 이 기술이 상용화되면, 스마트홈 로봇이 카메라 없이도 집 안 상황을 파악하거나, 물류 로봇이 포장된 상품을 비접촉으로 검수하는 날이 올 수 있습니다.
관련 콘텐츠 — Easy클코로 AI 시작하기 | 무료 학습 가이드 | AI 뉴스 더보기