보안 카메라가 비디오를 캡처할 뿐만 아니라 무슨 일이 일어나고 있는지 이해하여 일상적인 활동과 잠재적으로 위험한 행동을 실시간으로 구별할 수 있다면 어떨까요?이것이 바로 버지니아 대학교 공학 및 응용과학 대학의 연구원들이 전례 없는 정밀도와 지능으로 비디오 장면에서 사람의 행동을 감지할 수 있는 AI 기반 지능형 비디오 분석기라는 최신 혁신을 통해 만들어가고 있는 미래입니다.

연구논문은출판됨일지에패턴 분석 및 기계 지능에 관한 IEEE 거래.

SMAST(Semantic and Motion-Aware Spatiotemporal Transformer Network)라고 불리는 이 시스템은 다음과 같은 광범위한 사회적 혜택을 약속합니다.감시 시스템그리고 개선공공 안전의료 분야에서 더욱 발전된 동작 추적을 가능하게 하고 자율 차량이 복잡한 환경을 탐색하는 방법을 개선합니다.

"이 AI 기술은 가장 까다로운 환경에서 실시간 동작 감지를 위한 문을 열어줍니다."라고 전기 및 컴퓨터 공학과 교수이자 학과장인 Scott T. Acton과 해당 프로젝트의 수석 연구원이 말했습니다."이것은 사고를 예방하고 진단을 개선하며 심지어 생명을 구하는 데 도움이 될 수 있는 일종의 발전입니다."

복잡한 영상 분석을 위한 AI 기반 혁신

그렇다면 어떻게 작동하나요?SMAST의 핵심은 인공 지능으로 구동됩니다.이 시스템은 복잡한 인간 행동을 감지하고 이해하기 위해 두 가지 주요 구성 요소를 사용합니다.첫 번째는 다중 기능 선택적 주의 모델로, AI가 불필요한 세부 사항을 무시하면서 사람이나 사물과 같은 장면의 가장 중요한 부분에 집중할 수 있도록 도와줍니다.이를 통해 시스템은 단순히 팔을 움직이는 대신 공을 던지는 사람을 인식하는 등 무슨 일이 일어나고 있는지 더 정확하게 식별할 수 있습니다.

두 번째 핵심 기능은 모션 인식 2D 위치 인코딩 알고리즘으로, AI가 시간에 따라 사물이 어떻게 움직이는지 추적하는 데 도움이 됩니다.사람들이 끊임없이 위치를 바꾸는 동영상을 시청한다고 상상해 보세요. 이 도구는 AI가 이러한 움직임을 기억하고 서로 어떻게 관련되어 있는지 이해하는 데 도움이 됩니다.이러한 기능을 통합함으로써 SMAST는 실시간으로 복잡한 동작을 정확하게 인식할 수 있어 감시,건강 관리진단이나 자율주행.

SMAST는 기계가 인간의 행동을 감지하고 해석하는 방법을 재정의합니다.현재 시스템은 혼란스럽고 편집되지 않은 연속적인 문제로 어려움을 겪고 있습니다.비디오 영상, 종종 이벤트의 맥락이 누락됩니다.그러나 SMAST의 혁신적인 디자인을 통해 데이터로부터 학습하고 적응할 수 있는 AI 구성 요소를 기반으로 사람과 사물 간의 역동적인 관계를 놀라운 정확도로 포착할 수 있습니다.

동작 감지 기술의 새로운 표준 설정

이러한 기술적 도약은 AI 시스템이 거리를 건너는 주자들, 정확한 절차를 수행하는 의사, 심지어 혼잡한 공간에서의 보안 위협과 같은 행동을 식별할 수 있음을 의미합니다.SMAST는 이미 AVA, UCF101-24 및 EPIC-Kitchens를 포함한 주요 학술 벤치마크에서 최상위 솔루션을 능가하여 정확성과 효율성에 대한 새로운 표준을 설정했습니다.

"그만큼사회적 영향이 프로젝트에 참여한 Acton 연구실의 박사후 연구원인 Matthew Korban은 "우리는 이 AI 기술이 어떻게 산업을 변화시켜 비디오 기반 시스템을 더욱 지능적이고 실시간 이해가 가능하게 만들 수 있을지 기대된다"고 말했습니다.."