딥러닝 영상인식 기술을 이용한 가상/혼합현실 기반 통합 검출 플랫폼 제안 (Proposal of Integrated Detection Platform Based on Virtual/Mixed Reality Using Deep Learning Image Recognition Technology)

서지정보

· 발행기관 : 한국정보통신학회
· 수록지 정보 : 한국정보통신학회논문지 / 27권 / 8호 / 905 ~ 912페이지
· 저자명 : 손은진, 김영원

초록

디스플레이 및 인공지능 컴퓨팅 기술의 발전으로 인해 HMD의 기술 흐름은 VR, AR을 뛰어넘어 MR 헤드셋으로 가고 있다. 본 연구에서는 발전하는 MR 헤드셋의 기술에 앞서 MR 환경에서 객체 검출을 하되 단순히 객체를 검출하는 것이 아니라 실제 객체와 가상 객체를 플랫폼 전환 없이 동시 검출하는 활용방안으로서 딥러닝 영상인식 기술을 이용한 가상/혼합현실 기반 통합 검출 플랫폼을 제안한다. 실 공간을 취득한 후 실 공간에 3D 가상 객체를 띄워 MR 환경에서 실제 객체 기반 데이터로 사전 학습된 검출 가중치를 사용하여 3D 가상 객체와 실제 객체를 검출한다. 제안한 플랫폼은 실제 객체와 가상 객체를 플랫폼 전환 없이 동시에 검출하는 단일 시뮬레이션 콘텐츠 접근 방식에 의해 구동되며, 파일럿 테스트를 통해 3D 가상 객체와 실제 객체 검출 성능을 확인하였다. 제안한 플랫폼은 MR 환경에서 객체 검출을 통해 현실감과 연계 작용을 강화시킴으로써 사용자는 MR 환경에서 산업 현장에서 추가 정보 전달, 협동 작업 및 학습 훈련 등 다양한 분양에서 유용하게 활용할 수 있을 것으로 사료된다.

영어초록

Due to advancements in display technology and artificial intelligence computing, the technology trend of HMD is moving beyond VR and AR to MR headsets. In this study, we propose a unified detection platform based on virtual/mixed reality using deep learning image recognition technology, which allows simultaneous detection of real and virtual objects in the MR environment without the need for platform switching. After capturing real-world space, 3D virtual objects are displayed in the MR environment, and pre-trained detection weights based on real object data are used to detect both 3D virtual and real objects. The proposed platform operates through a single simulation content approach, enabling seamless detection of real and virtual objects. Pilot tests have confirmed the detection performance of 3D virtual and real objects. The proposed platform is expected to enhance realism and interaction in the MR environment, allowing users to benefit from additional information delivery, collaborative work, and training in various industries.

참고자료

· 없음