AI로 3D 사진 만드는 방법
상태바
AI로 3D 사진 만드는 방법
  • 입력 2020-05-26 18:15
  • 댓글 0
이 기사를 공유합니다

페이스북-버지니아공대-대만국립청화대 AI 연구진 개발
가상 게임‧회의‧전자상거래 앱‧메타버스 등 활용 기대
(사진='3D Photography using Context-aware Layered Depth Inpainting' 논문 공동저자 Meng-Li Shih 웹사이트).
(사진='3D Photography using Context-aware Layered Depth Inpainting' 논문 공동저자 Meng-Li Shih 웹사이트).

페이스북과 미국 버지니아공과대학교, 대만 국립청화대학교의 AI 연구진이 페이스북 3D 사진 기술 방식이나 기존 다른 방식보다 더 뛰어난 새로운 3D 사진 생성 방법을 개발했다고 벤처비트가 25일(현지시간) 전했다.

페이스북 3D 사진 기능은 트루뎁스 카메라를 탑재한 아이폰텐과 같은 듀얼 카메라 스마트폰 전용으로 지난 2018년 10월 출시했다. 트루뎁스 카메라는 수만 개의 보이지 않는 점을 투영, 정확한 얼굴 데이터를 수집해 얼굴 맵을 3D로 구현할 수 있다.

연구진은 아이폰으로 찍은 다양한 사진들을 이용해 다른 3D 기술방법에서 나타나는 블러(흐릿한 형체)와 불연속성 문제를 어떻게 처리하는지를 소개했다.

이 새로운 학습 기반 방법은 아이폰 텐으로 찍은 사진 같은 RGB-D 이미지에서 3D 사진을 생성할 수 있다. 또 사전 훈련된 깊이 추정 모델을 활용해 2D 사진과도 연동 가능하다. 이 3D 모델의 성능은 'RealEstate10K'라는 카메라 데이터세트의 무작위 샘플 이미지를 사용해 평가됐다.

최근 몇 개월 동안 페이스북과 마이크로소프트, 엔비디아는 2D 이미지에서 3D 개체를 생성하는 기술을 출시해왔으나, 이 새로운 방법은 주로 인페인팅 기술에 기반하고 있다. 원래 인페인팅은 영상에서 훼손된 영역을 제거하고 제거한 영역을 주변 영역과 유사하게 채워 넣어 자연스럽게 만드는 영상 복원의 기법 가운데 하나다. 인페이팅 기법을 통해 AI가 사진에서 누락된 픽셀을 예측한다.

이 방법은 향후 페이스북 3D 사진 기능 개선에 기여할 전망이다. 더 나아가 이 같은 고성능 3D 사진 생성 방법은 가상 게임과 회의, 전자상거래 앱 또는 메타버스(3차원 가상세계)와 같은 3D 디지털 그래픽 환경에서 실제처럼 실물 그대로의 생생함을 전달할 수 있을 것으로 기대된다.

최점단 3D 사진 접근법에 관한 자세한 내용은 논문 초고 사이트 아카이브(arXiv)에 게재된 논문에서 확인 가능하다. 해당 논문은 다음달 개최 예정인 CVPR(IEEE Conference on Computer Vision and Pattern Recognition)에서 공표된다. CVPR는 기술 전문 단체인 IEEE와 CVF가 1983년부터 공동 주최하는 컨퍼런스로 세계적인 연구기관이 참석하는 가운데 매년 새로운 컴퓨터 비전과 딥러닝 등 AI 기술 연구 성과를 공유하는 자리다.

 

[관련 기사] AI 접목 가장 빠른 분야는 '인적자원관리'...MIT테크리뷰 '글로벌 AI 어젠다'

[관련 기사] 텐센트, 첨단기술 인프라에 5년간 5000억 위안 투자

기자 프로필

댓글삭제
삭제한 댓글은 다시 복구할 수 없습니다.
그래도 삭제하시겠습니까?
댓글 0
댓글쓰기
계정을 선택하시면 로그인·계정인증을 통해
댓글을 남기실 수 있습니다.
주요기사
유용한 리스티클
  • AI를 활용한 10가지 좋은 예
  • MIT 테크리뷰가 선정한 젊은 AI혁신가 7인
  • 포스트코로나 이끌 AI 스타트업 'TOP 10'
  • 주목할 중국·일본 로봇 스타트업 '베스트 10'
  • 포브스 선정 유망 AI기업 베스트 50
  • 코로나19와 싸우는 테크기업 '베스트 15'