7P by xguru 2020-05-05 | favorite | 댓글 1개

AR과 ML을 이용해서 폰에서 찍은 물체 사진을, 배경제거한후 카메라가 보고 있는 컴퓨터 화면의 문서에 즉시 삽입하는 프로토타입
전체 소스코드는 깃헙에 공개
모바일 앱: React Native
로컬 서버: 모바일앱과 포토샵간의 인터페이스. OpenCV + 파이썬
ㅤ→ Screenpoint 로 스마트폰 카메라가 보는 모니터 위치를 파악
ㅤ→ 현재 물체 인식은 별도 BASNet 서버 실행해서 연결. 앱내에서 TensorFlow Lite 의 DeepLab을 이용하는 것도 가능할 듯

스마트폰의 AR과 ML성능이 점점 개선 되고 있으니, 이런 인터페이스는 많아 질거 같네요.
GitHub : https://github.com/cyrildiagne/ar-cutpaste