kimgooq / LoopStation-with-FaceDrum

Play drum sounds as your face moves and control the loop-station with your hands

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

LoopStation-with-FaceDrum

22학년 1학기 증강현실 팀프로젝트


TikTok 필터에서 아이디어를 착안, 얼굴 움직임을 활용하여 드럼 사운드를 플레이하고 손동작으로 루프스테이션 기능을 제어할 수 있도록 구현

개발 스택

구현 내용

  • Face Mesh에 붙어 움직이는 AR 가이드라인 제공
  • Face Mesh의 Orientation에 따라 다양한 사운드 재생
  • Hand 모델을 활용하여 Loop Station 제어

예시 이미지

  • World View

  • Play View

About

Play drum sounds as your face moves and control the loop-station with your hands


Languages

Language:JavaScript 93.2%Language:HTML 5.7%Language:CSS 1.0%