MilkGuide
AI로 우유를 알려줄게!
소개글
우유 종류를 먹어보지 않으면 알기 어려운 시각장애인 분들을 위하여, 사진으로 손쉽게 우유 종류를 알려주는 우유 Detecting 앱입니다.
주요 기능
-
우유 찾기
- 우유를 찍기 위한 카메라 기능
- 우유 사진을 분석하는 ImageClassification 모델
-
Setting
- 버전, 앱 소개, 개발자 소개
- 앱스토어 리뷰 남기러 가기
- 뷰에 따른 오디오 안내 기능 on/off (추가예정)
이슈
제 1회 DDA 해커톤 : Milkathon 2021.06.26(토)
1. 프로그램 기획 의도
시각장애인들은 손으로 우유인 것은 확인할 수 있지만, 손에 쥐고 있는 이 우유가 어떤 우유인지 직접 먹어보지 않으면 알기가 어렵다.
2. 해커톤을 통해 얻고자 하는 것
우유 detect를 통해서 차후에 음료수 detecting 어플 구현을 위한 뼈대 잡기
3. 프로그램 계획표
| 순서 | 시간 | 내용 |
|---|---|---|
| 1 | 9시 ~ 12시 | 해커톤 |
| 2 | 12시 ~ 13시 | 점심 |
| 3 | 13시 ~ 18시 | 해커톤 |
| 4 | 15시 ~ 16시 | 중간점검 |
| 5 | 18시 ~ 19시 | 저녁 |
| 6 | 19시 ~ 21시 | 해커톤 |
4. 해커톤에서 만들고자 하는 것
지인 : 우유 종류 분류기 구현
희지 : 우유 detecting iOS 앱 구현
5. 해커톤 전 각자 해야 할 일
지인
- 데이터셋 만들기
- 어떤 네트워크를 사용해서 전이학습 할지 정하기
희지
- 대략적인 ui 프로토타입 제작
6. 해커톤 당일 각자 해야할 일
지인
-
모델 만들기
-
모델 mlmodel로 컨버팅
희지
- AVVideoCapture를 이용하여 카메라 구현
- 촬영한 이미지 mlmodel input으로 넣어 predict
- 모델 ouput 뷰에 띄우기
7. 협업을 위해 사용할 툴
- GitHub
- Notion