일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | |||||
3 | 4 | 5 | 6 | 7 | 8 | 9 |
10 | 11 | 12 | 13 | 14 | 15 | 16 |
17 | 18 | 19 | 20 | 21 | 22 | 23 |
24 | 25 | 26 | 27 | 28 | 29 | 30 |
- 딥러닝
- JSX
- AR
- redux
- nlp
- 프로그래머스
- TIL
- 카카오 블라인드 채용
- 코딩테스트
- 딥러닝의정석
- lower_bound
- 해커톤 후기
- speech to text
- NLU
- 유니티 음성인식
- Watson IBM
- 생활코딩
- Watson Speech to Text
- 리액트
- 유니티 stt
- 백준
- 합성곱 신경망
- 리액트를 다루는 기술
- javascript
- git lfs
- Unity
- upper_bound
- 졸업프로젝트
- 프로젝트 회고
- react
- Today
- Total
ISFP의 느리게 굴러가는 개발 블로그
[졸업프로젝트] AR기반 유기견 입양 시뮬레이션 어플리케이션 개발 본문
현재 졸업프로젝트에서 AR을 사용하여 사람들이 강아지를 입양하기 전에 강아지들의 행동에 대해 미리 파악한 다음에 입양을 할 수 있도록 하게끔 입양 시뮬레이션 어플을 개발하고 있다. 학교에서 AR/VR을 다뤄본적도 없고, Unity도 처음 다루는 툴이라 약간 부딛쳐가면서 개발을 진행중이다.
이 어플리케이션이 왜 필요하다고 생각되었냐면, 사람들이 강아지들을 파양하는 이유가 '이렇게 많이 짖는 줄 몰라서', '배변 교육이 되지 않아서' 등등의 강아지의 행동에 대해 제대로 파악하지도 않고 입양을 했기 때문이다. 따라서 우리 어플리케이션에서는 미리 강아지의 행동양식에 대해 사용자가 알고, 그 행동에 맞춰 사용자가 어떤식으로 해야할지 알려줌으로써 1) 파양률 감소 2) 강아지 교육에 도움이 됨을 기대점으로 보고 있다.
현재까지는 아래와 같이 프로토타입을 만들었고, 기술 검증과 실제 유니티에서 UI를 구성하는 작업을 하고 있다.
기말 발표까지 각자 할일을 분담했는데, 내가 맡은 것은 Unity에서 두번째 화면을 구현하는 일이었다. 이에 맞춰 progress bar과 button을 만들어놨다. 사실 쉽지 않았다.. 처음에는 sprite를 적용하는 방법도 몰라서 도대체 버튼 모양을 어떻게 바꿔야하지? 이러고 있었다.
progress bar은 사용자가 해당 훈련을 몇 프로 진행했는지 보여줄 것이다. 이후에 progress bar 옆에 몇 % 수행했는지도 숫자로 나타낼 예정이다.
버튼은 미리 위에서 adobe xd로 만들어놨던 프로토타입의 사진을 저장한 뒤 Unity에서 image sprite로 불러온 뒤, 버튼을 추가하고 sprite를 추가해주었다. 버튼을 클릭하면 training page로 넘어가게 된다.
또한, 필요한 기술중에 평평한 바닥을 인식했을 때 강아지가 나오게끔 하는 기술이 있다. 이 기술을 적용하는 방법을 찾아 직접 실습을 해본 영상이다.
가장 먼저 해야할 것은 뷰포리아 엔진 다운로드이다.
우선 새로운 Unity Project에 Vuforia Engine을 추가한다. 그리고 원래 있던 기본 카메라를 삭제한 뒤 GameEngine->Vuforia Engine->Ar Camera와 Ground Plane을 추가한다.
그리고 Ground Plane 자식으로 Plane Finder을 추가한 뒤 아래와 같이 inspector의 Anchor Stage에 Ground Plane Stage로 설정한다.
그리고 캡슐을 추가하고 빌드한 뒤 런해보면 핸드폰에서 다음과 같은 화면이 나온다. 직접 해본 결과 평평한 바닥을 인식하고 클릭을 하면 캡슐이 생성되고 벽을 인식하면 생성되지 않는다. 좀 더 보완을 해야할 점은 강아지가 1마리만 나와야 하니까 그걸 조절해야 한다는 점이다.
지금까지 진행된 것은 평평한 바닥을 인식하는 것과, 다른 팀원이 손을 쥐었다 폈을 때 인식하는 것이다. 방학동안에 진행해야하는 점은 모든 ui를 완성시키고 손바닥 인식률을 높이는 것이다. 모든게 처음인 프로젝트라 엄청나게 부담이 되지만 잘 끝날 것이라고 믿는다!
'학교 공부 > 졸업프로젝트' 카테고리의 다른 글
[Unity] 유니티에서 IBM Watson Speech to Text API 사용해서 음성 인식 기능 구현하기 (1) | 2021.03.01 |
---|---|
[Unity] Request error (error): UnityEditor.AsyncHTTPClient:Done(State, Int32) 해결 (0) | 2020.11.30 |