개발실

구글 클라우드 스피치 api이용 이전의 스타트 / 엔드를 지정하여 하는것이 아닌 대기모드로 있다가 볼륨이 일정이상 들어오면 음성인식 시작/ 볼륨이 안 들어올시 음성인식 종료로 들어가도록 개선. 큐브 라는 단어 인식후 큐브 색깔 파란색으로 변경 음성 이라는 단어 인식후 큐브색깔 빨간색으로 변경 string의 containkey를 이용해서 문맥상에서 단어 인식 구현.

UNITY3D 2020. 5. 4. 22:39

키넥트와 유니티 연동 및 모션캡쳐. 캡쳐한 모션을 캐릭터에 적용 일단 오늘은 여기까지. 테스트 해봐야 할 것이 많다. 배경이 심플한 곳에서 캡쳐를 진행해봐야겠다. 은근히 각 조인트들이 튀는게 보이네. 퇴근하니까 치킨먹고싶다.

AR||ComputerView 2020. 4. 8. 22:57

회사에 있던 키넥트 v2 Window를 연구용으로 집으로 가져왔다. 일단은 키넥트를 연결해서 마소에서 배포하는 유니티 패키지로 프로젝트를 생성하고 제대로 동작을 하는지 테스트 하였다. 일단은 오늘 한 것까지만 영상으로.. 피곤하다. 틈틈히 연구해야지.

AR||ComputerView 2020. 4. 7. 23:13

지난번에 이어 XR Toolkit의 기본 기능을 하나씩 살펴보려 한다. 지난번 프로젝트에 추가로 작업을 하면 되니 프로젝트 깃헙을 받지 않은 분은 https://labotary.tistory.com/15 Unity URP / XR toolKit을 이용한 VR환경 세팅 환경 정의 Unity Version : Unity 2019.3.6f1 VR : Vive VR멀티 프로젝트를 하면서 캐릭터 이동을 해결하려다 보니 유니티에서 XR ToolKit을 내놓았다는걸 떠올리고 지금까지 SteamVR input과 VIveInputManager랑.. labotary.tistory.com 여기에서 다운받으면 된다. 프로젝트에 인터렉트를 할 큐브를 하나 생성해주자. 그리고 큐브에 XR Grab Interactable 스크립트..

UNITY3D 2020. 4. 5. 23:43

환경 정의 Unity Version : Unity 2019.3.6f1 VR : Vive VR멀티 프로젝트를 하면서 캐릭터 이동을 해결하려다 보니 유니티에서 XR ToolKit을 내놓았다는걸 떠올리고 지금까지 SteamVR input과 VIveInputManager랑은 뭐가 다른지 확인해보고자 서칭을 하였다. 생각보다 간편하고 좋더라. 정보들을 찾아보고 정리해보니 어차피 URP도 적응해야 하고 VR도 새로운걸로 버전업 할겸 공부하면서 조금씩 정리해보려한다. 일단 한글정보가 거의 없다시피 하더라... XR Toolkit을 이용하려면 유니티 2019.3버전 이상을 사용해야 한다. 그 아래 버전에서도 호환이 된다고는 레딧같은곳에 간간히 보이던데, 속편히 2019.3버전 이상으로 올려주자. URP 프로젝트를 만들..

UNITY3D 2020. 4. 2. 00:19

이번 게시물에서는 ShapeKey를 어떻게 mmd 모델에 적용하는지에 대해서 다뤄보겠다. 첫번째 글과 같이 준비물을 적어두도록 하겠다. 1. Unity 3.13f1버전 2. MMD4Mecanim ------ShapeKey를 넣기 위한 준비물은 이하----- 3. Blender 2.79버전 4. CATS애드온(블랜더) 5. Vrchat-Dance-Pad 6. CubeShader 블랜더는 2.81버전이 현재 글 작성일 기준으로 공식홈페이지에서 배포중이지만, 버전이 올라가면서 기능 호환성에 대한 신뢰성이 담보되지 않기에, 2.79버전을 설치하여 사용하면 되겠다. CATS 애드온 다운과 설치에 대해서는 https://github.com/michaeldegroot/cats-blender-plugin 이 깃헙 사이..

UNITY3D 2019. 12. 8. 15:28

Unity에서 MMD 모델 다루기 어디까지 작성을 할 수 있게될지 모르겠지만 최종적으로는 MMD캐릭터로 포커스 온 유 풍의 VR 프로젝트를 만드는것을 목표로 작성을 하게 될 것 같다. 일단은 PC VR로 시작해서 모바일 대응...이라고 해봤자 이제 모바일 VR은 구글이 데이드림을 드랍하면서 기어VR밖에 남지 않았지만, 일단은 데이드림 기기도 있으니 데이드림 대응까지 프로젝트를 할까 ...싶은데 음성인식은 윈도우 API를 이용하여 구현할 생각이다. 모바일 버전은 Google Speech Api를 이용하면 될 거라 생각한다. 목표로는 정말 스텝바이 스텝으로 유니티에 대한 설명을 겸하면서 글을 작성하려 한다. 각설하고 MMD에 대해서는 여기까지 만약 검색해서 찾은 분들이라면 굳이 설명할 필요가 없으니.. 일단..

UNITY3D 2019. 12. 8. 11:16

Starts on 4월 29일 시작은 19' 4월 27일 WIS에서 본 3D 이미지 랜더 기술로부터 시작. 자세한 기술이 어떻게 되어있는지는 잘 모르겠지만, 바로 옆에서는 립모션을 이용한 3D 실시간 화면 처리도 전시되어 있었다. 계속 눈에 밟혀서 개인프로젝트로 틈틈히 홀로그램을 구현해보았다. 19' 4월 29일 촬영. 자동으로 애니메이션을 돌리고 그저 구현만 해놓은 상태. 무언가 심심했다. 음성을 인식시켜 보자. 키워드를 통해 최대한 자연어도 인식할 수 있도록 구현중. 19' 5월 5일 촬영 인터넷 문제로 동영상 업로드 문제가 있으니 차후에 업로드 다시 하도록 하자. 차후 구현 목표 버튼 클릭이 아닌 음성 대기상태 구현 ,TTS, 무언가 더 스테이블한 홀로그램 뷰어, 다양한 애니메이션 등등

UNITY3D 2019. 5. 7. 23:47