개발실

openCV & Unity3D with UDP 통신

주먹을 쥐면 UDP 통신(포트)를 통해 신호를 주고, 이를 유니티 UDP클라이언트에서 신호로 받아들여 캐릭터의 점프를 제어한다. 아래 사이트의 튜토리얼을 따라 만들었다. https://www.raywenderlich.com/5475-introduction-to-using-opencv-with-unity Introduction to Using OpenCV With Unity Introduction If you’ve been working with Unity for a while, you must have realized how powerful the game engine is. From making simple 2D and 3D mobile games, to full-fledged virtual reali..

AR||ComputerView 2020. 5. 20. 21:06

anaconda 에서 opencv 설치시 에러 모음(5월 20일)

설치하면서 에러나는걸 일단 정리 conda install -c menpo opencv3 으로 했을때 위와 같은 메세지가 나오며 설치가 안되는 경우. 주된 에러 메세지는 Solving environment: failed with initial frozen solve. Retrying with flexible solve.’ 가 뜬다. https://medium.com/@jiradett/fix-solving-environment-failed-with-initial-frozen-solve-retrying-with-flexible-solve-1c12d4b67c2d Fix ‘Solving environment: failed with initial frozen solve. Retrying with flexible s..

AR||ComputerView 2020. 5. 20. 11:13

타코트론2 및 음성합성(TTS)

https://medium.com/wasd/%EA%B3%A0%EB%93%B1%ED%95%99%EC%83%9D-%EC%8B%9C%EC%A0%90%EC%9C%BC%EB%A1%9C-%EB%85%BC%EB%AC%B8%EC%9D%84-%EC%9D%BD%EC%96%B4%EB%B3%B4%EC%9E%90-e6953caf4bf8 고등학생이 해석한 Tacotron2 Tacotron2 medium.com https://somjang.tistory.com/entry/%EC%9D%8C%EC%84%B1%ED%95%A9%EC%84%B1-%ED%94%84%EB%A1%9C%EC%A0%9D%ED%8A%B8-%EB%8D%B0%EC%9D%B4%ED%84%B0-%EC%A0%84%EC%B2%98%EB%A6%AC 음성합성 프로젝트 도전! - 0..

기타 2020. 5. 19. 17:29

디지털 사이니지 고찰 및 아이디어 구현.

디지털 사이니지Digital Signage란 공공장소나 상업 공간에서 문자・영상 등 다양한 정보를 디스플레이 화면에 보여주는 서비스를 뜻한다. 사업화는 되지 않았지만, 일전에 전광판에 무언가를 띄우고 인터렉션을 하는 형식의 프로젝트가 물망에 올라와있었다. 개발해야 하는 포션은 VR분야긴 했었는데, 그때 나왔던 것중 VR 외에 화면과의 인터렉션을 하는 것 즉 사용자를 인식하고 화면이 그에 반응하는 것도 일단 가능한지에 대한 범주의 이야기가 나왔었는데 이번 주말에 일차적으로 OpenCV를 통해 구현을 해보았다. 얼굴을 인식한뒤,카메라를 인식된 얼굴을 팔로우하게 만들어주었다. (시선을 따라가야했기에 프로젝션 메트릭스는 인버스를 해주어야 했다) 사실 VR/AR시장이 디지털사이니지와 거리가 멀다고 생각이 크게 안..

UNITY3D 2020. 5. 17. 19:17

재미있어 보이는거

https://www.youtube.com/watch?v=tWb82Sdm0OM 5년전 영상이기는 한데.. 립모션이 보이는걸 보니 구현이 가능할 것 같다. 집에서 놀고있는 립모션이 있으니 천천히 프로토타입 만들어봐야지. 대충 구상으로는 라떼판다에 24인치 모니터 그리고 피라미드(아크릴) , 지지대 정도면 될거 같은데 예산을 50만원 정도로 놓고 만들면 될거 같긴 하다. 두어달 용돈 모아야겠네.

이야기 2020. 5. 17. 18:41

YOLOv4: Optimal Speed and Accuracy of Object Detection

Yolov4에 대한 논문. v3도 꽤 빠르고 정확도 높았었는데, v4는 어느정도인지 테스트를 해봐야겠다. https://arxiv.org/abs/2004.10934 YOLOv4: Optimal Speed and Accuracy of Object Detection There are a huge number of features which are said to improve Convolutional Neural Network (CNN) accuracy. Practical testing of combinations of such features on large datasets, and theoretical justification of the result, is required. Some features op..

AR||ComputerView 2020. 5. 12. 14:02

이번 연휴동안 구현해본것

음성인식 개선. XR toolkit base FPS ...fps라고 하긴 뭐하지만 일단 인터렉션? XR toolkit관련은 유투브에 영문본으로는 정보가 조금 있어서 이걸 좀 더 연구하고 완벽히 내꺼로 만들고나서 추가적으로 강좌글 파서 올리도록 해야겠다. 바라쿠다 모션인식 조금 개선 사실 ARCore 단어장도 일단은 조금 해봤는데 분명히 화면상에서는 여러개의 이미지 인식이 되는걸 확인했는데 파라메터 상에서는 하나만 인식되는걸로 나오는걸 해결하기만 하면 어떻게든 계획했던대로 구현이 가능할 거 같다. 정 안되면 다른 로직으로 구현을 할 수도 있겠는데(생각해놓은것은 있는데...야매같아서) 일단 지금 문제점에 대해서 해결을 더 도전해보고 안되면 다른 방법으로라도 일차 구현해봐야겠다. 그리고 유니티 2019이상 버..

이야기 2020. 5. 5. 22:31

모션인식

본 트랜스를 조금 건드려봤다. 깔끔하게 나오긴 하는데.. 더 연구해봐야지. 차라리 파이썬을 배워서 오픈포즈를 처음부터 구현해보는게 더 낫지 싶기도 하다. 안무영상은 여기 https://www.youtube.com/watch?v=wWA3ICLkSD4

AR||ComputerView 2020. 5. 5. 22:26