PP's RESEARCH

AR 글라스와 현실공간의 스케일을 맞추는 작업을 하고 있었다.  시도한 방법으로는 1. 방 전체 인식해서 동일한 크기의 블럭 배치     - 어찌된 일인지 업데이트 이후 plane extraction 이 작동하지 않아서 실패 2. 좌표처럼 오브젝트 만들어놓고 선택해서 manually scaling     - manual 한 점이 마음에 들지 않아 포기 그리고 Dibash 씨가 저번에 스케일이 같다고 한게 생각나서 그냥 만들어봤는데 실제로도 스케일이 동일했다.  Unity에서 Transformation이 스케일을 조정해 0.2, 1, 0.4 크기의 블럭을 만들면 그게 현실에서 20cm, 40cm의 블럭과 맞는다.  왜 삽질을 하고 있었던 걸까 문제를 재정의할 필요가 있을 것 같다. 

  어제 구현한 Grid 의 블럭을 선택하는 프로그램을 구현하였다. 컨트롤러로 오브젝트 고르는 게 생각보다 시간이 많이 들어서,  아직 선택한 블럭의 색 바뀌는 것만 완성되었다.  plane extraction만 잘 되면 virtual twin 모델을 중심으로 불러오는 것이 더 간단하고 용이할 것 같다.  +. 시뮬레이터에서는 원활히 실행되었지만 기기에서는 잘 작동하지 않는다. 공간이 커서 그런 것일까 카메라 기준으로 그리드를 짜서 선택하는 것이 나을 것 같다.  으아아아아아

  바닥면을 인식해서 그리드가 될 사각형을 배치하는 프로그램을 작성하였다.  plane extraction 예제를 참고했는데, 원래 이 예제는 센서를 이용해 모든 평면을 인식해 Virtual twin을 만들어주는 것이지만 바닥면만 인식하도록 변경해서 사용하였다.  작성한 코드와 완성 사진은 다음과 같다.  내일은 이 grid의 오브젝트 몇개를 선택하고 그 위치에 맞게 virtual twin을 피팅하는 것을 구현할 것이다.  +. 사실 plane extraction이 현실에서도 잘 작동한다면 그냥 모델을 불러오기만 해도 될 것 같다. 

 Working Hour : 9 -  Works to do 1. AI Education 관련 Related Research 찾기 2. Abstract 2개 작성(순서를 다르게 해서) 3. AR AI Education 관련 Related Research 찾기 4. Sandbox 관련 논문 찾기

Working Hour : 9- Works to Do       1. MR AI Education Journal          - Related Research 찾기 https://docs.google.com/document/d/1PRFeMdwe9K18iV8AJ1OgoRtwAlRhlkA7U2dHdUBj06Y/edit#               1) AI Education 관련               2) AR Education 관련               3) AR AI Education 관련          -  Background 작성     2. Digital Creativity 관련 Research 찾아서 읽어보기                   - Sandbox 프로젝트 조사

 Working Hour 17:00~23:00 Works to do 1. 파일 합치는 작업 완료하기 2. Scene 전환 기능 추가  3. Text 추가

 Working Hour 9:00~ 12:00 / 15:00~18:00 Works to do 1. 파일 4개 합치기 2. 버튼 누르면 다음 모델로 전환되도록 변환하기

Working Hour 9:00~ 12:00 / 15:00~ 18:00 Works to do 1. 파일 정리 2. 발표 준비

  Working Hour : 9 - 12 / 14 - 18 Works to do 1. 파일 정리  2. 대회의실 가서 테스트하기

 Working Hour : 10 - 13 / 17-18 / 21-22 Works to do  1. Fix CNN MagicLeap file      문제가 생긴 원인 : 프로젝트 파일을 생성한 후에 파일 위치를 구글 드라이브 폴더(바탕화면에 있음)으로 옮겼는데 구글 드라이브에 있는 파일은 import할 때 제대로 안 불러와진다고 한다. 그래서 각종 소스들을 찾을 수가 없다는 에러 메세지가 가득 떴었다.      새로운 파일을 C드라이브 내에 만들어서 기존의 자료를 옮겼더니 해결되었다. 해결은 간단했는데 이유를 찾는 데에 너무 많은 시간이 걸렸다,, 2. Re-Scale and combine all models

Working hour : 10:30-18:00 Works to do  1. single layer perceptron 모델 제작 및 마무리      10: 42 - 12 2. CNN 모델 magic leap로 변환     12: 30 - 18 => 이상한 오류가 발생. package assign에 거듭 실패하는 중이다. 3. Scaling 다시+ 모델들을 하나로 합칠 수 있으면 좋을 것 같은데.  4. 새로운 모델 제작 _ R_CNN 

 Working hour : 10- 13 / 15-16 Works to do  1. Make powerpoint introducing Neural Network Visualization Project 2. Check CNN Model

 Working hour : 9-13 Works to do 1. convert to magic leap from unity 2. make powerpoint slides introducing Neural networks and our model *Completed Code

 Working hour : 19 ~ 24  Works to do     1. 섹션 3개로 수정     2. 깜박이는 이펙트 추가     3. answer블럭 연결

Working hour : 15:15- 16:30 / 19:00-23:30 Works to do 1. SNN Visualization model  2. Arrows on window     a. check the plane finding function can recognize the window 1. SNN visualization model section을 구분해서 node 가 선택되도록 제작. line이 한번에 보여 모델이 초라해 보임. 깜박깜박 하는 이펙트가 들어가도록 수정할 것. works for tommorrow 섹션 3*3으로 구분하기 입력 node 개수에 따라 출력여부 결정하기 이펙트 추가 answerblock 구현