카메라 버튼을 누르면 카메라가 켜지고, 갯수를 세어주고, 목표 갯수가 세어지면 카메라가 꺼지는 식으로 한다. 녹화된 동영상은 저장된다.(landmark가 찍힌 사진)
초록색 부분은 정확히 기억안납니다.
갯수 세는 방식에대해 제가(재준) 카톡 사진을 업로드햇습니다.
이는 나중에 시간남으면 하면 좋을거 같습니다.
엣지 디바이스에서 개수측정, 리얼타임 피드백이 목표
민구님 - 엣지 디바이스에선 정확도가 떨어지니 영상 자체를 백엔드로 보내서 랜드마크를 찾고, 연산을 하는게 좋다.
재준 - 엣지 디바이스에서 tflite(mediapipe)를 이용하여 관절값을 찾는게, 컴퓨터에서의 mediapipe를 이용하여 관절 값을 찾는것과 차이가 있는지 확인해볼 필요가 있다. 엣지디바이스의 카메라 화질을 최소(640x360)으로 낮추고 landmark값을 찾으면 그에따른 즉각적인 피드백을 연산하는데는 크게 문제가 없어보인다.
태현 - mediapipe와 tflite에서 제공하는 landmark는 33가지로 동일하다. 그러므로 사실상 동일한 api로 봐도 된다.
재준 - mp.solutions.pose.Pose(model_complexity=?)
이 값이 0,1,2가 있는데 이거에 따라 관절 포인트 점찍는 거에 정확도가 많이 달라진다.
ml kit로 이용하여 github에 올라온 파일의 model_complexity값이 0인지 확인해볼 필요가있다.