[AI➡️Unity] Unity,AI 업무 분담 관련 요청 #4

yechan-9208 · 2023-10-23T04:20:58Z

yechan-9208
Oct 23, 2023
Maintainer

기타

표정 분류에 따라 애니메이션 적용 하는 Unity 업무는 저희 AI팀에서 맡는게 원활한 진행이 될거 같아 요청드립니다.

현재 (2023-10-23) AI팀은 Mediapipe로 표정 분류 데이터 라벨링 진행중입니다.
표정 분류는 [ mediapipe 정보전달 ] 7p에있습니다.
또한 지금까지 Mediapipe로 행동 분류를 정의한 내용은 [공유 폴더] - [ 문서 ] - [ mediapipe 정보전달 ] 안에 있습니다.

아바타 표정은 실시간으로 자연스럽게 보여지는게 중요하다고 생각합니다.
표정 인식을 할 때 빠르면 0.1초 만에 값이 변경이 되어 캐릭터의 얼굴이 변해야 하는데 저희가 데모를 만들어본 결과 어색한 부분이 있다고 판단 되었습니다.
->
자연스러운 결과를 내기 위해 애니메이션을 통해 표정 변화를 할 수 있다는 것을 알게 되었습니다.
저희가 설정한 라벨링과 표정변환을 맞추기 위해 실시간으로 수정해야 된다고 판단됩니다.

부자연스러운 부분은 Discord - AI 채팅 채널에 올렸습니다.

code