SAAnnot-C3Pap: 반자동 주석화 방법을 적용한연주 자세의 그라운드 트루스 수집 기법 (SAAnnot-C3Pap: Ground Truth Collection Technique of Playing Posture Using Semi Automatic Annotation Method)

서지정보

· 발행기관 : 한국정보처리학회
· 수록지 정보 : 정보처리학회 논문지 / 11권 / 10호 / 409 ~ 418페이지
· 저자명 : 박소현, 김서연, 박영호

초록

본 논문에서는 연주자 자세의 그라운드 트루스 획득을 위한 반자동 주석 방법인 SAAnnot-C3Pap를 제안한다. 기존 음악 도메인에서 2차원관절 위치에 대한 그라운드 트루스를 획득하기 위하여 2차원 자세 추정 방법인 오픈포즈를 활용하거나 수작업으로 라벨링 하였다. 하지만 기존의오픈포즈와 같은 자동 주석 방법은 빠르지만 부정확한 결과를 보인다는 단점이 있고, 사용자가 직접 주석을 생성하는 수작업 주석화의 경우 많은노동력이 필요하다는 한계점이 있다. 따라서 본 논문에서는 그 둘의 절충 방안인 반자동 주석화 방법인 SAAnnot-C3Pap을 제안한다. 제안하는SAAnnot-C3Pap은 크게 3가지 과정으로 오픈포즈를 사용하여 자세를 추출하고, 추출된 부분 중 오류가 있는 부분을 슈퍼바이즐리를 사용하여수정한 뒤, 오픈포즈와 슈퍼바이즐리의 결과값을 동기화하는 과정을 수행한다. 제안하는 방법을 통하여 오픈포즈에서 발생하는 잘못된 2차원 관절위치 검출 결과를 교정할 수 있었고, 2명 이상의 사람을 검출하는 문제를 해결하였으며, 연주 자세 그라운드 트루스 획득이 가능하였다. 실험에서는반자동 주석 방법인 오픈포즈와 본 논문에서 제안하는 SAAnnot-C3Pap의 결과를 비교·분석한다. 비교 결과, 제안하는 SAAnnot-C3Pap는 오픈포즈로 잘못 수집된 자세 정보를 개선한 결과를 보였다.

영어초록

In this paper, we propose SAAnnot-C3Pap, a semi-automatic annotation method for obtaining ground truth of a player's posture.
In order to obtain ground truth about the two-dimensional joint position in the existing music domain, openpose, a two-dimensionalposture estimation method, was used or manually labeled. However, automatic annotation methods such as the existing openpose havethe disadvantages of showing inaccurate results even though they are fast. Therefore, this paper proposes SAAnnot-C3Pap, asemi-automated annotation method that is a compromise between the two. The proposed approach consists of three main steps: extractingpostures using openpose, correcting the parts with errors among the extracted parts using supervisely, and then analyzing the resultsof openpose and supervisely. Perform the synchronization process. Through the proposed method, it was possible to correct the incorrect2D joint position detection result that occurred in the openpose, solve the problem of detecting two or more people, and obtain theground truth in the playing posture. In the experiment, we compare and analyze the results of the semi-automated annotation methodopenpose and the SAAnnot-C3Pap proposed in this paper. As a result of comparison, the proposed method showed improvement ofposture information incorrectly collected through openpose.

참고자료

· 없음