본문으로 건너뛰기
발 데이터셋 생성

발 데이터셋 생성

합성 데이터로 발 자세 추정을 위한 신경망 학습 비용을 줄입니다

footwearsynthetic-datamachine-learningaugmented-reality
Will Perkins
Will Perkins
2019년 10월 12일

비즈니스 과제

Laan Labs는 최근 증강 현실 애플리케이션을 개발하면서, 사용자에게 사실적인 신발을 표시하기 위해 사람 발의 위치와 방향을 추정해야 했습니다. 발 자세 추정이라는 컴퓨터 비전 문제를 실시간으로 해결하기 위해 최첨단 신경망을 사용했습니다. 신경망은 활용도가 높은 머신러닝 모델이지만, 많은 학습 예제가 필요하다는 아쉬운 특성이 있습니다.

이미지 데이터는 제작 비용이 매우 많이 들 수 있습니다. 정교한 촬영 세션을 진행하고, 배우를 섭외하고, 구하기 어려운 소품을 대여해야 하기 때문입니다. 이미지 데이터 주석 작업은 노동 집약적이며 오류가 발생하기 쉽습니다.

Laan Labs는 스마트폰 사용자가 마주칠 수 있는 실제 환경(다양한 카메라 각도, 조명 조건, 신발, 배경 풍경)을 대표하는 주석 이미지를 10,000장 이상 수집해야 했습니다.


합성 데이터를 활용하면 이미지와 주석을 절차적으로 무수히 다양하게 렌더링할 수 있습니다


접근 방식

Laan Labs는 정밀한 정답 레이블이 달린 고유한 포토리얼리스틱 이미지를 생성하는 소프트웨어를 개발하여 합성 데이터를 활용하는 방식을 택했습니다.

아티스트가 제작한 3D 발 모델과 재구성한 3D 발 모델을 함께 3D 환경의 시드로 사용했습니다. 이미지 주석은 3D 장면에서 직접 계산했습니다. 카메라 각도, 조명, 배경 이미지, 후처리 효과, 발 자세, 신발 같은 장면의 여러 요소를 매개변수화했습니다. 이렇게 매개변수화한 3D 장면에서 이미지와 주석을 클라우드 컴퓨팅으로 절차적으로 무수히 다양하게 렌더링할 수 있습니다.

발 렌더 1발 렌더 2

비즈니스 가치

Laan Labs는 합성 데이터를 활용하여 수천 켤레의 신발을 구하는 일을 생략하고 수많은 촬영 시간을 절약할 수 있었습니다. 사람이 주석을 달 필요가 없어 수백 시간의 작업 시간을 아낄 수 있습니다. 또한 이미지에 올바른 레이블이 달려 있다는 확신이 있으므로 프로젝트 전체에서 주요 오류 요인이 사라집니다.

Laan Labs는 합성 데이터로 이미지 데이터셋을 구축하여 시간과 비용을 절감했습니다.

사용 기술

합성 데이터, 컴퓨터 비전, 사진측량, Unity, Houdini, Python

Laan Labs와 함께하기

컴퓨터 비전 및 AI 개발

개념 증명부터 상용화까지, 기기 내와 클라우드에서 동작하는 맞춤형 컴퓨터 비전 및 머신러닝을 제공합니다.

이 글 다운로드

오프라인에서 읽을 수 있는 마크다운 원본을 받으십시오