2011-03-03 1 views
2

안녕하세요 모두
저는 Matlab에서 프로젝트를하고 있습니다. 이를 위해 나는 주어진 얼굴 이미지에서 입술 영역을 추출 할 입술 추출 알고리즘을 사용할 것입니다. 그 때문에 나는 립 영역을 얻을 수있는 색상 기반 세분화를 사용했습니다. 이것은 입술을 나에게 준다. 그러나 나는 입술 매개 변수를 얻지 못하고있다. 따라서 나는 입술 동기화를 위해 표준 입술을 사용해야 만합니다. 나는 스케치가 가질 수있는 입술의 유형에 관계없이 동일한 입술을 사용해야 할 것입니다. 이 기술은 나에게 적절하고 정확한 결과를주지 않을 것입니다.
내가 물어보고 싶은 것은 "음운에 따라 각 스케마의 동일한 입술을 사용하고 각 비주얼 (가장 작은 시각적 요소)에 대해 동일한 입술을 적절히 수정할 수있는 알고리즘이나 메서드가 있습니까"
감사합니다 당신 모두 사전에입술 영역 및 매개 변수를 립 싱크에 사용할 수 있도록 matlab에서 얼굴에서 추출 할 수 있습니다.

+0

"... 음소에 따라 각각의 모든 비주얼 (가장 작은 시각적 요소)에 대해 동일한 입술을 수정하십시오."방금 내 마음을 부 풀 렸습니다. 당신은 어떤 소리가 형성되고 있는지에 입술을 맞추려고합니까? – dfb

+0

실제로 예, 나는 그것이 할 수있는 어떤 방법이 있는지보기 위해 노력 중입니다. 애니메이션 영화에서 수행되는 것과 비슷합니다. 각 음향의 음소가 해당 립 동작으로 매핑됩니다. – jack1689

답변

1

나는이 주제에 대한 나의 석사 학위 논문을 썼다. 나는 액티브 셰이프 모델을 사용하여 매개 변수를 줄이기 위해 입술의 정확한 '모양'또는 위치를 결정했습니다.

http://www.vision.ee.ethz.ch/teaching/sada/sadalink/reports/biwi_00349.pdf

그것은 꽤 잘 작동하지만, 여전히 견고 함은 큰 문제입니다. 입술 윤곽을 추출하기 위해 색상 세분화에 의존하지 않을 것입니다. 고해상도 및 이상적인 조명 조건의 데이터 세트에서만 작동하는 것처럼 보였습니다. 또한, 어떤 사람들은 매우 얇거나 피부 톤의 입술을 가지고 있습니다.

어쨌든 보고서의 참고 자료를 살펴보면 도움이 될 것입니다.

관련 문제