2011-03-03 34 views
2

大家好我在做我的Matlab项目。为此,我将使用唇部提取算法,该算法将从给定的面部图像中提取唇部区域。为此,我使用了基于颜色的分割,通过它我可以获得唇部区域。这给了我唇区。但是我没有得到嘴唇参数。因此,我将不得不使用标准唇来进行唇部同步。无论草图可能具有的嘴唇类型如何,我们都必须使用相同的嘴唇。这种技术不会给我一个适当和准确的结果。
我想问的是,“是否有任何算法或方法可以使用相同的草图唇部,并根据声音音素对每个和每个视位(最小视觉元素)适当地修改相同的唇部”
感谢你们都提前在matlab中提取唇部区域和参数,以便用于唇部同步

+0

“...根据声音音素,修改每个和每个视位(最小视觉元素)的相同唇部”您只是吹了我的脑海。你是否试图将嘴唇与正在形成的声音相匹配? – dfb 2011-03-03 18:12:32

+0

实际上是的,我试图看看是否有任何方式可以完成它。类似于它在动画电影中所做的事情..即使每个声音音素都将其映射到其相应的嘴唇运动。 – jack1689 2011-03-03 19:12:33

回答

1

我写了关于这个问题的硕士论文。我用活动形状模型来确定嘴唇的确切'形状'或位置,以减少参数。

http://www.vision.ee.ethz.ch/teaching/sada/sadalink/reports/biwi_00349.pdf

它的工作原理相当不错,但尽管如此,鲁棒性是一个巨大的问题。我不会依靠颜色分割来提取唇部轮廓。它似乎只适用于具有高分辨率和理想光照条件的数据集。此外,有些人的嘴唇非常薄或皮肤色调。

无论如何,看看报告中的参考文献,他们应该是有帮助的。

相关问题