Стерео фотометрия: важный прогресс в обнаружении лица для моделирования

Стерео фотометрия, впервые показанная в последнем сигграфе, помогает рассчитать с помощью светодиодного освещения движения в различных условиях освещения, не имея необходимости использовать контрольные точки на лицевой стороне актеров и захватить самую тонкую деталь движения.

Властелин колец или Полярная экспресс Они пошли в историю для мастерского использования обнаружения движений для реальных актеров для создания виртуальных персонажей. Традиционно анимация требовала использования маркеров на актеров плоти и крови.

Впоследствии Джеймс Кэмерон добился важных достижений в обнаружении движений во время производства АватарПолем Эта новаторская система состояла из камеры, прикрепленной к главе актеров, которая собирала информацию из контрольных точек, распознавая движение и проецируя ее на 3D -модели в режиме реального времени.

Тем не менее, эта система представила серьезные ограничения в обнаружении тонкого движения лица, особенно вокруг глаз и рта.

Таким образом, исследователи решили улучшить систему с помощью метода освещения на основе светодиода под названием стерео фотометрия. Техника, показанная впервые в последнем Siggraph, помогает вычислять движения в различных условиях освещения. С помощью этой техники больше не необходимо использовать эталонные точки на лице актера, достигая более естественного качества в распознавании каждого жеста для тонкого. Стерео фотометрия позволяет получить эти данные на основе воздействия света, яркости и тени в каждой области лица.

Чтобы получить эту информацию, различные адреса освещения объединяются. Тени, генерируемые различными направлениями освещения, позволяют рассчитать трехмерную геометрию изученного объекта. Поскольку в любом месте существует три степени свободы (фактор отражения и две степени свободы, которые указывают ориентацию).