OpenCVで顔のモーフィングを実装する

映画の視覚効果で初めてモーフィング技術が使われたのは映画「ウィロー」だとILMのドキュメンタリーで見た記憶がある。



ウィロー [Blu-ray]

まだ3DCGはもちろん、デジタルな視覚効果そのものが珍しかった1988年の映画だ。画像を変形させてシームレスに別の画像へ変化させて見せる「モーフィング」という表現は、旧来のオプティカル合成では到底考えられないビジュアルだった。


スポンサーリンク


邦画でも90年代中頃から結構使われていた気がする。「モスラ2 海底の大決戦」でモスラが水中モードへ変身するビジュアルもモーフィングだ。



当時小学生だったオイラでも「あ、モーフィングだ」と思った記憶があるので、当時でももうそれほど目新しい表現ではなかったかもな。
今見ると、いかにも2次元な処理でのっぺりして見える。

モスラ3部作 Blu-ray(3枚組)

時は流れ、2Dの画像加工はそれほど珍しいものではなくなり、モーフィング処理の演算コストも今時のパソコンなら気にならないレベルだ。最近は、モーフィング表現単体で驚くようなことも無い。AfterEffectsなど、この手のアプリケーションでは当たり前のように搭載されている。
http://tv.adobe.com/jp/watch/335/4863/


スポンサーリンク

単純なモーフィング Creative COWのリーダーであるエラン・スターンがタイムリマップとピクセルモーションを使用して単純なモーフィングを作成する方法をご紹介します。

前置きが長くなったけど、OpenCVとDlibを使って顔画像のモーフィングを実装するチュートリアルを見つけた。ソースコードも配布されています。↓
https://www.learnopencv.com/face-morph-using-opencv-cpp-python/



現在は顔の器官を自動で検出することができるから、顔画像同士のモーフィングを自動で処理できるわけですね。


スポンサーリンク

関連記事

Blendify:コンピュータービジョン向けBlenderラッパー
法線マップを用意してCanvas上でShadingするサンプル
UnityのAR FoundationでARKit 3
UnityでLight Shaftを表現する
顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト
SONYの自律型エンタテインメントロボット『aibo』
Python.NET:Pythonと.NETを連携させるパッケージ
『ローグ・ワン/スター・ウォーズ・ストーリー』のVFXブレイクダウン まとめ
Javaで作られたオープンソースの3DCGレンダラ『Sunflow』
HerokuでMEAN stack
『スター・ウォーズ/スカイウォーカーの夜明け』のVFXブレイクダウン
DensePose:画像中の人物表面のUV座標を推定する
AnacondaとTensorFlowをインストールしてVisual Studio 2015で使う
python-twitterで自分のお気に入りを取得する
PythonでMayaのShapeノードプラグインを作る
GAN (Generative Adversarial Networks):敵対的生成ネットワーク
TeleSculptor:空撮動画からPhotogrammetryするツール
OpenCV 3.1から追加されたSfMモジュール
ゴジラ(2014)のメイキング
『スター・ウォーズ フォースの覚醒』のVFXブレイクダウン まとめ
映画『ジュラシック・ワールド/炎の王国』のVFXブレイクダウン まとめ
WordPress on Google App Engineを1週間運用してみて
オープンソースの物理ベースレンダラ『Mitsuba』をMayaで使う
UnityでARKit2.0
SegNet:ディープラーニングによるSemantic Segmentation手法
iPhone・iPod touchで動作する知育ロボット『ROMO』
Boost オープンソースライブラリ
SSII2014 チュートリアル講演会の資料
3D復元技術の情報リンク集
立体視を試してみた
TensorFlowでCGを微分できる『TensorFlow Graphics』
映画『キングコング: 髑髏島の巨神』を観た
AndroidもopenGLも初心者さ (でもJavaは知ってるよ)
IronPythonを使ってUnity上でPythonのコードを実行する
clearcoat Shader
WordPressプラグインによるサイトマップの自動生成
FreeMoCap Project:オープンソースのマーカーレスモーションキャプチャ
C#で使える遺伝的アルゴリズムライブラリ『GeneticSharp』
顔追跡による擬似3D表示『Dynamic Perspective』
Raspberry Pi
疑似3D写真が撮れるiPhoneアプリ『Seene』がアップデートでついにフル3Dモデルが撮影できる...
Autodesk Mementoでゴジラを3次元復元する

コメント