OpenCVで顔のモーフィングを実装する

映画の視覚効果で初めてモーフィング技術が使われたのは映画「ウィロー」だとILMのドキュメンタリーで見た記憶がある。



ウィロー [Blu-ray]

まだ3DCGはもちろん、デジタルな視覚効果そのものが珍しかった1988年の映画だ。画像を変形させてシームレスに別の画像へ変化させて見せる「モーフィング」という表現は、旧来のオプティカル合成では到底考えられないビジュアルだった。



邦画でも90年代中頃から結構使われていた気がする。「モスラ2 海底の大決戦」でモスラが水中モードへ変身するビジュアルもモーフィングだ。

https://www.youtube.com/watch?v=JxXZjuw-VPI

当時小学生だったオイラでも「あ、モーフィングだ」と思った記憶があるので、当時でももうそれほど目新しい表現ではなかったかもな。
今見ると、いかにも2次元な処理でのっぺりして見える。

モスラ3部作 Blu-ray(3枚組)

時は流れ、2Dの画像加工はそれほど珍しいものではなくなり、モーフィング処理の演算コストも今時のパソコンなら気にならないレベルだ。最近は、モーフィング表現単体で驚くようなことも無い。AfterEffectsなど、この手のアプリケーションでは当たり前のように搭載されている。
http://tv.adobe.com/jp/watch/335/4863/

単純なモーフィング Creative COWのリーダーであるエラン・スターンがタイムリマップとピクセルモーションを使用して単純なモーフィングを作成する方法をご紹介します。

前置きが長くなったけど、OpenCVとDlibを使って顔画像のモーフィングを実装するチュートリアルを見つけた。ソースコードも配布されています。↓
https://www.learnopencv.com/face-morph-using-opencv-cpp-python/



現在は顔の器官を自動で検出することができるから、顔画像同士のモーフィングを自動で処理できるわけですね。

関連記事

Unity ARKitプラグインサンプルのドキュメントを読む

Unity MonoBehaviourクラスのオーバーライド関数が呼び出される順番

OpenMVS:Multi-View Stereoによる3次元復元ライブラリ

オープンソースの物理ベースレンダラ『Mitsuba』をMayaで使う

Fast R-CNN:ディープラーニングによる一般物体検出手法

オープンソースの物理ベースGIレンダラ『appleseed』

Leap MotionでMaya上のオブジェクトを操作できるプラグイン

Unityの各コンポーネント間でのやり取り

Facebookの顔認証技術『DeepFace』

MFnDataとMFnAttribute

3Dスキャンに基づくプロシージャルフェイシャルアニメーション

BlenderProc:Blenderで機械学習用の画像データを生成するPythonツール

なんかすごいサイト

UnityのMonoBehaviourクラスをシングルトン化する

TensorSpace.js:ニューラルネットワークの構造を可視化するフレームワーク

html5のcanvasの可能性

Google App EngineでWordPress

海外ドラマのChromaKey

Mayaのシェーディングノードの区分

書籍『ゼロから作るDeep Learning』で自分なりに学ぶ

Python.NET:Pythonと.NETを連携させるパッケージ

Googleが画像解析旅行ガイドアプリのJetpac社を買収

OpenFace:Deep Neural Networkによる顔の個人識別フレームワーク

SONY製のニューラルネットワークライブラリ『NNabla』

MPC社によるゴジラ(2014)のVFXブレイクダウン

Pix2Pix:CGANによる画像変換

Python2とPython3

『ローグ・ワン/スター・ウォーズ・ストーリー』のVFXブレイクダウン まとめ

AMIMOTO(PVM版)で作成したインスタンスをAMIMOTO (HVM版)へ移行する

PythonでBlenderのAdd-on開発

第20回 文化庁メディア芸術祭『3DCG表現と特撮の時代』

Digital Emily Project:人間の顔をそっくりそのままCGで復元する

GoB:ZBrushとBlenderを連携させるアドオン

AndroidもopenGLも初心者さ (でもJavaは知ってるよ)

SDカードサイズのコンピューター『Intel Edison』

株式会社ヘキサドライブの研究室ページ

AfterEffectsプラグイン開発

機械学習手法『Random Forest』

Mayaのレンダリング アトリビュート

OpenCVのバージョン3が正式リリースされたぞ

写真から3Dメッシュの生成・編集ができる無料ツール『Autodesk Memento』

Google Chromecast

コメント