OpenCVで顔のモーフィングを実装する

映画の視覚効果で初めてモーフィング技術が使われたのは映画「ウィロー」だとILMのドキュメンタリーで見た記憶がある。



ウィロー [Blu-ray]

まだ3DCGはもちろん、デジタルな視覚効果そのものが珍しかった1988年の映画だ。画像を変形させてシームレスに別の画像へ変化させて見せる「モーフィング」という表現は、旧来のオプティカル合成では到底考えられないビジュアルだった。



邦画でも90年代中頃から結構使われていた気がする。「モスラ2 海底の大決戦」でモスラが水中モードへ変身するビジュアルもモーフィングだ。

https://www.youtube.com/watch?v=JxXZjuw-VPI

当時小学生だったオイラでも「あ、モーフィングだ」と思った記憶があるので、当時でももうそれほど目新しい表現ではなかったかもな。
今見ると、いかにも2次元な処理でのっぺりして見える。

モスラ3部作 Blu-ray(3枚組)

時は流れ、2Dの画像加工はそれほど珍しいものではなくなり、モーフィング処理の演算コストも今時のパソコンなら気にならないレベルだ。最近は、モーフィング表現単体で驚くようなことも無い。AfterEffectsなど、この手のアプリケーションでは当たり前のように搭載されている。
http://tv.adobe.com/jp/watch/335/4863/

単純なモーフィング Creative COWのリーダーであるエラン・スターンがタイムリマップとピクセルモーションを使用して単純なモーフィングを作成する方法をご紹介します。

前置きが長くなったけど、OpenCVとDlibを使って顔画像のモーフィングを実装するチュートリアルを見つけた。ソースコードも配布されています。↓
https://www.learnopencv.com/face-morph-using-opencv-cpp-python/



現在は顔の器官を自動で検出することができるから、顔画像同士のモーフィングを自動で処理できるわけですね。

関連記事

UnrealCLR:Unreal Engineで.NET Coreを利用できるプラグイン

iOSデバイスのためのフィジカル・コンピューティングツールキット『konashi(こなし)』

Deep Learningとその他の機械学習手法の性能比較

『ローグ・ワン/スター・ウォーズ・ストーリー』のVFXブレイクダウン まとめ

『シン・ゴジラ』のコンセプトアニメーションのメイキング動画が公開された

iPadをハンディ3Dスキャナにするガジェット『iSense 3D Scanner』

trimesh:PythonでポリゴンMeshを扱うライブラリ

R-CNN (Regions with CNN features):ディープラーニングによる一般物体...

AndroidもopenGLも初心者さ (でもJavaは知ってるよ)

Raspberry Pi 2を買いました

C#で使える遺伝的アルゴリズムライブラリ『GeneticSharp』

OpenCV 3.3.0 contribのsfmモジュールのサンプルを動かしてみる

UnityでARKit2.0

C++始めようと思うんだ

マルコフ連鎖モンテカルロ法

C++の抽象クラス

機械学習手法『Random Forest』

viser:Pythonで使える3D可視化ライブラリ

HD画質の無駄遣い その2

PeopleSansPeople:機械学習用の人物データをUnityで生成する

ブラウザ操作自動化ツール『Selenium』を試す

Dlib:C++の機械学習ライブラリ

自前Shaderの件 解決しました

ManimML:機械学習の概念を視覚的に説明するためのライブラリ

OpenCVの超解像(SuperResolution)モジュールを試す

Raspberry Piでセンサーの常時稼働を検討する

GAN (Generative Adversarial Networks):敵対的生成ネットワーク

geometry3Sharp:Unity C#で使えるポリゴン操作ライブラリ

Python.NET:Pythonと.NETを連携させるパッケージ

CGAN (Conditional GAN):条件付き敵対的生成ネットワーク

Google App Engineのデプロイ失敗

KelpNet:C#で使える可読性重視のディープラーニングライブラリ

Digital Emily Project:人間の顔をそっくりそのままCGで復元する

IronPythonを使ってUnity上でPythonのコードを実行する

機械学習について最近知った情報

自前のShaderがおかしい件

UnityでLight Shaftを表現する

OANDAのfxTrade API

Mayaのレンダリング アトリビュート

PythonでMayaのShapeノードプラグインを作る

Point Cloud Consortiumのセミナー「3D点群の未来」に行ってきたよ

UnityのMonoBehaviourクラスをシングルトン化する

コメント