OpenCVで顔のモーフィングを実装する

映画の視覚効果で初めてモーフィング技術が使われたのは映画「ウィロー」だとILMのドキュメンタリーで見た記憶がある。



ウィロー [Blu-ray]

まだ3DCGはもちろん、デジタルな視覚効果そのものが珍しかった1988年の映画だ。画像を変形させてシームレスに別の画像へ変化させて見せる「モーフィング」という表現は、旧来のオプティカル合成では到底考えられないビジュアルだった。



邦画でも90年代中頃から結構使われていた気がする。「モスラ2 海底の大決戦」でモスラが水中モードへ変身するビジュアルもモーフィングだ。

https://www.youtube.com/watch?v=JxXZjuw-VPI

当時小学生だったオイラでも「あ、モーフィングだ」と思った記憶があるので、当時でももうそれほど目新しい表現ではなかったかもな。
今見ると、いかにも2次元な処理でのっぺりして見える。

モスラ3部作 Blu-ray(3枚組)

時は流れ、2Dの画像加工はそれほど珍しいものではなくなり、モーフィング処理の演算コストも今時のパソコンなら気にならないレベルだ。最近は、モーフィング表現単体で驚くようなことも無い。AfterEffectsなど、この手のアプリケーションでは当たり前のように搭載されている。
http://tv.adobe.com/jp/watch/335/4863/

単純なモーフィング Creative COWのリーダーであるエラン・スターンがタイムリマップとピクセルモーションを使用して単純なモーフィングを作成する方法をご紹介します。

前置きが長くなったけど、OpenCVとDlibを使って顔画像のモーフィングを実装するチュートリアルを見つけた。ソースコードも配布されています。↓
https://www.learnopencv.com/face-morph-using-opencv-cpp-python/



現在は顔の器官を自動で検出することができるから、顔画像同士のモーフィングを自動で処理できるわけですね。

関連記事

映画『キングコング: 髑髏島の巨神』を観た

R-CNN (Regions with CNN features):ディープラーニングによる一般物体...

Kubric:機械学習用アノテーション付き動画生成パイプライン

オープンソースのロボットアプリケーションフレームワーク『ROS (Robot Operating S...

Polyscope:3Dデータ操作用GUIライブラリ

OpenMVSのサンプルを動かしてみる

3Dスキャンに基づくプロシージャルフェイシャルアニメーション

『シン・ゴジラ』のコンセプトアニメーションのメイキング動画が公開された

頭蓋骨からの顔復元と進化過程の可視化

OpenSfM:PythonのStructure from Motionライブラリ

映画『ジュラシック・ワールド』のVFXメイキング

Python拡張モジュールのWindows用インストーラー配布サイト

法線マップを用意してCanvas上でShadingするサンプル

OpenCVのfindEssentialMat関数を使ったサンプルを読んでみる

Google XML Sitemap Generatorプラグインを3.4.1へダウングレード

WordPress on Google App Engineを1週間運用してみて

iPhoneアプリ開発 Xcode 5のお作法

DensePose:画像中の人物表面のUV座標を推定する

GoB:ZBrushとBlenderを連携させるアドオン

3D Gaussian Splatting:リアルタイム描画できるRadiance Fields

映画『パワーレンジャー』スーツのメイキング

Point Cloud Consortiumのセミナー「3D点群の未来」に行ってきたよ

MythTV:Linuxでテレビの視聴・録画ができるオープンソースプロジェクト

SSII2014 チュートリアル講演会の資料

Amazon Web ServicesでWordPress

白組による『シン・ゴジラ』CGメイキング映像が公開された!

VCG Library:C++のポリゴン操作ライブラリ

ポイントクラウドコンソーシアム

PyMC:Pythonのベイズ統計ライブラリ

hloc:SuperGlueで精度を向上させたSfM実装

ディープラーニング

BlenderでPhotogrammetryできるアドオン

マルコフ連鎖モンテカルロ法

Open3D:3Dデータ処理ライブラリ

機械学習手法『Random Forest』

OpenMesh:オープンソースの3Dメッシュデータライブラリ

ブログが1日ダウンしてました

映画『シン・ウルトラマン』 メイキング記事まとめ

Manim:Pythonで使える数学アニメーションライブラリ

ZScript

ROSでガンダムを動かす

Pix2Pix:CGANによる画像変換

コメント