OpenCVで顔のモーフィングを実装する

映画の視覚効果で初めてモーフィング技術が使われたのは映画「ウィロー」だとILMのドキュメンタリーで見た記憶がある。



ウィロー [Blu-ray]

まだ3DCGはもちろん、デジタルな視覚効果そのものが珍しかった1988年の映画だ。画像を変形させてシームレスに別の画像へ変化させて見せる「モーフィング」という表現は、旧来のオプティカル合成では到底考えられないビジュアルだった。



邦画でも90年代中頃から結構使われていた気がする。「モスラ2 海底の大決戦」でモスラが水中モードへ変身するビジュアルもモーフィングだ。

https://www.youtube.com/watch?v=JxXZjuw-VPI

当時小学生だったオイラでも「あ、モーフィングだ」と思った記憶があるので、当時でももうそれほど目新しい表現ではなかったかもな。
今見ると、いかにも2次元な処理でのっぺりして見える。

モスラ3部作 Blu-ray(3枚組)

時は流れ、2Dの画像加工はそれほど珍しいものではなくなり、モーフィング処理の演算コストも今時のパソコンなら気にならないレベルだ。最近は、モーフィング表現単体で驚くようなことも無い。AfterEffectsなど、この手のアプリケーションでは当たり前のように搭載されている。
http://tv.adobe.com/jp/watch/335/4863/

単純なモーフィング Creative COWのリーダーであるエラン・スターンがタイムリマップとピクセルモーションを使用して単純なモーフィングを作成する方法をご紹介します。

前置きが長くなったけど、OpenCVとDlibを使って顔画像のモーフィングを実装するチュートリアルを見つけた。ソースコードも配布されています。↓
https://www.learnopencv.com/face-morph-using-opencv-cpp-python/



現在は顔の器官を自動で検出することができるから、顔画像同士のモーフィングを自動で処理できるわけですね。

関連記事

PGGAN:段階的に解像度を上げて学習を進めるGAN

WordPressプラグインによるサイトマップの自動生成

SONY製のニューラルネットワークライブラリ『NNabla』

Open Shading Language (OSL)

チャットツール用bot開発フレームワーク『Hubot』

OpenCVの三角測量関数『cv::triangulatepoints』

MB-Lab:Blenderの人体モデリングアドオン

映画『シン・仮面ライダー』 メイキング情報まとめ

Google XML Sitemap Generatorプラグインを3.4.1へダウングレード

スクレイピング

Boost オープンソースライブラリ

『パシフィック・リム: アップライジング』のVFXブレイクダウン まとめ

参考書

C++始めようと思うんだ

MPC社によるゴジラ(2014)のVFXブレイクダウン

Web経由でRaspberry PiのGPIOを操作したい

iOSで使えるJetpac社の物体認識SDK『DeepBelief』

顔画像処理技術の過去の研究

Math Inspector:科学計算向けビジュアルプログラミングツール

OpenMVSのサンプルを動かしてみる

C++ 標準テンプレートライブラリ (STL)

Kornia:微分可能なコンピュータービジョンライブラリ

iPhoneアプリ開発 Xcode 5のお作法

iPhone x ロボットハッカソン~RomoのiPhone用SDKで目覚ましアプリを作る~

OpenMayaRender

フォトンの放射から格納までを可視化した動画

Unity MonoBehaviourクラスのオーバーライド関数が呼び出される順番

OpenVDB:3Dボリュームデータ処理ライブラリ

Adobe MAX 2015

VCG Library:C++のポリゴン操作ライブラリ

Faster R-CNN:ディープラーニングによる一般物体検出手法

ニューラルネットワークと深層学習

PythonのHTML・XMLパーサー『BeautifulSoup』

動的なメモリの扱い

PyTorch3D:3Dコンピュータービジョンライブラリ

機械学習について最近知った情報

U-Net:ディープラーニングによるSemantic Segmentation手法

ManuelBastioniLAB:人体モデリングできるBlenderアドオン

Mayaのレンダリング アトリビュート

『手を動かしながら学ぶエンジニアのためのデータサイエンス』ハンズオンセミナーに行ってきた

Mean Stack開発の最初の一歩

iPadをハンディ3Dスキャナにするガジェット『iSense 3D Scanner』

コメント