OpenCVで顔のモーフィングを実装する

映画の視覚効果で初めてモーフィング技術が使われたのは映画「ウィロー」だとILMのドキュメンタリーで見た記憶がある。

1988 Industrial Light & Magic – "Willow" (morphing sequence)

ウィロー [Blu-ray]

まだ3DCGはもちろん、デジタルな視覚効果そのものが珍しかった1988年の映画だ。画像を変形させてシームレスに別の画像へ変化させて見せる「モーフィング」という表現は、旧来のオプティカル合成では到底考えられないビジュアルだった。


スポンサーリンク


邦画でも90年代中頃から結構使われていた気がする。「モスラ2 海底の大決戦」でモスラが水中モードへ変身するビジュアルもモーフィングだ。

https://www.youtube.com/watch?v=JxXZjuw-VPI

当時小学生だったオイラでも「あ、モーフィングだ」と思った記憶があるので、当時でももうそれほど目新しい表現ではなかったかもな。
今見ると、いかにも2次元な処理でのっぺりして見える。

モスラ3部作 Blu-ray(3枚組)

時は流れ、2Dの画像加工はそれほど珍しいものではなくなり、モーフィング処理の演算コストも今時のパソコンなら気にならないレベルだ。最近は、モーフィング表現単体で驚くようなことも無い。AfterEffectsなど、この手のアプリケーションでは当たり前のように搭載されている。
http://tv.adobe.com/jp/watch/335/4863/


スポンサーリンク

単純なモーフィング Creative COWのリーダーであるエラン・スターンがタイムリマップとピクセルモーションを使用して単純なモーフィングを作成する方法をご紹介します。

前置きが長くなったけど、OpenCVとDlibを使って顔画像のモーフィングを実装するチュートリアルを見つけた。ソースコードも配布されています。↓
https://www.learnopencv.com/face-morph-using-opencv-cpp-python/

Face Morphing using OpenCV (C++ / Python)

現在は顔の器官を自動で検出することができるから、顔画像同士のモーフィングを自動で処理できるわけですね。


スポンサーリンク

関連記事

株式会社ヘキサドライブの研究室ページ
自前Shaderの件 解決しました
ROMOハッカソンに行ってきた
ブラウザ操作自動化ツール『Selenium』を試す
画像中の人物表面のUV座標を推定する『DensePose』
Mask R-CNN:ディープラーニングによる一般物体検出・Instance Segmentatio...
立体視を試してみた
GoogleのDeep Learning論文
SONY製のニューラルネットワークライブラリ『NNabla』
バージョン管理の履歴を可視化するツール『Gource』
Pix2Pix:CGANによる画像変換
組み込み向けのWindows OS 『Windows Embedded』
Kinect for Windows V2のプレオーダー開始
プログラムによる景観の自動生成
Unity ARKitプラグインサンプルのチュートリアルを読む
pythonもかじってみようかと
WordPressプラグインによるサイトマップの自動生成
オープンソースの物理ベースレンダラ『Mitsuba』をMayaで使う
フィーリングに基づくタマムシの質感表現
顔検出・認識のAPI・ライブラリ・ソフトウェアのリスト
C++の抽象クラス
WordPressのテーマを自作する
ゴジラ(2014)のディティール制作の舞台裏
Mitsuba 2:オープンソースの物理ベースレンダラ
Twitter APIのPythonラッパー『python-twitter』
書籍『3次元コンピュータビジョン計算ハンドブック』を購入
OpenCVでPhotoshopのプラグイン開発
C++ 標準テンプレートライブラリ (STL)
3Dスキャンに基づくプロシージャルフェイシャルアニメーション
OpenCVの超解像(SuperResolution)モジュールを試す
fSpy:1枚の写真からカメラパラメーターを割り出すツール
hloc:SuperGlueで精度を向上させたSfM実装
Unityで画面タッチ・ジェスチャ入力を扱う無料Asset『TouchScript』
Verilog HDL
『スター・ウォーズ フォースの覚醒』のVFXブレイクダウン まとめ
CycleGAN:ドメイン関係を学習した画像変換
Kaolin:3Dディープラーニング用のPyTorchライブラリ
iOSデバイスと接続して連携するガジェットの開発方法
Unityの薄い本
Blenderの人体モデリングアドオン『MB-Lab』
Googleが画像解析旅行ガイドアプリのJetpac社を買収
フォトンの放射から格納までを可視化した動画

コメント