OpenCVで顔のモーフィングを実装する

映画の視覚効果で初めてモーフィング技術が使われたのは映画「ウィロー」だとILMのドキュメンタリーで見た記憶がある。



ウィロー [Blu-ray]

まだ3DCGはもちろん、デジタルな視覚効果そのものが珍しかった1988年の映画だ。画像を変形させてシームレスに別の画像へ変化させて見せる「モーフィング」という表現は、旧来のオプティカル合成では到底考えられないビジュアルだった。



邦画でも90年代中頃から結構使われていた気がする。「モスラ2 海底の大決戦」でモスラが水中モードへ変身するビジュアルもモーフィングだ。

https://www.youtube.com/watch?v=JxXZjuw-VPI

当時小学生だったオイラでも「あ、モーフィングだ」と思った記憶があるので、当時でももうそれほど目新しい表現ではなかったかもな。
今見ると、いかにも2次元な処理でのっぺりして見える。

モスラ3部作 Blu-ray(3枚組)

時は流れ、2Dの画像加工はそれほど珍しいものではなくなり、モーフィング処理の演算コストも今時のパソコンなら気にならないレベルだ。最近は、モーフィング表現単体で驚くようなことも無い。AfterEffectsなど、この手のアプリケーションでは当たり前のように搭載されている。
http://tv.adobe.com/jp/watch/335/4863/

単純なモーフィング Creative COWのリーダーであるエラン・スターンがタイムリマップとピクセルモーションを使用して単純なモーフィングを作成する方法をご紹介します。

前置きが長くなったけど、OpenCVとDlibを使って顔画像のモーフィングを実装するチュートリアルを見つけた。ソースコードも配布されています。↓
https://www.learnopencv.com/face-morph-using-opencv-cpp-python/



現在は顔の器官を自動で検出することができるから、顔画像同士のモーフィングを自動で処理できるわけですね。

関連記事

WordPress on Google App Engineを1週間運用してみて

Multi-View Environment:複数画像から3次元形状を再構築するライブラリ

CycleGAN:ドメイン関係を学習した画像変換

フォトンの放射から格納までを可視化した動画

自前Shaderの件 解決しました

為替レートの読み方 2WAYプライス表示

SSII 2014 デモンストレーションセッションのダイジェスト動画

3Dグラフィックスの入門書

『スター・ウォーズ フォースの覚醒』のVFXブレイクダウン まとめ

ArUco:OpenCVベースのコンパクトなARライブラリ

Twitter APIのPythonラッパー『python-twitter』

Unityの薄い本

Amazon Web ServicesでWordPress

Raspberry PiのGPIOを操作するPythonライブラリ『RPi.GPIO』の使い方

Unity ARKitプラグインサンプルのチュートリアルを読む

トランスフォーマー/ロストエイジのメイキング

COLMAP:オープンソースのSfM・MVSツール

ドットインストールのWordPress入門レッスン

CNN Explainer:畳み込みニューラルネットワーク可視化ツール

Faceshiftで表情をキャプチャしてBlender上でMakeHumanのメッシュを動かすデモ

写真に3Dオブジェクトを違和感無く合成する『3DPhotoMagic』

GoogleのDeep Learning論文

プログラムによる景観の自動生成

映画『シン・仮面ライダー』 メイキング情報まとめ

書籍『イラストで学ぶ ディープラーニング』

OpenCVでカメラ画像から自己位置認識 (Visual Odometry)

書籍『ROSプログラミング』

TensorSpace.js:ニューラルネットワークの構造を可視化するフレームワーク

ZBrushで作った3Dモデルを立体視で確認できるVRアプリを作る

CGレンダラ研究開発のためのフレームワーク『Lightmetrica (ライトメトリカ)』

Iridescence:プロトタイピング向け軽量3D可視化ライブラリ

機械学習に役立つPythonライブラリ一覧

OpenCV 3.1とopencv_contribモジュールをVisual Studio 2015で...

HerokuでMEAN stack

IronPythonを使ってUnity上でPythonのコードを実行する

AnacondaとTensorFlowをインストールしてVisual Studio 2015で使う

自前のShaderがおかしい件

ベイズ推定とグラフィカルモデル

Boost オープンソースライブラリ

Unityの各コンポーネント間でのやり取り

konashiのサンプルコードを動かしてみた

OpenFace:Deep Neural Networkによる顔の個人識別フレームワーク

コメント