OpenCVで顔のモーフィングを実装する

映画の視覚効果で初めてモーフィング技術が使われたのは映画「ウィロー」だとILMのドキュメンタリーで見た記憶がある。

1988 Industrial Light & Magic – "Willow" (morphing sequence)

ウィロー [Blu-ray]

まだ3DCGはもちろん、デジタルな視覚効果そのものが珍しかった1988年の映画だ。画像を変形させてシームレスに別の画像へ変化させて見せる「モーフィング」という表現は、旧来のオプティカル合成では到底考えられないビジュアルだった。


スポンサーリンク


邦画でも90年代中頃から結構使われていた気がする。「モスラ2 海底の大決戦」でモスラが水中モードへ変身するビジュアルもモーフィングだ。

https://www.youtube.com/watch?v=JxXZjuw-VPI

当時小学生だったオイラでも「あ、モーフィングだ」と思った記憶があるので、当時でももうそれほど目新しい表現ではなかったかもな。
今見ると、いかにも2次元な処理でのっぺりして見える。

モスラ3部作 Blu-ray(3枚組)

時は流れ、2Dの画像加工はそれほど珍しいものではなくなり、モーフィング処理の演算コストも今時のパソコンなら気にならないレベルだ。最近は、モーフィング表現単体で驚くようなことも無い。AfterEffectsなど、この手のアプリケーションでは当たり前のように搭載されている。
http://tv.adobe.com/jp/watch/335/4863/


スポンサーリンク

単純なモーフィング Creative COWのリーダーであるエラン・スターンがタイムリマップとピクセルモーションを使用して単純なモーフィングを作成する方法をご紹介します。

前置きが長くなったけど、OpenCVとDlibを使って顔画像のモーフィングを実装するチュートリアルを見つけた。ソースコードも配布されています。↓
https://www.learnopencv.com/face-morph-using-opencv-cpp-python/

Face Morphing using OpenCV (C++ / Python)

現在は顔の器官を自動で検出することができるから、顔画像同士のモーフィングを自動で処理できるわけですね。


スポンサーリンク

関連記事

Point Cloud Consortiumのセミナー「3D点群の未来」に行ってきたよ
今年もSSII
オープンソースの顔の動作解析ツールキット『OpenFace』
ブラウザ操作自動化ツール『Selenium』を試す
OpenGVの用語
PyDataTokyo主催のDeep Learning勉強会
Unityの薄い本
Windows10でPyTorchをインストールしてVSCodeで使う
OpenCV
OpenCVの超解像(SuperResolution)モジュールを試す
コンピュータビジョンの技術マップ
Mean Stack開発の最初の一歩
UnityのAR FoundationでARKit 3
WordPress on Google App Engineを1週間運用してみて
OpenCVで動画の手振れ補正
オープンソースの顔認識フレームワーク『OpenBR』
UnityでARKit2.0
網元AMIで作ったWordpressサイトのインスタンスをt1microからt2microへ移行した
Pythonの自然言語処理ライブラリ『NLTK(Natural Language Toolkit)』
Google Chromecast
オープンソースのSfM・MVSツール『COLMAP』
MRenderUtil::raytrace
畳み込みニューラルネットワーク (CNN:Convolutional Neural Network)
クラスの基本
オープンソースの3Dメッシュデータライブラリ『OpenMesh』
Python拡張モジュールのWindows用インストーラー配布サイト
HD画質の無駄遣い
OpenCVベースの背景差分ライブラリ『BGSLibrary』
C++ 標準テンプレートライブラリ (STL)
TensorFlowでCGを微分できる『TensorFlow Graphics』
pythonの機械学習ライブラリ『scikit-learn』
C#で使える可読性重視のディープラーニングライブラリ『KelpNet』
Adobe MAX 2015
CGレンダラ研究開発のためのフレームワーク『Lightmetrica (ライトメトリカ)』
Google App Engine上のWordPressでFlickrの画像を貼る
組み込み向けのWindows OS 『Windows Embedded』
WordPressプラグインの作り方
OpenCVで顔のランドマークを検出する『Facemark API』
スマホのカメラで3Dスキャンできるアプリ『Qlone』
Unity Scriptコーディング→Unreal Engine Scriptコーディング
ROMOハッカソンに行ってきた
プログラミングスキルとは何か

コメント