出た！「Skyline スクリプト」が音声認識による自動リップシンクを実験！

先日、香港のGaoMachine氏が製作している「Skylineスクリプト」が「物理エンジン」の搭載を実験しているという記事をお伝えしたが、おおかみ氏の情報によれば、今度は「音声認識による自動リップシンクを実験」をしているそうな。このことはおおかみ氏のブログに記載されている。そして、その映像が下に埋め込んである、GaoMachine氏がzoomeにうｐした動画。

＞３日ぼうずの日記←情報提供元の「おおかみ」氏のブログ

見ると、まず第一段階としてyoutubeから音声データを音声解析しながらデータベース化。その後、生成した音声データをSkylineスクリプトに送ることで口パクさせているようなのだが、確かにうまいことリップシンクしているように見える。綺麗なリップシンクはVSQデータを利用する方法がいちばんだと思われるが、WAVからでもそれなりにリップシンクできるなら、これほど手間いらずなことはない。期待大&「Skyline スクリプト」すごいでつな。

＞zoome「音聲認識 テスト」

＞その名はSkyline「音聲認識 -> Lipsync 測試」 ←公式サイト

応援サイト
＞WEB2.0 INFO「Skyline スクリプト」（日本語での解説）
＞東奔西走・右往左往（おおかみ氏開発中の「Ｓkylineスクリプター」サイト）

---

関連ページ
＞「Skyline スクリプト」が物理エンジンを搭載しつつある件について