Adobe After Effectsでビデオのコンテンツ対応塗りつぶしができるように

次の記事

SpaceXが「Starhopper」の初ホップテストを係留状態にて完了

Adobeは米国時間4月3日、Creative Cloudの一員である特殊効果ソフトウェアAfter Effectsでコンテンツに応じた塗りつぶし(Content-aware fill)ができるようになる、と発表した。この機能はかなり前からPhotoshopにあり、写真から何かを消したらそのあとを、まわりにあるもの、例えば青空に基づいて塗りつぶすのによく使われる。ご想像つくと思うが、それを静止画でなく動画でやろうとすると、相当大変だ。その消すべきものがあったすべてのコマで、塗りつぶしをやんなきゃならない。

同社はその大変なことを、AdobeのAIプラットホームAdobe Senseiを利用して実装した。邪魔者のブームマイクなど要らないものを消すには、それをマスクすればよい。マスキングが完全に終わったら、このツールが自動的に消されたあとを追跡して、一部が何かの後ろに隠れていたときでさえも、その場所にふさわしいピクセルで填める。結果を微修正したければ、Photoshopを使って参照フレーム(Reference frames)を作ればいい。

  1. Ae_Content-Aware-Fill_1-Before

  2. Ae_Content-Aware-Fill_2-Mask

  3. Ae_Content-Aware-Fill_3-After

この塗りつぶし機能は360度のVRプロジェクトでも使えるとAdobeは言っている。360度だから何かをカメラの視界の外に隠せない。塗りつぶすしかない。

来週行われる今年のNABの年次大会でAdobeは、After EffectsとPremiere Pro用にたくさんのビデオ機能をローンチする。その一部はワークフローの改良にフォーカスし、たとえばFreeform Projectという新しいパネルでは、重要なものを視覚的に並べ替えたり、オーディオをもっと良くするツールがある。なお、AuditionとPremiere Proには、環境音を抑制するオートダッキング機能がある。

例によってAdobeは、アプリケーションのパフォーマンスアップにも力を入れている。例えば、PremiereのGPUレンダリングはエクスポートの時間を短縮し、8Kビデオのマスクの追跡は最大38倍速く、HDのシーンなら最大4倍速い。

ビデオは今、黄金時代を迎えているから、放送や映画、ストリーミングサービス、デジタルマーケティングなどの分野でビデオのプロたちが、消費者からのより高度なコンテンツの要求に直面している。一方でプロダクションのタイムラインはますます短く、仕事の受注数は増え続ける。Adobeのデジタルビデオオーディオ担当ヴァイスプレジデントSteven Warnerは次のように述べる。「Adobe Senseiが提供するパフォーマンスの最適化とインテリジェントな新機能の数々により、ビデオのプロたちは、だらだらと長かったプロダクションの仕事を減らし、クリエイティブなビジョンに集中できる」。

そして、Twitchのストリーマーにはボーナスがある。これからはCharacter Animatorを使ってリアルタイムのアニメーションを作れる。それはこのツールを使っているColbert Show などでおなじみの、ライブのアニメーションだ。

[原文へ]

(翻訳:iwatani、a.k.a. hiwa