ソニーマーケティング、AI技術で4K映像から特定の人物を切り出す映像制作支援ソフト提供

ソニーマーケティングは、AI技術を活用して、4Kカメラで撮影した映像から特定の出演者をHD映像で自動的に切り出す「オートフレーミングソフトウェア」を9月に発売すると発表しました。



サブスクリプション形式で、参考システム価格は250万円/年間との事。

オートフレーミングソフトウェアは、4Kカメラの映像から骨格推定、人物認識、最適画角推定等のAI技術により、特定の出演者の顔を認識し、HD映像として最適な画角で自動で切り出すとの事。

切り出された複数のHD映像はGUI上に切り出し候補として表示され、その中から任意の映像を選択して出力可能となっています。

タッチパネルモニターに表示された切り出し映像の中から使いたい映像をタップするだけで出力映像を選択可能、シンプルで使いやすいGUIを提供。また、切り出された映像のズーム倍率の変更や切り出し位置の調整も可能との事です。

単独の出演者の自動切り出しに加え、複数の出演者を同じ画角内でまとめて切り出す機能や、単独の切り出し映像を1つに組合せた4画面合成などにも対応し、番組制作に必要な様々な画角を生成できるとしています。

従来のスタジオ番組制作では、スタジオ内に配置された複数カメラの専任カメラマンが、ズームやパン、チルトなどの制御を行なう必要がありましたが、オートフレーミングソフトウェアを活用する事で、固定の4Kカメラ1台を設置するだけで、あたかもマルチカメラで撮影している様なスタジオ番組制作が可能だとしています。

また、オプションを追加する事で4Kカメラを2系統に増設できる他、SONYのリモートカメラシステムと組み合わせた自動追尾機能にも対応。スタジオ番組制作の効率化とコスト削減を支援すると共に、予算や人員の都合で対応が難しかった番組においても、制作の自由度が広がるとしています。

尚、このソフトウェアは、3月19日発表の日本テレビ放送網と共同実施した「映像自動切り出しシステム」実証実験で使用したソフトウェアをベースに開発を進めているとの事です。

SONYは4Kカメラ開発時から、米国等4K放送が決まっていない国などで、ヒキで取っておいてポスプロでHDサイズの画を切り出すというフローを提案してきましたが、その時はマニュアルで作業する必要があったものを、AIを利用する事で、人物を認識して切り出すというフローに昇華したみたいですね。

これ、昨今多い大人の事情で収録は済んでるけどOAには乗せられないタレントを認識して、そこだけ使わないという使い方も出来そうですね…。

■プレスリリース
AI技術を活用して4K映像からHD映像の自動切り出しを行う
『オートフレーミングソフトウェア』を発売
－AIによる新しいスタジオ番組制作の実現－
https://www.sony.jp/professional/News/info/pb20210420.html