Stability AI、回転しても形を保つ3Dを生成「Stable Video 3D」

Stability AIは、1枚の画像から3Dオブジェクトを生成し、マルチアングル動画を作り出せる生成AI「Stable Video 3D」を発表した。Stability AIメンバーシップへの加入で商用利用が可能。非商用利用の場合はHugging Faceからダウンロードできる。

「Stable Video 3D」は、Stability AIが2023年11月に発表した、テキストから短い動画を生成できる「Stable Video Diffusion」を基盤としており、3Dオブジェクトを生成してさまざまなカメラアングルから見られるようにした「Stable Zero123」よりも、品質やマルチビューが大幅に改善したというもの。これまでと比較して、より詳細で、入力された画像に忠実になっており、回転しても一貫性を保つのが特徴。

1枚の画像から3Dオブジェクトを生成。最新の「Stable Video 3D」(SV3D)は入力画像に忠実で一貫性を保つ

回転させている様子。SV3Dは3Dオブジェクトが乱れない

「Stable Video 3D」で生成される3Dオブジェクトは、どのアングルからでも一貫した形状を保つことが可能。3Dオブジェクトが回転する動画を生成できるほか、変化するカメラアングルにも対応でき、ライティング効果の最適化も行なわれている。