Stability AI 的新型虛擬攝影機可以將任何影像變成令人驚嘆的 3D 視頻,其品質給我留下了深刻的印象。
從二維圖像到三維視頻
穩定性AI視頻技術多年來一直致力於為文本和圖像增添動態效果和生命力,而現在,它通過將2D圖像轉換為3D視頻,真正地賦予了視頻全新的維度。這項技術是視訊生成式AI領域的一項重大進展。
該公司新推出的穩定虛擬攝影機工具旨在處理單張圖像,並將其轉換為多視角動畫視頻,這意味著您可以旋轉視頻並從任意角度觀看。該工具讓創建創新的 3D 影片內容變得輕鬆方便。
這個概念並非全新;虛擬攝影機早已是電影和動畫製作的必備工具,它允許創作者在數位場景中自由移動和操控。但 Stability AI 在此基礎上,融入了大量的生成式人工智慧技術。結果是,使用者無需進行精細的 3D 場景重建或精確的攝影機校準,Stable Virtual Camera 就能僅憑一張影像,輕鬆創建流暢且深度精準的 3D 動態效果。

這款工具與其他人工智慧影片產生工具的不同之處在於,它並非透過猜測來產生動畫,也不依賴龐大的資料集或逐幀重建。穩定虛擬攝影機採用多視角部署流程,根據提供的影像產生新的視角,最終生成的模型看起來就像真實存在於現實世界中一樣。這種方法顯著提升了最終影片的真實感。

該工具允許使用者以電影級的精準度控制攝影機的運動軌跡,可以選擇縮放、環繞旋轉甚至螺旋路徑等多種運動方式。產生的影片可以採用行動裝置的垂直螢幕模式,也可以採用寬螢幕模式。虛擬攝影機一次只能處理一張影像,但最多可以處理 32 張影像。
Stability AI 已將該原型以非商業許可的形式發布,僅供研究用途。這意味著,如果您具備一定的技術能力,可以從 GitHub 取得程式碼進行試用。 Stability AI 一貫秉持開源原則,這也意味著 AI 開發者社群可以免費改進和擴展虛擬攝影機的功能。
3D人工智慧
當然,沒有完美的AI模型,Stability AI也坦誠地指出了它仍在改進的缺陷。如果你希望創造逼真的人物和動物,或是紋理特別複雜的材質(例如水),最終效果可能只像是低成本恐怖電影裡的東西。
如果你看到一些用它製作的視頻,畫面中物體視角會奇怪地移動,或者視角轉換導致畫面閃爍、出現鬼影效果,請不要感到驚訝。這款工具能否被廣泛採用,還是僅僅淪為專業電影製作人忽略的另一款人工智慧工具,還有待觀察。
更何況,它還面臨著來自 OpenAI 的 Sora、Pika、Runway、Pollo 以及 Luma Labs 的 Dream Machine 等 AI 視訊工具的激烈競爭。穩定虛擬攝影機必須在真實的電影製作環境中證明自身實力,才能超越僅僅作為一段有趣的演示影片而存在。
評論被關閉。