OpenAI 推出 Sora 模型,輸入文字即可 AI 產生電影級短片

OpenAI 推出 Sora 模型,輸入文字即可 AI 產生電影級短片

OpenAI 推出全新 Sora 模型,正式宣告生成式 AI 已經從文字進化到影片!從 OpenAI 展示的影片,幾乎分辨不出來是 AI 產生的,只需要輸入文字,就能夠產生 1 分鐘的短片,完全是電影級的影片,各式的細節,不論是街道、人物、招牌等都非常逼真,任意輸入幾個文字,人人都可以產生電影級的電影作品,各位可以一起來看看這個劃時代的 AI 進展。

Sora 是一個 OpenAI 全新推出的 AI 模型,可以從文字指令中建立逼真和富有想像力的影片場景,目前影片長度限制為 1 分鐘。

技術方面的原理則是 Sora 為一種擴散模型,它從看起來像靜態雜訊的影片開始產生,然後透過多個步驟消除雜訊來逐漸轉換成影片。與 GPT 模型類似,Sora 使用 transformer 架構,產生出卓越的擴展表現。

Sora 模型訓練過程中,還經過視覺藝術家、設計師和電影製作人等專家的建議進行修正。Sora 能夠產生具有多個角色、特定運動、主題/背景的準確細節進行影片生成。此模型不僅了解使用者在文字敘述中要求的內容,還了解這些東西在物理世界中的存在方式。

Sora 模型是建立在過去 DALLE 和 GPT 模型的基礎下而生的。它使用了 DALL·E 3 涉及到視覺訓練數據產生高度描述性的標題。因此,該模型能夠更忠實根據文字而產生符合描述的影片。

Sora 對語言有更深刻的理解,因此能夠精準產生符合使用者敘述的的生動角色,此外還可以在單部影片中建立多個鏡頭,準確保留角色和視覺風格。

關於文字的限制,若有暴力、色情內容、仇恨、名人肖像等文字敘述,OpenAI 會確保這些內容不會被顯示出來,以符合使用者政策。

不過目前 Sora 模型也有弱點,像是難以精準類比複雜場景的物理特性,並且可能無法理解因果關係。例如:跑步機上的人往反方向跑,或是一個人咬一口餅乾,餅乾卻可能沒有咬痕等情形。

資料來源:OpenAI

如何輸入文字讓 AI 產生影片?OpenAI 推出 Sora 模型,產生逼真電影級影片

如何輸入文字讓 AI 產生影片?OpenAI 推出 Sora 模型,產生逼真電影級影片 相關文章


參考內容推薦

OpenAI推出新款AI模型 打字就可生成影片!

OpenAI稱,Sora能夠生成的影片內容,可有多個角色,或是特定類型的動態畫面,也將根據提示的主題與背景精準生成影片內容,並可在單一影片中呈現多個鏡頭。 還可以為靜態圖像製作動畫。 但OpenAI強調,Sora還是個尚未完成的模型,還無法處理複雜的物理或空間細節,因此會生成不合邏輯的影片,仍有許多缺陷需要修正,OpenAI舉例,在Sora生成的影片中有人咬了一口餅乾,但餅乾並未留下咬痕。 而在OpenAI釋出的範例中,人類會在跑步機上跑錯方向。 OpenAI同時指出,正在建立可以識別Sora生成影片的檢

徹底炸了!今天,又一次見證歷史!

4 小時前 — 來源:中國基金報. 中國基金報泰萊. 兄弟姐妹們啊,OpenAI發佈新工具Sora,可根據文字生成逼真AI影片,再一次,震驚了世界! OpenAI首個影片生成模型 ...

OpenAI推Sora,專家實測打字就能做影片!還秒生恐龍

7 小時前 — ChatGPT團隊OpenAI, 15日公布影片生成模型Sora,只要輸入簡短文字描述,就能生成一分鐘逼真影片!目前僅開放給少數專業人士試用,但已有人網上實測展現 ...

OpenAI可生成影片了!AI新品「Sora」 輸入文字就能產生影像

12 小時前 — 人工智慧(AI)知名新創公司OpenAI介紹公司新的AI系統,可基於使用者鍵入的文字,生成逼真的影片。這令OpenAI成...

影》輸入文字就能做電影!OpenAI新模型「Sora」效果太驚人

5 小時前 — OpenAI宣布推出新模型Sora,透過文字指令就能創造出逼真的1分鐘短影片。(製圖:中時新聞網 ...

OpenAI公布短影片生成AI模型Sora,能理解指示、產出複雜 ...

4 小時前 — OpenAI昨(5)日公布最新生成式AI模型Sora,未來能讓使用者輸入文字即可產生短影片,目前已展開不公開的安全及功能測試。 Sora可依據用戶輸入的文字 ...

OpenAI推AI影片生成模型「Sora 」!文字秒變60秒驚人高畫質影片 ...

OpenAI今 (16)日發佈了最新的影片生成AI模型Sora,該模型能將文字描述轉換為長達60秒影片,OpenAI也在這些影片下方公開其文字指令。 圖:翻攝自OpenAI 官網 [Newtalk新聞] OpenAI今 (16)日發佈了最新的影片生成AI模型 Sora...

OpenAI 再展黑科技力!發表文字生影片 AI「Sora」支援 1080p、最 ...

OpenAI 今天正式發表文字轉影片生成式 AI「Sora」! 就跟 DALL-E 一樣,只要給出文字敘述(或靜態圖片也可以),Sora 就能自動生成 1080p 動畫,各種不同的角色、動作類型和背景細節都能盡可能生成! 經過測試,Sora 可以生成各種風格(包括真實電影,動漫風或黑白)的影片,長度可達一分鐘,遠遠超過目前大多數其他市面上的文字轉影片模型,而且這些影片都盡可能在保持合理的連貫性上,像是他們展示的第一款影片中除了文字之外,街上水窪的倒影、衣服隨走路的擺動效果,甚至是主角臉上的肌理都栩栩如生。

OpenAI 發表文字生成影像模型「Sora」,快速創造逼真電影場景

OpenAI 指出,透過簡短或詳細文字敘述,抑或是提供靜態圖片,Sora 就能產生具有多個角色、不同運鏡和背景細節的 1080p 影片。 此外,Sora 還具有影片剪輯能力,可以填補剪輯缺失造成的錯誤細節。 「Sora 對語言有著深刻理解,使其能夠準確解釋提示文字並產生引人注目內容表達充滿活力的情感」,OpenAI 在官網介紹寫道,「這款模型不僅了解用戶透過提示文字提出的要求,還了解這些事物在物理世界的存在方式。 」 對初學者而言,Sora 可以產生各種風格(如真實感、動畫、黑白等)影片,最長可達 1 分

影片創作者惡夢來了!OpenAI 公開最新文字生成影片服務「Sora」 ...

OpenAI 於今日公開他們最新 AI 模型「 Sora 」,Sora 可以透過文字生成長達一分鐘的影片,同時還能保持視覺品質並依照使用者輸入的文字製作出符合指令的影片。 OpenAI 現在正嘗試教導 AI 理解並模擬物理世界的運動,目標是將 Sora 訓練成能幫助人們解決需要與真實世界互動的問題的模型。 [embed]https://TWITTER.com/gdb/status/1758193811489243408?s=20 [/embed] 影片創作者惡夢來了! OpenAI 公開最新文字生成影片服