OpenAI Sora對遊戲行業影響最大

banq發表於2024-02-17

OpenAI推出透過文字生成影片的Sora,秒殺pika等現有影片生成AI,以下是推友討論:

1、OpenAI Sora是一個資料驅動的物理引擎
如果你認為OpenAI Sora是一個像DALLE一樣的創意玩具? 請再想想。Sora是一個資料驅動的物理引擎。它是許多世界的模擬,真實的或幻想的。模擬器學習複雜的渲染,“直觀”的物理學,長視野推理和語義基礎。

OpenAI Sora是一個端到端的擴散變換器模型。它直接輸入文字/影像並輸出影片畫素。

Sora 透過海量影片,以梯度下降的方式在神經引數中隱含地學習物理引擎。

Sora 是一個可學習的模擬器,或稱 "世界模型"。當然,它不會在迴圈中明確呼叫 UE5,但有可能將 UE5 生成的(文字、影片)對作為合成資料新增到訓練集中。

2、Sora的推理管道

  • 基於CLIP
  • 文字到3D物件
  • 3D物件到裝備/路徑 
  • 遊戲引擎中的物件+裝備+路徑 
  • 遊戲引擎模擬 
  • 捕獲模擬作為影片擴散模型的輸入,該模型可以訪問前面的許多幀 


3、Sora從頭開始構建Minecraft
我從來沒有想過OpenAI會成為下一個遊戲引擎,但現在我不再那麼確定了。OAI自己說這只是一個影片傳播模型。訓練過程/資料收集def使用遊戲引擎。

人們現在都認為Sora對好萊塢電影影響大,但實際上認為它對影片遊戲開發具有更大的影響,至少在不久的將來,它對遊戲行業的打擊將比對電影行業的打擊更大。

我可以想象,在未來的遊戲開發過程中,你只需向人工智慧描述一個大致的輪廓,然後讓它生成一個可玩的初始版本,你只需繼續玩下去,同時給它反饋和意見,讓它動態地改變。

然後,人工智慧會維護一種遊戲定義檔案,用來保持機制、風格、情節等的一致性,同時在玩家與之互動時填補空白。

因此,作為遊戲開發者,你只需不停地玩這個東西,並指導人工智慧如何調整它,當你對它足夠滿意時,你就可以與其他人共享該遊戲檔案,他們就可以始終如一地體驗同樣的遊戲,甚至可以根據自己的喜好隨意調整。

相關文章