幾何更乾淨、細緻,工作流更合理,Meshy的3D生成能力又進化了,所有人都可以免費試用。
天命人,你現在已經到哪兒了?
毫無疑問,不論是朋友圈還是各個網路平臺,這兩天最火的是《黑神話:悟空》。
哪怕你平時根本不玩遊戲,也可能因為破紀錄的銷售額,或者全網刷屏的「自來水」,而關注到這個被譽為「創造了中國遊戲歷史」的超級大作。
不過《黑神話:悟空》首次出圈,是因為一支實機演示影片。這支擁有近六千萬播放量的預告片,宣告著在西方文化主導的遊戲行業,中國玩家即將迎來他們夢寐以求的根植於中國文化的英雄主角。
而預告片中直擊人心的視覺效果,無疑是《黑神話:悟空》大爆的直接原因。無論是對每個小怪形象的精心設計,還是廟宇之中精美的雕塑與建築,遊戲科學對視覺效果的雕琢,都做到了極致。
想把猴哥從這樣的一張原畫,變成能在遊戲中施展「72 變」的 3D 物件,中間要經過建模、渲染、最佳化等繁瑣流程。
從原畫 到建模
相比人物,場景建模更為複雜,《黑神話・悟空》的美術總監楊奇在採訪中曾表示:一些場景建築的原型需要到實地去考察和研究,形成自己的數字資產,再經過長達數月加工和美化,最後才能呈現出如此精美的畫面。在掃描第一版重慶大足石刻時,建模一度達到誇張的「12 億個面」,可見背後耗費的工作量何其巨大。
雖然這種工作量的人工精度難以企及,但 AI 工具的建模效果也已經足夠能打。想要得到下圖這樣的建模效果只需要 1 分鐘。鐵甲上的花紋清晰分明,邊緣也沒有模糊和閃爍的跡象。
只需要選擇雕塑風格,再輸入「Black Myth:Wukong」與對應的角色,不需要高配置的電腦,直接就能得到接近遊戲風格的 3D 物件:
這款 3D AIGC 工具來自一家創業公司 Meshy 。公司聯合創始人兼 CEO 胡淵鳴是計算機圖形學知名學者,畢業於清華大學姚班,MIT 博士,也是「太極」(TaiChi)程式語言作者。
截至目前,Meshy 已經更新到了第 4 代。從 2023 年 11 月登場,Meshy 就以快速、保真、操作簡易走在行業前列。Meshy 3 在提升文生 3D 的真實感,以及圖生 3D 模型的自然度與細膩度都往前邁了一步。這次的 Meshy 4 又帶來了哪些新的進展呢?乾淨、充滿細節的幾何網格
在 Meshy-4 中,胡淵鳴團隊突破了 3D AI 生成的一些技術難題,無論你是使用文字到 3D 還是影像到 3D,現在都能體驗到生成模型的幾何質量大幅提升。
透過改進的生成演算法,Meshy-4 生成的 3D 模型具有非常乾淨的硬表面,沒有以前版本中困擾生成結果的凸起和凹痕。
此外,Meshy-4 生成的幾何細節也得到大大增強,允許使用者建立高度複雜的模型,捕捉以前 AI 生成的模型無法捕捉到的細微差別。
團隊還更新了「發現」頁面,以配合 Meshy-4 的模型質量增強功能。更新之後,當你將滑鼠懸停在 Meshy-4 生成的模型上時,你可以立即顯示其無紋理版本。如此一來,你可以仔細檢查模型的底層幾何形狀,看到 Meshy-4 改進演算法提供的乾淨堅硬表面和複雜細節。
新的文字到 3D 工作流
Meshy-4 使用者互動介面中最大的更新是新的文字到 3D 工作流。在以前的版本中,文字到 3D 過程分為粗略階段(Coarse stage)和細化階段(Refine stage)。雖然這種方法旨在逐步提高模型質量,但它經常讓使用者對最終結果感到不確定,Meshy 團隊收到了大量關於細化模型偏離粗略結果的使用者反饋。
因此,在 Meshy-4 中,他們以一種更獨特和專注的方式將「文字到 3D」分割為兩個步驟:建模和紋理。
建模階段:在這個階段,Meshy-4 根據文字提示生成 4 個無紋理模型。這一階段生成的網格乾淨且高度詳細,為最終資產的生成提供了堅實的基礎。
紋理階段:建模階段完成後,你可以選擇一個生成的網格結果來繼續生成紋理。紋理是在之前版本的細化階段直接生成的。最終生成結果在視覺上非常連貫。
Meshy 團隊表示,這個新的文字到 3D 工作流也為後續專注於建模或紋理的新功能鋪平了道路。二者的分離能夠讓使用者更方便地控制生成結果,例如在生成紋理之前編輯網格或為同一模型自定義多種顏色變體。
一次不行,再試一次
有人說現在的 AI 生成就像抽卡遊戲,很難知道哪次能抽到好的結果。因此,Meshy 團隊在新版本中加了一個「重試」功能。
即使你的紋理已經生成好了,「重試」也是可以用的。但需要注意的是,點選「重試」之後,之前的結果會被丟棄,因此最好慎重一些。
由於重試涉及更多的計算資源,該功能被設定為僅訂閱使用者可用。對於每個模型:
Pro 使用者有 4 次重試機會。
Max 使用者有 8 次重試機會。
Max Unlimited 使用者有無數次重試機會。
多個模型可供選擇
在之前釋出的 Meshy-3 Turbo 中,團隊引入了一個用於文字到 3D 生成的模型選擇器,它允許使用者在 Meshy-3 和 Meshy-3 Turbo 演算法之間切換。Meshy-4 進一步擴充套件了此功能,你可以在下面的選項中選擇文字到 3D 和影像到 3D 任務中的生成模型。
Meshy-4:Meshy 最新、最先進的模型,能夠生成平面幾何、銳角和複雜的細節。
Meshy-3 Turbo:Meshy 最快的模型,細節少一些。適用於有機建模或高度藝術風格。
Meshy-3:Meshy 的傳統模型,僅適用於文字到 3D。
另外,在新版本中,影像到 3D 中的「Mode」選項已被替換。這是因為它與底層模型完全對應:有機模式(Organic Mode)由 Meshy-3 Turbo 驅動,而堅硬表面模式(Hard Surface Mode)由 Meshy-4 驅動。
胡淵鳴與 Meshy 團隊
Meshy 是胡淵鳴創立的一家初創公司,主要研究如何用 AI 生成更好的 3D 資產。
胡淵鳴是計算機圖形學知名學者,畢業於清華大學姚班。
2019 年,在 MIT 讀博期間,他主導開發了一個名為「太極」(Taichi)的開源計算機影像庫,在計算機圖形學領域引發廣泛關注。2021 年 3 月,他透過了 MIT 電氣工程與電腦科學博士論文答辯,之後回國創業,創立了名為「太極圖形」的公司。該公司在成立不到一年的時間裡就完成了兩輪融資,包括 5000 萬美元的 A 輪融資。
2023 年 11 月,胡淵鳴的全新創業專案 Meshy 曝光。新公司打造的線上生成 AI 工具(初版 Meshy )只需一分鐘,即可使用 Al 生成 3D 內容(模型)。在之後的幾個月裡,這個工具迅速迭代,如今已經迎來第四個大的版本。
據悉,Meshy 團隊成員遍佈全球,來自 MIT、哈佛大學、英偉達、谷歌、 Meta 等知名機構。他們希望透過提供一種直觀、輕鬆的內容建立方式,徹底改變當前 3D 內容製作生態系統。
不過,他們也清楚,羅馬不是一天建成的。所以他們從未設想未來會有一勞永逸的 AI 完全取代藝術家和設計師的工作。他們更希望自己打造的工具能成為增強創造力的工具,推動想象力的邊界。
參考連結:https://www.meshy.ai/zh/blog/meshy-4-break-grounds