AI好好用報導
編輯:楊文
Runway三天更新兩次,Luma全力狙擊,AI影片圈狼煙再起。
Runway 和 Luma 這倆「死對頭」,又開始暗暗較勁。
從上週六開始,Runway 僅三天就上新了兩次。
一次是推出影片擴充套件(Expand Video)功能,一次是釋出了影像生成模型 Frames。
Luma 也不甘示弱,昨晚幾乎與 Runway 同時,推出了全新的 Dream Machine,其中也包括 AI 生圖功能。
這兩大 AI 影片「扛把子」,都心照不宣地盯上了 AI 生圖這塊蛋糕,這下子壓力給到 Midjourney、Stable Diffusion 和 DaLL・E 了。
- Runway 連結:
https://runwayml.com/ - Luma 連結:
https://lumalabs.ai/dream-machine
-1-
Runway難道沒有創新瓶頸?
Runway 總有新點子。
去年被玩壞的 AI 擴圖,Runway 靈機一動把它用在了影片上。
上週六,Runway 推出了影片擴充套件(Expand Video)功能,並已開始逐步推出,很快就會向所有人開放。
它可以在原始畫面周圍生成額外內容,靈活調整影片比例,讓橫屏變豎屏,反之亦然。
在保持視覺一致性的同時,無縫擴充套件畫面,用新構圖創造新故事。
和 AI 擴圖一樣,它也能根據文字提示,擴充套件出讓人意想不到的鏡頭。
此外,將多個擴充套件鏡頭連線在一起,我們還可以建立出電影般的運鏡效果。
僅隔一天時間,Runway 昨晚再次上新,推出了影像生成模型 ——Frames,在風格控制和視覺保真度方面表現出色。
用官方的話來說,「有了 Frames,你可以構建代表非常特定觀點和審美特徵的世界,精確設計你想要創造的世界的外觀、感覺和氛圍。」
世界 1089:場景佈置(Mise-en-scène)
場景佈置透過經典電影的視覺語言重新想象數字肖像畫,每幅影像都捕捉到了標誌性構圖風格的精髓。在光影精心編排的場景中,主體浮現出來。
世界 3190:1980 年代特效化妝(1980s SFX Makeup)
這是一個復興實用特效時代的世界,那時生物是由乳膠和油漆而非畫素創造的。
每一件作品都致敬了那些手工製作的怪物和血腥場景,它們定義了一個真正實用創新的年代。
世界 3204:1970 年代專輯藝術(1970s Album Art)
兇猛的動物、戲劇性的攝影與實驗性字型和飽和色彩相結合。
每一款設計都是對新興音樂專輯大膽美學的重新想象,當時兇猛的生物和引人注目的肖像統治了黑膠唱片藝術。
世界 4027:日本雜誌(Japanese Zine)
復古動漫美學與夢幻般的科幻相遇,在五彩繽紛的花朵和飛碟中爆發。
那種獨特的 70 年代漫畫感覺——大膽的線條、宇宙背景,以及浪漫與超現實主義的不可抗拒的混合。
世界 7621:數字圖片配置檔案(Digital Picture Profiles)
當代肖像畫與建築對稱性和電影色彩分級相結合。
Frames 捕捉到了那種獨特的藝術院線氣質——中性調色盤、決定性瞬間和精心考慮的構圖,讓主體和空間合二為一。
世界 0981:動態範圍景觀 (Dynamic Range Landscapes)
大自然全光譜的色彩以生動的細節展開。
從遙遠山峰的深邃陰影到礦物形成的絢麗紋理,從晶瑩剔透的鹽田到陰鬱的山脈,大地與天空的交織,呈現出廣闊的色調細節。
世界 8421:一次性用品(Disposables)
未經修飾的閃光照相機與真實的瞬間相遇,展現了所有顆粒感十足、光線洩露的輝煌。
無可挑剔的35毫米膠片魅力——過曝的高光、鮮豔的色彩變化,以及不經意間捕捉到的照片中那種原始活力。
世界 1009:靜物 (Still Life)
日常物品透過構圖和自然光展現出它們的靜謐詩意,每一幅影像都將平凡之物轉變為迷人之景。
世界 8862:雜誌拼貼 (Magazine Collage)
復古剪貼畫和波普藝術在超現實的新敘事中碰撞。
每件作品都疊加了撕破的照片、大膽的排版和出人意料的並置,創造出模糊幽默與不安之間界限的構圖。
世界 3107:運動中的物體(Objects in Motion)
每個構圖都定格了一個受控破壞的瞬間,將簡單物品轉變為動態雕塑。
-2-
Luma 半路狙擊
就在 Runway 推出新模型半小時後,Luma 也於昨晚釋出了全新的 Dream Machine。
全新到什麼程度呢?
首先,直觀的互動設計。我們可以用自然語言描述想法,或上傳參考影像來指導輸出,無需複雜的提示工程。
其次,Luma 現在不僅可以生成影片,還可以生成視覺效果絕佳的影像。
這是由 Luma Photon 提供支援,一個號稱「最具創造力、最智慧、最快的影像 AI 模型」。
此外,它還推出了不少功能。
參考重繪功能:使用者可以將單一圖片轉化為動態角色,並在多種場景中使用,甚至可以將一張照片與另一張照片融合,創造出獨特的角色。
首次實現一致性角色:使用者可以用來自單個影像的一致角色製作動畫故事情節,這種一致性在影片創作中是前所未有的。
影片創作工具:使用強大的 DM 1.6 影片模型,透過攝像 Dream Machine 提供「鏡頭運動」、「起始與結束幀」和迴圈功能。
頭腦風暴功能:對於缺乏靈感的使用者,Dream Machine 的頭腦風暴功能可以提供各種創意點子,幫助他們找到創作方向。
-3-
一手實測
與 Runway 的逐步開放不同,Luma 新功能現在就可以直接在 iOS 和 Web 上免費試用。
其玩法也很簡單。Luma 為此還出了個官方教程。
接下來,我們就實測一下。
我們先輸入一段提示詞:A fashionable girl was holding a bouquet of flowers,16:9(一個時髦的女孩手捧一束鮮花。)
接著讓它按照上面第一幅圖的風格,繼續生成。
然後選取其中兩張圖片作為關鍵幀,生成一段 5 秒影片:
X 博主 @NimrodEshed 分享了他整個創作過程。
輸入提示詞:
imdb13000film photography of a more real hot air balloon shaped like a giant sushi roll floating in the sky of Singapore
among the skyscrapers. The balloon's body is wrapped in shiny black nori with bright green avocado, orange salmon, and
white rice accents. The basket below mimics chopsticks, adding a whimsical touch to this sushi-inspired balloon soaring above Singapore's cityscape.
中文版:
在新加坡的摩天大樓天空中,一個更真實的熱氣球,形狀像一個巨大的壽司卷,正在漂浮。氣球的表面包裹著閃亮的黑色海苔,上面點綴著鮮綠色的牛油果、橘色的三文魚和白色的米粒。下面的籃子模仿著筷子,為這個以壽司為靈感的氣球增添了一抹奇思妙想,它在新加坡的城市景觀上方翱翔。
從中選出一張圖片,以此為參考,讓它生成一段影片。
X 博主 max cas 則用 Luma 生成了一些小怪物。
並將其製作成影片:
Runway連結:
https://runwayml.com/
Luma連結:
https://lumalabs.ai/dream-machine
參考連結:
https://x.com/runwayml
https://x.com/LumaLabsAI
https://runwayml.com/research/introducing-frames
https://x.com/minchoi/status/1861123346923941889
文章影片連結:https://mp.weixin.qq.com/s/rVWnlCsYqqT-BnC_3lDCnw
以後我們會帶來更多好玩的AI應用,也歡迎大家進群交流。