EPISODE · Jul 24, 2026 · 4 MIN
Black Forest Labs 發布 FLUX 3 支援音訊影片生成
from EasyVibeCoding Podcast · host Black Forest Labs
Black Forest Labs 發布 FLUX 3 支援音訊影片生成。 章魚眼睛的高畫質特寫照片,清晰展現其金黃色的瞳孔與獨特的皮膚紋理。 Black Forest Labs 於 2026 年 7 月 23 日正式發表全新多模態基礎模型 FLUX 3,採用單一統一架構同步學習影像、影片與音訊,並將應用範圍延伸至真實世界的物理人工智慧(Physical AI)與機器人動作預測。FLUX 3 Video 目前已開放早期存取(Early Access),使用者可透過 FLUX 3 影片早期存取申請 提出申請,官方技術網誌亦同步公開詳細架構與規劃,詳見 FLUX 3 官方技術說明。 簡約插畫風格的夜景圖,描繪海面上的一座燈塔向右側投射出明亮的黃色光束,一輪弦月高掛於深藍色夜空中。 核心功能與模態整合 影像、影片與音訊聯合學習:透過名為 Self-Flow 的自研方法,打破各模態獨立訓練的限制,讓使用者或模型理解物件如何聚合、物體如何移動及事件如何發出聲響,進而建立真實世界的物理動態表示。 FLUX 3 Video:支援最長 20 秒、720p 解析度的影片與原生音訊聯合生成,涵蓋文字轉影片、圖片轉影片、影片轉影片、關鍵影格過渡及多語種對話等功能,並在早期評測中超越 Grok Imagine Video、Kling V3 Pro、Runway Gen-4.5 等多款同級模型。 FLUX 3 Image:具備高度靈活的風格多樣性與精準的跨語言文字渲染能力,後續將於幾週內陸續開放早期存取。 開放權重與分階段推出:官方預計在接下來幾個月內,依序推出原生音訊影片生成、合作夥伴動作預測、影像合成編輯 API,以及多模態主幹網路(Backbone)的開放權重版本(FLUX 3 Dev)。 淺黃色背景襯托的產品照,一張帶有亮藍色管狀金屬結構與紅色絨毛坐墊的現代設計感椅。 機器人動作預測與 FLUX-mimic 實戰 結合視覺與動作:Black Forest Labs 與機械手臂公司 mimic robotics 合作開發 FLUX-mimic 專文說明,將 FLUX 3 影片主幹網路結合機器人深度學習,解碼出支援精細抓取與生產部署的動作模型。 奧迪(Audi)產線驗證:該技術目前已實際部署於奧迪的車輛與物流產線中進行測試。 跨領域模型架構:透過將動作預測納入訓練課程,模型在經歷短暫的微調適應期後,成功在單一主幹網路上同時支撐內容創作與物理人工智慧兩大應用家族。 一輛深色轎車在空曠的停車場地面上迴轉並摩擦出環狀胎痕。 推出時程與未來規劃 循序漸進的發布計畫:所有核心能力皆會經過嚴格的安全測試與早期存取階段,以確保系統穩定推出。 下一代模型研發:團隊目前已著手研發下一代模型,目標是將感知、動作與語言預測更進一步整合至同一個統一模型中。 「FLUX 3」字樣醒目置中,周圍環繞著多個代表圖像、影片、動作與音訊等多媒體生成主題的預覽畫面與標籤。 一隻帶有斑點的灰色馬匹在草原上奔馳,背景是陰暗的天空,且空中隱約有魚類漂浮。 一棵大型樹木的茂密樹冠與枝幹剪影,整體以深綠色調與黑色的高對比風格呈現。 各種高品質 AIGC 影片生成與視覺效果的宣傳短片,最後預告 FLUX 3 即將推出。 影片介紹由 Black Forest Labs 與 mimic 合作開發的全新多模態視覺動作模型 FLUX-mimic,展示其在機器人自動化、軟體操作與工業製造(如 Audi 產線應用)上的突破性進展。 影片介紹由 Black Forest Labs 與 mimic 合作開發的全新多模態視覺動作模型 FLUX-mimic,展示其在機器人自動化、軟體操作與工業製造(如 Audi 產線應用)上的突破性進展。 影片中的 Prompt 與操作: 操作步驟: 1. (00:00)機器人手臂進行管線與零件組裝 2. (00:24)機器人自主分類收納黑色管狀零件 3. (00:58)雙機器人手臂進行物件抓取與互動演示 4. (02:04)FLUX-mimic 機器人進行車門零組件與膠條組裝 5. (02:31)雙機器人手臂進行 Audi 車門飾條/膠條自動化安裝 原文:https://easyvibecoding.app/curated/2666-black-forest-labs-launches-flux-3-audio-video
Embed this episode
Ready to play
Black Forest Labs 發布 FLUX 3 支援音訊影片生成
No transcript for this episode yet
Similar Episodes
No similar episodes found.
Similar Podcasts
No similar podcasts found.