@googlegemma：Google Gemma 推出 Magenta RealTime 2 實現即時音樂合成。 核心功能與應用 Magenta RealTime 2 (MRT…

Google Gemma 推出 Magenta RealTime 2 實現即時音樂合成。 核心功能與應用 Magenta RealTime 2 (MRT2) 是一套專為 Apple Silicon 架構 MacBook 設計的音樂模型，強調如同演奏樂器般的即時互動體驗。該模型支援透過 MIDI、文字提示與音訊輸入進行合成，並提供多種應用與整合方式： 「Jam」應用程式：提供風格預設與 MIDI 控制，讓使用者能快速上手進行即時演奏。 「Collider」應用程式：在 2D 平面上混合多種提示詞，透過碰撞產生全新的音樂風格與音色。 MRT2 (Plugin & App)：提供 AU (Audio Unit) plugin，讓使用者能在數位音訊工作站 (DAW) 中完整調用 MRT2 模型，獲得最大化的控制權。 創意程式開發擴充：支援 Max/MSP、PureData 與 SuperCollider 等環境，方便開發者快速建構自定義的音樂體驗。 關鍵技術特性 MRT2 具備強大的即時處理能力，能透過以下方式進行音樂創作與音效設計： MIDI Steering：透過按住音符或和弦，模型會自動生成跟隨和聲的完整合奏，或與合奏進行即時演奏。 Text-to-Synth：輸入描述（如「string ensemble」、「disco funk」）即可生成全新的、可演奏的 MIDI 樂器。 Audio Cloning：匯入短音訊片段，即可模擬該聲音並將其轉化為可演奏的樂器。 提示詞混合：在音訊與文字提示間平滑過渡，探索全新的音樂風格。 Sound Design：透過結合音樂與音效，並動態調變混亂度（chaos）來創造新的紋理。 姿態控制：支援透過 LFO、MIDI 控制器或攝影機輸入，以低延遲回應連續手勢，即時調變潛在空間（latent space）。 安裝與執行需求 使用者可前往 Magenta RealTime 2 官網下載應用程式與 plugin。安裝與執行步驟如下： 下載並解壓縮檔案。 獨立應用程式：直接雙擊執行，或拖曳至「應用程式」資料夾以保留安裝。 Plugin：將檔案拖曳至「應用程式」資料夾進行註冊，隨後在 DAW 中重新整理 AU Plugins 並拖曳至 MIDI 軌道。 首次啟動時，應用程式會自動下載模型權重（Base 模型約 2.5GB，Small 模型約 450MB）。 確保 DAW 或系統「音訊 MIDI 設定」中的取樣率設定為 48kHz。 硬體需求方面，Base 模型建議使用 M3 Pro / M2 Max 或更高階晶片；Small 模型則相容於所有 Apple Silicon MacBook。此外，該模型採用開源權重，框架亦完全開源，開發者可透過 GitHub 參與建構。該工具強調本地運行，並透過多樣化的輸入控制與模型能力，讓使用者能即時探索聲音設計與音樂創作的無限可能。 這段影片展示了 Magenta RealTime 2 (MRT2) 模型，使用者能透過直覺的 UI 介面即時創作音樂。原文：https://easyvibecoding.app/curated/1771