挑戰 Sora?Luojian 科技開源 Open-Sora 2.0 視訊生成模型 — 更便宜、更快、更強!

開頭 — Sora 太貴?Open-Sora 2.0 來了!

你知道嗎?OpenAI 的 Sora,一款令人驚艷的視訊生成模型,訓練成本動輒上百萬美元,被譽為視訊生成界的「勞斯萊斯」。但現在,Luojian 科技帶來了平價又強悍的挑戰者 —— Open-Sora 2.0

只花了 20 萬美元(約等同於 224 張 GPU 的計算力),就成功訓練了一個擁有 110 億參數 的商業級視訊生成模型。這不只是讓人跌破眼鏡,更像是用平價家用車的成本打造了一輛賽車!


實力派對決:與 OpenAI Sora 的差距縮到不到 1%!

別以為便宜就代表妥協。Open-Sora 2.0 的實力可不是說說而已。

在權威視訊評測指標 VBench 和使用者偏好測試中,它的表現穩穩咬住業界標竿,包括 OpenAI 的 Sora,以及騰訊的 混元視頻(HunyuanVideo)與擁有 300 億參數Step-Video

最讓人驚艷的是:

  • VBench 測試 中,Open-Sora 2.0 與 OpenAI Sora 的差距已從 4.52% 縮小到僅 0.69%!幾乎已經達到性能平價。
  • 它甚至超越了騰訊的 HunyuanVideo,在低成本下展現更高的生成品質。
  • 在使用者偏好測試裡,Open-Sora 2.0 在 視覺呈現、文本一致性動作表現 等至少兩項指標上,擊敗了開源的 HunyuanVideo 和商業模型 Runway Gen-3Alpha。

這是一場真正的平價革命 — 花更少的錢,達到接近甚至超越頂級模型的效果。


憑什麼便宜還這麼強?Open-Sora 2.0 的秘密

你可能會問:這麼便宜,效果還這麼好,怎麼做到的?

Open-Sora 2.0 的成功關鍵,來自幾個核心策略:

🎬 技術突破:優化視訊生成品質

  1. 延續 Open-Sora 1.2 架構:繼續採用 3D 自動編碼器(3D autoencoder)與 Flow Matching 訓練框架,強化視訊時序一致性與畫質細節。
  2. 3D 全注意力機制(3D full attention):提升對視訊動作與場景變化的捕捉能力,讓畫面更流暢自然。

📉 降低訓練成本:把錢花在刀口上

  1. 嚴格資料過濾:確保訓練資料的高品質,從源頭提升效率,避免無謂的計算浪費。
  2. 優先低解析度訓練:先學會影片動作細節,再逐步提升解析度,因為高解析度訓練的成本往往是低解析度的數十倍!
  3. 影像到視訊(I2V)優先訓練:加速模型收斂,同時在推理階段可透過 文本到影像到視訊(T2I2V) 微調畫面質感。
  4. 高效平行訓練方案:結合 ColossalAI 與系統層優化技術,如序列平行化、ZeroDP、梯度檢查點(Gradient Checkpointing),大幅提升計算資源利用率。

推理速度大幅提升:10 倍速影片生成!

為了解決影片生成耗時過長的痛點,Open-Sora 團隊還訓練了一個 高壓縮影片自動編碼器(4×32×32),把生成 768px、5 秒影片的推理時間,從 30 分鐘縮短到不到 3 分鐘

這表示,不用再等半個小時才能看到成果,未來我們可能在幾分鐘內,就能生成高品質影片內容!


開源精神:讓更多人參與視訊生成技術革命

真正讓人感動的是,Open-Sora 2.0 不只開源模型權重和程式碼,連完整的訓練流程都公開了

很多技術團隊選擇開源模型但保留細節,然而 Open-Sora 的透明度讓全球研究者與開發者,都有機會參與並推動視訊生成技術的發展。

事實上,根據第三方統計:

  • Open-Sora 的學術論文引用數在半年內已突破 100 次,穩坐全球開源影響力排行榜的前段班。
  • 目前已成為全球最具影響力的開源視訊生成專案之一。

這不只是技術上的突破,更是一場開源文化的勝利。


結語:Open-Sora 2.0 是視訊生成界的平價革命

Luojian 科技推出的 Open-Sora 2.0,不僅成本低、效能強,還真正秉持開源精神,讓更多人有機會參與 AI 視訊生成的前線研究。

它讓視訊生成技術,不再是巨頭獨享的高牆花園,而是一個開放共創的實驗室。

也許,有一天,你我都能用自己的電腦,創作出媲美好萊塢的 AI 動畫短片。

想親自體驗或參與這場開源革命嗎?以下是資源連結:

🔗 GitHub 開源庫Open-Sora 專案

📄 技術報告Open-Sora 2.0 技術報告

準備好了嗎?讓我們一起站在巨人的肩膀上,改變未來的視訊生成世界!

Share on:
Next: Google 開源最新多模態模型 Gemma-3:效能卓越、運算成本降十倍
DMflow.chat

DMflow.chat

廣告

DMflow.chat:智能客服新世代!支援持久記憶、客製欄位,無需額外串聯即可輕鬆連接資料庫表單,整合多平台溝通,助您高效提升服務與行銷效率!

BEN2:精準影像前景分割的 AI 解決方案
8 February 2025

BEN2:精準影像前景分割的 AI 解決方案

BEN2:精準影像前景分割的 AI 解決方案 在影像處理領域,如何快速且準確地去除背景,一直是業界關注的重點。傳統方法依賴綠幕技術或手動摳圖,耗時且成本高昂。如今,BEN2 (Backg...

探索 FaceFusion 的奇幻世界 - 換臉AI
15 January 2025

探索 FaceFusion 的奇幻世界 - 換臉AI

探索 FaceFusion 的奇幻世界 - 換臉AI 本次介紹將深入探討人臉融合技術 (FaceFusion) 的原理、應用及未來發展趨勢。我們將從人臉檢測、特徵提取到圖像融合等技術層面...

TransPixar:Adobe 最新突破性透明影片生成技術
11 January 2025

TransPixar:Adobe 最新突破性透明影片生成技術

TransPixar:Adobe 最新突破性透明影片生成技術 前言 在影片生成技術快速發展的今日,Adobe 推出了革命性的 TransPixar 技術,這項創新不僅能透過文字和圖像生...

LatentSync:突破性的 AI 口型同步技術,讓影音製作更上一層樓
11 January 2025

LatentSync:突破性的 AI 口型同步技術,讓影音製作更上一層樓

LatentSync:突破性的 AI 口型同步技術,讓影音製作更上一層樓 在影音內容製作領域中,口型同步一直是個重要且具有挑戰性的問題。LatentSync 作為一個創新的端到端口型同步...

突破數位創作極限!TANGO:一鍵生成數字分身的AI神器
21 December 2024

突破數位創作極限!TANGO:一鍵生成數字分身的AI神器

突破數位創作極限!TANGO:一鍵生成數字分身的AI神器 簡介 想像一下,您只需一段影片和音頻,便能生成與之完美同步的虛擬人影像。不論是新聞播報、虛擬主播,還是教育內容,TANGO都能助您輕鬆...

Meta推出AI影片生成器:挑戰OpenAI和Google,人工智能競賽再升溫
7 October 2024

Meta推出AI影片生成器:挑戰OpenAI和Google,人工智能競賽再升溫

Meta推出AI影片生成器:挑戰OpenAI和Google,人工智能競賽再升溫 描述 Facebook母公司Meta推出全新AI工具Movie Gen,可根據文字提示生成或編輯影片。這項技術不...

Claude.ai 全新分析工具登場:AI 數據分析能力再進化
25 October 2024

Claude.ai 全新分析工具登場:AI 數據分析能力再進化

Claude.ai 全新分析工具登場:AI 數據分析能力再進化 📊 重點摘要 Claude.ai 推出內建分析工具功能 支援 JavaScript 代碼執行與數據處理 所有 Cl...

VIDU 推出突破性 AI 視頻功能:讓您的創意更加連貫一致(什麼是VIDU)
12 September 2024

VIDU 推出突破性 AI 視頻功能:讓您的創意更加連貫一致(什麼是VIDU)

VIDU 推出突破性 AI 視頻功能:讓您的創意更加連貫一致 VIDU,由盛數科技開發的多模態文本轉視頻 AI 模型,近日推出了一項革命性的新功能——「主體一致性」。這一創新不僅解決了 ...

OpenAI Day11: ChatGPT桌面應用程式重大突破:新一代AI助手功能全面解析
20 December 2024

OpenAI Day11: ChatGPT桌面應用程式重大突破:新一代AI助手功能全面解析

OpenAI Day11: ChatGPT桌面應用程式重大突破:新一代AI助手功能全面解析 描述: OpenAI最新發布的ChatGPT桌面應用程式帶來革命性的功能升級,從簡單的問答轉變為強大...