大家好,我是小悟。
阿里萬相正式開源啦。這就像是AI界突然開啟了一扇通往寶藏的大門,而且還是免費向所有人敞開的那種。
你想想看,在這個科技飛速發展的時代,AI就像是擁有神奇魔法的魔法師,不斷地給我們帶來各種意想不到的驚喜。而阿里萬相,就是這個魔法師團隊里的新星。
2 月 25 日晚間,阿里云旗下的視覺生成基座模型萬相2.1(Wan)正式開源啦。這消息一出來,就像是在平靜的湖面上投下了一顆重磅炸彈,瞬間在科技界引起了軒然大波。
阿里萬相這次開源,可是誠意滿滿。它采用了最寬松的Apache2.0協議,14B和1.3B兩個參數規格的全部推理代碼和權重全部開源。
這就好比是一個慷慨的美食家,把自己精心準備的美味佳肴毫無保留地端了出來,大家可以盡情品嘗。
它還支持文生視頻和圖生視頻任務哦。你沒聽錯,只要你有想法,無論是寫一段生動的文字描述,還是上傳一張創意滿滿的圖片,萬相都能像變魔術一樣,為你生成炫酷的視頻。
說到這,你可能會問,這個萬相到底有多厲害呢?那可真是不容小覷。14B萬相模型在指令遵循、復雜運動生成、物理建模、文字視頻生成等方面那表現,簡直可以用“驚艷”來形容。
在權威評測集VBench中,萬相2.1以總分86.22%的成績大幅超越Sora、Luma、Pika等國內外模型,穩居榜首位置。這就好比是在一場激烈的賽跑比賽中,它像一陣風一樣,把其他選手遠遠地甩在了后面。
而1.3B版本也毫不遜色,它的測試結果不僅超過了更大尺寸的開源模型,甚至還接近部分閉源模型。這就好比是一個小個子選手,憑借著自己的實力,和那些身材高大的選手一較高下,還取得了不俗的成績。
更讓人驚喜的是,這個1.3B版本能在消費級顯卡運行,僅需8.2GB顯存就可以生成高質量視頻。這對于很多人來說,簡直是一個福音。
以后,無論你是專業的AI開發者,還是業余的編程愛好者,甚至是只是對視頻生成好奇的小伙伴,都可以用自己電腦里的顯卡,體驗一下萬相的神奇魔力。
阿里萬相之所以這么厲害,是因為它的團隊在算法設計上可是下了大功夫的。它基于主流DiT架構和線性噪聲軌跡Flow Matching范式,研發了高效的因果3D VAE、可擴展的預訓練策略等一系列黑科技。
就拿3D VAE來說吧,為了實現高效支持任意長度視頻的編碼和解碼,萬相在3D VAE的因果卷積模塊中實現了特征緩存機制。
這就好比是在一條繁忙的公路上,增加了一個高效的調度中心,讓車輛的通行變得更加順暢,從而代替了直接對長視頻端到端的編解碼過程,實現了無限長1080P視頻的高效編解碼。
而且通過將空間降采樣壓縮提前,在不損失性能的情況下進一步減少了29%的推理時內存占用。這就像是一個精明的管家,把資源管理得井井有條,讓一切都有條不紊地運行。
萬相團隊的實驗結果也充分證明了它的實力。在運動質量、視覺質量、風格和多目標等14個主要維度和26個子維度測試中,萬相均達到了業界領先表現,并且斬獲5項第一。
這就好比是在一場選美比賽中,它憑借自己的才華和魅力,贏得了評委們的一致認可。特別是在復雜運動和物理規律遵循上的表現上大幅提升。
它能穩定展現各種復雜的人物肢體運動,像旋轉、跳躍、轉身、翻滾等動作,都能做得栩栩如生。還能精準還原碰撞、反彈、切割等復雜真實物理場景,仿佛給虛擬世界裝上了真實的物理引擎。
阿里從2023年開始,就堅定地走上了大模型開源路線。就像是一個有遠見的探險家,發現了一條充滿希望的道路,然后毫不猶豫地帶著大家一起前行。
自2023年8月起,阿里云相繼開源了Qwen、Qwen1.5、Qwen2、Qwen2.5等4代模型,囊括了0.5B、1.5B、3B、7B、14B、32B、72B、110B等全尺寸,大語言、多模態、數學和代碼等全模態,多次登上國內外權威榜單,已成為全球開源社區最重要的模型系列。
阿里云千問(Qwen)衍生模型數量已超過10萬個,是全球最大的AI模型家族。這一次萬相的正式開源,無疑是給這個龐大的AI模型家族注入了新的活力。
從應用角度看,萬相模型可以說是“百變精靈”。它可生成影視級高清視頻,能應用于影視創作、動畫設計、廣告設計等領域。
想象一下,你的創意和萬相的強大功能相結合,說不定能創造出令人驚嘆的作品。就像電影導演們有了一個神奇的助手,能夠更加輕松地實現他們的奇思妙想。動畫設計師們也能借助萬相的力量,讓他們的角色和場景更加生動逼真。
隨著萬相的開源,阿里云也實現了全模態、全尺寸大模型的開源。這就好比是一個商業帝國已經建立了一個全方位的武器庫,里面各種強大的武器應有盡有,等待著大家去發掘和利用。
全球的開發者們都可以在Github、HuggingFace和魔搭社區下載體驗這個強大的工具,發揮自己的創造力。
對于廣大開發者來說,阿里萬相正式開源是一個絕佳的機會。你可以參與到這個充滿創新和挑戰的領域中來,用自己的智慧和代碼,探索AI的無限可能。
您的一鍵三連,是我更新的最大動力,謝謝
山水有相逢,來日皆可期,謝謝閱讀,我們再會
我手中的金箍棒,上能通天,下能探海