阿里媽媽上線淘寶星辰視頻生成模型：懂賣點、更懂電商

【億邦原創】輸入一張靜態圖片就能生成一段商品展示小視頻；一張圖片+文字描述，還能按照要求一鍵生成高質量的5秒視頻。這是阿里媽媽近期推出的“淘寶星辰 · 圖生視頻”工具。

“淘寶星辰”是由阿里媽媽基於自研的淘寶星辰視頻生成大模型推出的視頻AIGC工具，操作便捷、更懂商品的展示手法、專業的光影效果、更強的多語種語義遵循能力、穩定的人物/商品/裝飾保持，這是淘寶星辰的主要特點。

視頻生成是一個複雜的、系統性的算法工程。據介紹，2024年3月，阿里媽媽基於Unet Diffusion Model路線研發並上線了阿瞳木動效視頻，實現了視頻AIGC在電商場景的首次應用落地。但是，由於技術路線、數據等多個因素的限制，阿瞳木動效視頻在畫面穩定性、內容可控性、目標與動作豐富性等關鍵要素上，仍然存在較大的進步空間。

從去年3月至今，通過算法、數據、工程等衆多團隊的密切協作，阿里媽媽完成了面向生成任務的數據飛輪、自研3D VAE、自研淘寶星辰視頻生成大模型（包括Tbstar-T2V、Tbstar-I2V、Tbstar-V2V等）等多個關鍵模塊和模型從0到1的建設。目前，Tbstar-I2V大模型已經應用於“淘寶星辰 · 圖生視頻”工具中，爲用戶提供更懂電商的圖生視頻功能。

“淘寶星辰 · 圖生視頻”不僅可以根據單張商品圖，一鍵生成主圖視頻，還能在多少模特圖的基礎上，自行添加轉場、特效和文字，快速生成吸睛的產品展示視頻。同時，還可以根據多張商品圖分別生成視頻片段，採用剪輯視頻方式製作商品短視頻，配備解說、字幕等，生成商品種草視頻。

淘寶星辰還針對服裝行業提供一體化解決方案，只需要“模特圖”或“平鋪圖”+虛擬模特，都能輕鬆生成多樣化服飾視頻。

目前“淘寶星辰 · 圖生視頻”工具僅對淘寶天貓商家開放。