阿里媽媽推出“淘寶星辰”商用級圖生視頻應(yīng)用

1月14日消息，阿里媽媽近日正式推出商用級圖生視頻AI Native應(yīng)用——淘寶星辰·圖生視頻，目前已對淘寶天貓商家開放使用。這一全新的AI Native工具，基于自研的淘寶星辰視頻生成大模型，結(jié)合了海量電商數(shù)據(jù)、豐富的設(shè)計語言以及業(yè)內(nèi)領(lǐng)先的營銷經(jīng)驗(yàn)，將推動電商AI內(nèi)容創(chuàng)作的全流程智能化升級。

圖源：淘寶官方

從操作上來看，用戶只需輸入一張靜態(tài)圖片和一段簡短的prompt描述，淘寶星辰·圖生視頻便可基于對該圖片的理解，直接生成高質(zhì)量的5秒視頻，生成的視頻可達(dá)到電影級光影效果。

據(jù)官方介紹稱，基于豐富的電商數(shù)據(jù)和設(shè)計經(jīng)驗(yàn)，淘寶星辰·圖生視頻能自動識別并應(yīng)用各類商品最適合的展示方式，而且從產(chǎn)品細(xì)節(jié)到整體風(fēng)格保持高度協(xié)調(diào)統(tǒng)一；同時，其能夠深度理解圖片以及用戶的多語言指令，確保生成視頻內(nèi)容與用戶意圖高度契合；另外，其嚴(yán)格遵循物理規(guī)律與動作規(guī)范，生成畫面流暢自然，提升了視頻的真實(shí)感和專業(yè)性；此外，無論是人臉、商品、還是文字、貼紙等裝飾元素，其生成的視頻始終保持畫面清晰、完整、無抖動或變形，保持視覺一致性。

圖源：淘寶官方

阿里媽媽技術(shù)人員表示，該團(tuán)隊目前已從0到1完成包括面向生成任務(wù)的數(shù)據(jù)飛輪、自研3D VAE及自研淘寶星辰視頻生成大模型（包括Tbstar-T2V、Tbstar-I2V、Tbstar-V2V等）開發(fā)，其中Tbstar-I2V大模型已經(jīng)成功應(yīng)用于“淘寶星辰·圖生視頻”工具，為商家提供更為專業(yè)的電商圖生視頻解決方案。

截至目前，阿里媽媽技術(shù)團(tuán)隊已經(jīng)開發(fā)出智能生成文、圖、視頻等一系列“AI智能創(chuàng)作全家桶”，集合在萬相營造產(chǎn)品之中，可以幫商家30秒批量生成圖片素材，0成本適配虛擬模特，智能視頻創(chuàng)意可以完成直播剪輯、模版剪輯、多視頻混拼、動效生成等，加上此次推出的圖生視頻AI工具，將大幅降低商家制作成本，助力商家更好更智能的經(jīng)營。

圖源：淘寶官方