圖片一鍵變視頻，淘寶發(fā)布圖生視頻技術(shù)框架AtomoVideo
一年來(lái)，國(guó)內(nèi)各大電商AI布局不斷提速。近日，淘天集團(tuán)旗下阿里媽媽技術(shù)團(tuán)隊(duì)推出高保真圖片生成視頻框架——AtomoVideo（阿瞳木視頻），可將圖片素材自動(dòng)化轉(zhuǎn)換為高質(zhì)量視頻動(dòng)效。目前，該技術(shù)已在阿里媽媽的萬(wàn)相實(shí)驗(yàn)室、廣告投放平臺(tái)等應(yīng)用場(chǎng)景上線(xiàn)，所有商家都可以體驗(yàn)“圖片一鍵變視頻”的人工智能新技術(shù)，快速生成創(chuàng)意短視頻。
年初OpenAI公司Sora的發(fā)布，讓人們看到了視頻智能創(chuàng)作的巨大想象力。實(shí)際上，國(guó)內(nèi)很多團(tuán)隊(duì)也在文生或者圖生視頻上有著大量探索。今年初，字節(jié)跳動(dòng)發(fā)布了超高清文生視頻模型MagicVideo-V2，阿里云旗下魔搭社區(qū)（Model-Scope）上線(xiàn)文本生成視頻大模型。而淘天旗下阿里媽媽?zhuān)惨恢睂?zhuān)注于將視頻生成技術(shù)與電商結(jié)合，為淘寶天貓商家提供更智能的視頻創(chuàng)作工具，讓視頻生成技術(shù)在更真實(shí)的商業(yè)場(chǎng)景中加速落地。
最近，阿里媽媽發(fā)布的AtomoVideo應(yīng)用，讓電商人眼前一亮：以后的商品視頻，可能不用再找專(zhuān)業(yè)拍攝團(tuán)隊(duì)來(lái)干了。
編輯在AtomoVideo的體驗(yàn)中發(fā)現(xiàn)，用戶(hù)上傳一張圖，輸入動(dòng)作文字指令，靜態(tài)的圖片就能在各種場(chǎng)景中動(dòng)起來(lái)。比如，上傳一張玩偶圖片后輸入文字指令：穿紅色襯衣的玩偶在街上散步。很快，一段短視頻就生成了，玩偶邁開(kāi)步伐行走，街景也跟著變化。此外，靜態(tài)的帆船也能在輸入指令后在大海中揚(yáng)帆起航，海報(bào)中的樂(lè)手也開(kāi)始彈奏吉他演奏，場(chǎng)景還原和人物表情、動(dòng)作，都接近專(zhuān)業(yè)動(dòng)畫(huà)師水準(zhǔn)。
據(jù)介紹，以上視頻生成功能已在阿里媽媽廣告平臺(tái)廣泛應(yīng)用。商家可以在阿里媽媽電商圖片生成工具“萬(wàn)相實(shí)驗(yàn)室”中，一鍵將制作的商品圖片轉(zhuǎn)化為商品視頻。同時(shí)，阿里媽媽的設(shè)計(jì)師也可以應(yīng)用該技術(shù)，為商家客戶(hù)量身訂制視頻創(chuàng)意并投放。
據(jù)了解，AtomoVideo應(yīng)用了阿里媽媽技術(shù)團(tuán)隊(duì)自研的諸多新技術(shù)，包括優(yōu)質(zhì)數(shù)據(jù)集構(gòu)建、多粒度圖像注入、漸進(jìn)性動(dòng)作強(qiáng)度增加的多階段訓(xùn)練等，目前可以支持任意像素的圖片生成4秒視頻動(dòng)效，并兼容市面上各種文生圖模型。
阿里媽媽一位受訪(fǎng)技術(shù)人士稱(chēng)，當(dāng)前技術(shù)還遠(yuǎn)未挖掘出視頻生成的真正潛力，在視頻畫(huà)面穩(wěn)定性、內(nèi)容創(chuàng)造可控性以及視頻時(shí)長(zhǎng)等關(guān)鍵要素上，仍有非常廣闊的探索空間。這位人士認(rèn)為，當(dāng)前的應(yīng)用生成雖然只是起步，但隨著技術(shù)模型不斷迭代，視頻生成的準(zhǔn)確度和仿真度也會(huì)逐漸提高。
在創(chuàng)意生成領(lǐng)域，除了此次發(fā)布的AtomoVideo，阿里媽媽技術(shù)團(tuán)隊(duì)也研發(fā)出可擴(kuò)展圖片、視頻的“尺寸魔方”等創(chuàng)意編輯工具，可以實(shí)現(xiàn)圖片和視頻的任意目標(biāo)尺寸的拓展和補(bǔ)缺，同時(shí)保持素材的原生性。
一位服飾商家說(shuō)，現(xiàn)在市面上已經(jīng)有不少AI出圖工具，但將圖片變成視頻的還很少，生成高質(zhì)量視頻的就更少了，很多商家認(rèn)為圖生、文生視頻還只是個(gè)概念，甚至噱頭?！半m然AtomoVideo生成的視頻時(shí)長(zhǎng)還不長(zhǎng)，精度也有待提高，但是感覺(jué)苗頭不錯(cuò)，是個(gè)趨勢(shì)。”這位商家表示，很多商家在討論AI電商，各界也在期待圈里能出現(xiàn)殺手級(jí)應(yīng)用。
據(jù)介紹，過(guò)去一年來(lái)，淘寶在AI電商領(lǐng)域探索不斷加深。在消費(fèi)者端，淘寶推出“淘寶問(wèn)問(wèn)”，用戶(hù)可以通過(guò)向“問(wèn)問(wèn)”與淘寶互動(dòng)，了解最新的消費(fèi)動(dòng)態(tài)。在商家端，淘寶推出的商家AI創(chuàng)意生產(chǎn)工具萬(wàn)相實(shí)驗(yàn)室可以幫助商家0成本上新、0成本適配模特、0成本創(chuàng)造場(chǎng)景以及批量生產(chǎn)高規(guī)格商品圖。年初，淘寶基于AI大模型，升級(jí)智能客服機(jī)器人“店小蜜”，進(jìn)一步提升“店小蜜”回答買(mǎi)家問(wèn)題的準(zhǔn)確度。最近，淘寶再次推出AI制圖工具“繪蛙”，幫助商家生成各種風(fēng)格的高品質(zhì)圖片，降低商家成本，該應(yīng)用很快將結(jié)束內(nèi)測(cè)全量推廣。