【環(huán)球網(wǎng)科技綜合報(bào)道】1月13日消息,近日,基于自研的淘寶星辰視頻生成大模型,阿里媽媽正式推出商用級(jí)圖生視頻AI Native應(yīng)用——淘寶星辰·圖生視頻,目前已對(duì)淘寶天貓商家開(kāi)放使用。
據(jù)介紹,用戶(hù)只需輸入一張靜態(tài)圖片和一段簡(jiǎn)短prompt描述,“淘寶星辰·圖生視頻”便可基于對(duì)該圖片的理解,直接生成5秒視頻。
據(jù)了解,“淘寶星辰·圖生視頻”基于豐富的電商數(shù)據(jù)和設(shè)計(jì)經(jīng)驗(yàn),此工具能自動(dòng)識(shí)別并應(yīng)用各類(lèi)商品最適合的展示方式,而且從產(chǎn)品細(xì)節(jié)到整體風(fēng)格保持高度協(xié)調(diào)統(tǒng)一;同時(shí),其能夠深度理解圖片以及用戶(hù)的多語(yǔ)言指令,確保生成視頻內(nèi)容與用戶(hù)意圖高度契合;另外,其嚴(yán)格遵循物理規(guī)律與動(dòng)作規(guī)范,生成畫(huà)面流暢自然,提升了視頻的真實(shí)感和專(zhuān)業(yè)性;此外,無(wú)論是人臉、商品、還是文字、貼紙等裝飾元素,其始終保持畫(huà)面清晰、完整、無(wú)抖動(dòng)或變形,保持視覺(jué)一致性。
據(jù)阿里媽媽技術(shù)人員介紹,該團(tuán)隊(duì)目前已從0到1完成包括面向生成任務(wù)的數(shù)據(jù)飛輪、自研3D VAE及自研淘寶星辰視頻生成大模型(包括Tbstar-T2V、Tbstar-I2V、Tbstar-V2V等)開(kāi)發(fā),其中Tbstar-I2V大模型已經(jīng)成功應(yīng)用于“淘寶星辰·圖生視頻”工具,為商家提供更為專(zhuān)業(yè)的電商圖生視頻解決方案。