近日,基于自研的淘宝星辰视频生成大模型,阿里妈妈正式推出商用级图生视频AI Native应用——淘宝星辰·图生视频,目前已对淘宝天猫商家开放使用。这一全新的AI Native工具,结合了海量电商数据、丰富的设计语言以及业内领先的营销经验,将推动电商AI内容创作的全流程智能化升级。

【淘宝星辰 · 图生视频】工具已重磅上线,并对淘宝天猫商家正式开放!

让模特动起来,让商品动起来,让背景动起来......这款新AI工具的操作非常简单,用户只需输入一张静态图片和一段简短prompt描述,“淘宝星辰·图生视频”便可基于对该图片的理解,直接生成高质量的5秒视频,生成的视频可达到电影级光影效果,真正大片既视感。

“淘宝星辰·图生视频”在视频生成过程中展现出不同于其他同类产品的独特优势。首先,基于丰富的电商数据和设计经验,能自动识别并应用各类商品最适合的展示方式,而且从产品细节到整体风格保持高度协调统一;同时,能够深度理解图片以及用户的多语言指令,确保生成视频内容与用户意图高度契合;另外,严格遵循物理规律与动作规范,生成画面流畅自然,提升了视频的真实感和专业性;此外,无论是人脸、商品、还是文字、贴纸等装饰元素,“淘宝星辰·图生视频”始终保持画面清晰、完整、无抖动或变形,保持视觉一致性。

左右滑动查看更多

“生成视频的速度很快,模特动作自然流畅,而且毫无违和感。”一位已经体验过的淘宝服饰商家表示,“淘宝星辰·图生视频”可结合之前在用的AI模特产品一起使用,无需真实模特和拍摄就能生产出商用级视频,实现全流程AI创作,“真正的提质增效”!

阿里妈妈技术团队目前已从0到1完成包括面向生成任务的数据飞轮、自研3D VAE及自研淘宝星辰视频生成大模型(包括Tbstar-T2V、Tbstar-I2V、Tbstar-V2V等)开发,其中Tbstar-I2V大模型已经成功应用于“淘宝星辰·图生视频”工具,为商家提供更为专业的电商图生视频解决方案。

值得一提的是,阿里妈妈技术团队已经开发出智能生成文、图、视频等一系列“AI智能创作全家桶”,集合在万相营造(原万相实验室)产品之中,可以帮助商家30秒批量生成图片素材,0成本适配虚拟模特,智能视频创意可以完成直播剪辑、模版剪辑、多视频混拼、动效生成等,加上此次推出的图生视频AI工具,将大幅降低商家制作成本,助力商家更好更智能的经营!