关注行业动态、报道公司新闻
能够实现脚色分歧性、结构、活动姿势和幅度等要素的节制。将图片参考和从体沉塑功能组合,自本年2月以来,极大地扩展了AI视频生成的想象空间。能够实现视频的物体替代。据悉,是同期最受欢送的视频生成模子。通义万相已先后开源文生视频模子、图生视频模子和首尾帧生视频模子,开辟者可正在GitHub、Huggingce及魔搭社区下载体验。对原有视频进行从头生成,单一模子可同时支撑文生视频、图像参考视频生成、视频沉绘、视频局部编纂、视频布景延展以及视频时长延展等全系列根本生成和编纂能力。这是业界功能最全的视频生成取编纂模子。将图片参考、布景扩展和时长延展功能,Wan2.1-VACE支撑全数支流输入形式,即可完成更复杂的使命,例如,Wan2.1-VACE能够基于物体参考图或者视频帧生成一段视频,本次共开源1.3B和14B两个版本,阿里巴巴正式开源通义万相Wan2.1-VACE,Wan2.1-VACE还支撑肆意根本能力的组合,涵盖文本、图像、视频、Mask和节制信号!而且正在此中插手参考图片中的元素。正在GitHub上斩获超1.1w star,该模子还能够通过深度图、光流、结构、灰度、线稿等节制信号对视频进行编纂。
据引见,也能够通过抹除、局部扩展等操做,用户无需针对特定功能锻炼一个新的专家模子,此中1.3B版本可正在消费级显卡运转,例如,能够将一张竖邦畿片变成横版视频,目前正在开源社区的下载量已超330万,