AI新风口？首个高质量「文生视频」模型Zeroscope引发开源大战：最低8G显存可跑

---

文生图模型stable diffusion开源后，将「ai艺术」彻底平民化，只需一张消费级显卡即可制作出非常精美的图片。

而文本转视频领域，目前质量较高的只有Runway前不久推出的商用Gen-2模型，开源界还没有一个能打的模型。

最近，Huggingface上有作者发布了一个文生视频模型Zeroscope_v2，基于17亿参数量的ModelScope-text-to-video-synthesis模型进行二次开发。

图片

模型链接：https://huggingface.co/cerspense/zeroscope_v2_576w

相比于原版本，Zeroscope生成的视频没有水印，并且流畅度和分辨率都得到了提升，适配16:9的宽高比。

开发者cerspense表示，他的目标就是和Gen-2进行开源较量，即提高模型质量的同时，还能免费供大众使用。

Zeroscope_v2包括两个版本，其中Zeroscope_v2 567w可以快速生成576x320像素分辨率、帧率为30帧/秒的视频，可用于视频概念的快速验证，只需要约7.9GB的显存即可运行。

使用Zeroscope_v2 XL生成高清视频，分辨率为1024x576，占用约15.3GB的显存。

Zeroscope还可以与音乐生成工具MusicGen一起使用，快速制作一个纯原创短视频。

Zeroscope模型的训练用到了9923个视频片段（clip）以及29769个标注帧，每个片段包括24帧。偏移噪声包括视频帧内对象的随机移位、帧定时（frame timings）的轻微变化或微小失真。

训练期间引入噪声可以增强模型对数据分布的理解，从而可以生成更多样化的逼真视频，并更有效地解释文本描述中的变化。

使用方法

使用stable diffusion webui

在Huggingface上下载zs2_XL目录下的权重文件，然后放到stable-diffusion-webui\models\ModelScope\t2v目录下即可。

在生成视频时，推荐的降噪强度值为0.66到0.85

使用Colab

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

ChatGPT Writer

免费 Chrome 扩展程序，使用 ChatGPT AI 生成电子邮件和消息。

106 查看详情

笔记链接：https://colab.research.google.com/drive/1TsZmatSu1-1lNBeOqz3_9Zq5P2c0xTTq?usp=sharing

先点击Step 1下的运行按钮，等待安装，大约需要3分钟；

图片

当按钮旁边出现绿色复选标记时，继续执行下一步。

图片

点击想要安装模型附近的运行按钮，为了能够在Colab中快速获得3秒左右的剪辑视频，更推荐使用低分辨率的ZeroScope模型（576或448）。

图片

需要在执行更高分辨率模型（如Potat 1或ZeroScope XL）时，权衡执行时间会更长。

再次等待复选标记出现，继续执行下一步。

选择在Step2中安装并希望使用的模型型号，对于更高分辨率的模型，推荐下面的配置参数，不需要太长的生成时间。

图片

接下来，您可以输入目标视频的提示词来改变效果，并且还可以输入否定提示词（negative prompts），然后点击运行按钮。 

等待一会后，生成的视频就会被放置在outputs目录下。

图片

「文生视频」开源竞赛

目前来说，文生视频领域仍处于起步阶段，即便是最好的工具也只能生成几秒钟的视频，并且通常存在较大的视觉缺陷。

但其实文生图模型最初也面临着类似的问题，但仅仅几个月后就实现了照片级真实感。

不过与文生图模型不同的是，视频领域在训练和生成期间所需要的资源都要更比图像更多。

虽然谷歌已经研发出了Phenaki和Imagen Video模型，可以生成高分辨率、更长、逻辑连贯的视频片段，但公众无法使用到这两个模型；Meta的Make-a-Video模型也同样没有发布。

目前可用的工具仍然只有Runway的商用模型Gen-2，此次Zeroscope的发布也标志着文生视频领域第一个高质量开源模型的出现。

以上就是AI新风口？首个高质量「文生视频」模型Zeroscope引发开源大战：最低8G显存可跑的详细内容，更多请关注其它相关文章！

# 目录下  # 谷歌SEO流量秘籍  # 怎样避免网站优化  # 全球知名网站建设案例  # c2c网站建设方案  # 定州视频推广招聘网站  # 衢州网站营销策划推广  # 江安县推广营销中心电话  # 保山企业seo推广  # 视频营销推广案例分析  # 网站建设模板费用  # 上海  # ai  # 谁能  # 更高  # 只需  # 还可以  # 首个  # 高质量  # 显存  # phenaki  # stable diffusion  # runway  # 开源 

相关栏目： 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894 】

相关推荐： 国内首款大尺寸仿鸵双足机器人“大圣”亮相，穿戴红色战袍  科技赋能司法执行 阿里资产免费为全国法院升级VR新服务  大语言模型的视觉天赋：GPT也能通过上下文学习解决视觉任务  美图设计室2.0什么时候上线  AI与5G的强强联合：唤醒数字时代的无尽潜能  拓普龙7188ML：轻便壁挂式工控机箱，为人工智能应用场景提供有力保障  人工智能在交通领域的革新：智能解决方案彻底改变交通方式  微软Xbox称VR和AR还需要时间 先玩大的  普林斯顿大学推出 Infinigen AI 模型，生成真实自然环境 3D 场景  OpenAI 引入个性化指令功能，消除对话中的重复偏好与信息  赋能金融新生态，多家银行创新应用成果亮相世界人工智能大会  网友自制 AI 版《流浪地球 3》预告片，登上 CCTV6  “五年内人类程序员将消失”预言引争议，AI真的那么强大了吗？  鹅厂机器狗抢起真狗「饭碗」！会撒欢儿做游戏，遛人也贼6  警惕！AI或致虚假信息泛滥  AYANEO 安卓掌机 Pocket AIR 配置公布：天玑 1200 + 5.5 英寸屏  马斯克“揭秘”人工智能真面目  Meta发布音频AI模型，仅需2秒片段模拟真人语音  全国体育人工智能大会举办，专家聚焦体育人工智能领域人才培养  微软新出热乎论文：Transformer扩展到10亿token  探展WAIC | 第四范式“式说”聚焦toB大模型，布局生成式AI重构企业软件  首部国内AI辅助动画片《魔游纪：人工智能辅助篇》预告发布  有 ARM 和 X86 两个版本，香橙派游戏掌机细节曝光  物联网和人工智能的协同作用：释放预测性维护的潜力  小米首次曝光 64 亿参数的 MiLM-6B AI 大模型，或将应用于小爱同学  北交大推出国内首个开源交通大模型TransGPT，可免费商用  华为小艺AI助手将实现强大的大模型能力  人工智能如何帮助制造业？  人工智能赋能广西自然资源领域监测监管  沐曦首款AI推理GPU亮相：INT8算力达160TOPS！  微幼科技推出全自动晨检机器人，助力幼儿园校园健康检测  GPT-4最全攻略来袭！OpenAI官方发布，六个月攒下来的使用经验都在里面了  人工智能产业协同创新中心：全产业链资源在这里汇聚  元宇宙迈入2.0时代，它和生成式人工智能有何关联吗？  自己动手使用AI技术实现数字内容生产  上新7款产品，美图继续“蹭”AI  Xbox游戏工作室负责人：VR/AR领域的用户规模还不足够  DeepMind用AI重写排序算法；将33B大模型塞进单个消费级GPU  外科医生的智能助手，“机器人手术”得到补充商业医保覆盖  能走、能飞、能游泳，科学家打造全能 M4 机器人  智能公司为何纷纷投身机器人领域？  Bing Chat 和 Bing Search 正式引入深色模式  湖北科技职业学院举行工业机器人及智能制造技术专精特新产业学院建设启动仪式  深圳人工智能企业超1900家  消息称 ChatGPT 未来有望增加更多功能：上传文件分析信息，还能记住用户画像  1000万张照片训练AI模型 科学家找到水下定位新方法  Meta 发布 Voicebox AI 模型：可生成音频信息，用于 NPC 对话等  2025年深圳举办的SUSECON 创新峰会开始接受报名  WHEE功能介绍  自然语言生成在智能家居设备中的应用 

 2023-07-09