s
stabilityai/stable-video-diffusion-img2vid-xt-1-1
模型介绍文件和版本分析
下载使用量0

管道标签:图像转视频

许可证类型:其他

许可证名称:stable-video-diffusion-1-1 社区许可协议

许可证链接:LICENSE.md

一、简介

本协议适用于任何个人或实体(“您”,“您的”或“被许可方”),如果您使用或分发Stability AI材料或其衍生作品,无论出于研究与非商业目的还是商业目的。本文件中未明确定义的专有名词在下文第五节中有定义。

本协议旨在允许无需付费地研究、非商业性及有限度的商业性使用模型。为了确保特定的有限商业用途得以继续,本协议保留了年度营收低于100万美元(或同等本地货币)的人或组织对模型的免费访问权。

通过点击“我接受”或使用、分发Stability材料或其衍生作品,您同意已阅读、理解并受本协议条款约束。若您代表公司、组织或其他实体行动,则“您”包括您本人和该实体,并同意您:(i) 是有权代表该实体签订此协议的授权代表,(ii) 您代表该实体同意本协议的条款。

二、研究与非商业使用许可

根据本协议条款,Stability AI授予您一项非独家的、全球性的、不可转让的、不可再许可的、可撤销的且免版税的有限许可,使您能够基于Stability AI材料中包含的Stability AI所拥有的知识产权或其他权利,用于研究或非商业目的,来使用、复制、分发、创作衍生作品以及修改Stability AI材料。“研究目的”指的是学术或科学进步,且不主要旨在为您或其他人带来商业利益或金钱回报。“非商业目的”是指除研究目的之外的任何不主要意图于获取商业利益或金钱回报的目的,如个人使用(即爱好者)、评估和测试。

三、商业使用许可

根据本协议条款(包括本第三部分的剩余内容),Stability AI授予您一项非独家的、全球性的、不可转让的、不可再许可的、可撤销的且免版税的有限许可,使您能够在商业目的下使用、复制、分发Stability AI材料及其衍生作品,并进行修改。“商业目的”指除研究目的或非商业目的外,主要旨在为您或其他人带来商业优势或金钱回报的目的,这包括但不限于创建、修改或分发您的产品或服务,通过托管服务或应用程序编程接口提供,以及为您的企业或组织内部运作而使用。 如果您出于商业目的使用或分发Stability AI材料,须在稳定性AI社区许可处注册。若任何时候您或您的关联公司合并年收入超过100万美元(或等值本地货币),不论该收益是否直接或间接来源于Stability AI材料或其衍生作品,依据本协议授予的所有许可自该日起终止。您需向稳定性AI企业申请许可,此许可由Stability AI自行决定是否授予。如果您从作为集成最终用户产品的被许可方那里接收Stability AI材料或其任何衍生作品,则本协议第三部分将不适用于您。

四、一般条款

请注意,上述内容概要介绍了协议的关键部分,详细规定请参考完整的许可证文件[LICENSE.md]。

根据本协议,您的研究、非商业及商业使用许可需遵守以下条款:

a. 分发与归因。如果您向第三方分发或提供Stability AI材料或衍生作品,或使用这些材料的任何部分的产品或服务,您应:(i) 向该第三方提供本协议副本;(ii) 在作为复制件一部分的“通知”文本文件中保留以下归因声明:“此Stability AI模型已根据Stability AI社区许可证授权,版权所有 © Stability AI Ltd. 保留所有权利。”;以及(iii) 在相关网站、用户界面、博客文章、关于我们页面或产品文档中醒目地展示“由Stability AI驱动”。如果您创建了衍生作品,可以在随该衍生作品包含的“通知”文本文件中添加您自己的归因声明,但须明确指出哪些归因适用于Stability AI材料,并在“通知”文本中说明您修改了Stability AI材料以及如何修改。

b. 使用限制。您对Stability AI材料和衍生作品的使用(包括这些材料或衍生作品的任何输出结果),必须遵守适用法律和法规(包括贸易控制法律及其等效规定)并遵循文档和Stability AI的行为准则(AUP,此处通过引用并入)。此外,您不得使用Stability AI材料或衍生作品,或它们的任何输出结果,来创建或改进任何基础生成AI模型(不包括模型或衍生作品)。

c. 知识产权:

  • (i)商标许可。本协议未授予任何商标许可,在涉及Stability AI材料或衍生作品时,除非依据本协议第四款(a)项所必需,否则不得使用Stability AI或其关联公司的任何名称或标记。
  • (ii)衍生作品的所有权。在您与Stability AI之间,您是您创作的衍生作品的所有者,前提是Stability AI拥有Stability AI材料以及为Stability AI制作的任何衍生作品。
  • (iii)产出物所有权。在您与Stability AI之间,依照适用法律允许的范围,您拥有从模型或衍生作品生成的任何输出物。
  • (iv)争议解决。如果您或您的关联公司针对Stability AI提起诉讼或其他程序,声称Stability AI材料、衍生作品或相关的输出或结果,或上述任一组成部分,侵犯了您拥有或许可的权利,则本协议下授予您的任何许可自提起或发起此类诉讼或索赔之日起终止。您将赔偿Stability AI免受任何第三方因违反本协议使用或分发Stability AI材料或衍生作品而引起的索赔,并使其不受损害。
  • (v)反馈。您可能会不定期向Stability AI提供与其现有或预期技术、产品或服务相关的口头和/或书面建议、评论或其他反馈(统称为“反馈”)。您没有义务向Stability AI提供反馈,但如果您提供了,则您同意授予Stability AI一项永久性的、不可撤销的、无版税的、全部付费的、可再许可的、可转让的、非排他性的、全球性的权利和许可,以无限制的方式利用反馈。

d. 售后服务免责声明。除非适用法律另有要求,Stability AI材料及由此产生的任何输出和结果均按“现状”提供,不附带任何形式的明示或暗示保证,包括但不限于标题保证、非侵权保证、商售性和特定用途适应性保证。您独立判断使用或重新分发Stability AI材料、衍生作品或任何输出和结果的适当性或合法性,并承担与此相关的所有风险。

e. 责任限制。在任何情况下,无论基于合同、侵权(包括疏忽)、严格责任或其他理论,Stability AI及其关联公司都不对因本协议引发的任何损失利润或其他直接、间接、特殊、后果性、偶发、示范性或惩罚性损害承担责任,即使Stability AI或其关联公司已经被告知此类损害的可能性也不例外。

f. 协议期限与终止。本协议自您接受本协议或访问Stability AI材料时开始生效,并将持续有效直至根据本协议中的条款和条件终止。如果违反本协议的任何条款,Stability AI有权终止本协议。协议终止后,您应删除并停止使用任何Stability AI材料或衍生作品。本协议的第四款(d)、(e)和(g)项将在协议终止后继续有效。

g. 法律管辖。本协议的解释和执行应适用美国加利福尼亚州的法律,而不考虑冲突法原则,并且联合国国际货物销售合同公约不适用于本协议。

定义

  • 关联公司指直接或间接控制、被控制或与主体实体共同控制的任何实体;就本定义而言,“控制”意味着直接或间接持有超过主体实体投票权益50%的所有权或控制权。

  • 协议指本Stability AI社区许可证协议。

  • AUP指可在(https://stability.ai/use-policy)获取的Stability AI可接受使用政策,可能随时更新。

  • 衍生作品指根据美国版权法认定的Stability AI材料的衍生工作,以及对模型的任何改动,还包括基于或源自模型或模型输出的其他模型,包括从模型或其输出“微调”和“低秩适应”的模型,但不包括任何模型的输出。

  • 文档指Stability AI提供的关于软件或模型的规格、手册、文档和其他书面信息。

  • 模型指Stability AI的专有模型和算法,包括机器学习模型、训练后的模型权重以及 Stability 的核心模型网页(https://stability.ai/core-models)上列出的上述元素,可能会定期更新。

  • Stability AI或“我们”指Stability AI Ltd.及其关联公司。

  • 软件指目前或将来根据本协议提供的Stability AI的专有软件。

  • Stability AI材料集体指Stability的专有模型、软件和文档(以及任何部分或组合)按本协议提供的。

  • 贸易控制法律指任何适用的美国及非美国出口管制和贸易制裁法律法规。

extra_gated_description: Stable Video Diffusion 1.1 许可协议 extra_gated_button_content: 提交 extra_gated_fields: 姓名: 文本 公司名称(如适用): 文本 电子邮件: 文本 其他评论: 文本 点击此处,您接受许可协议,并将仅将软件产品和衍生作品用于非商业或研究目的: 复选框 点击此处,您同意与Stability AI共享此表单中的信息,并且Stability AI可以出于营销我们产品和服务的目 的与您联系: 复选框

Stable Video Diffusion 1.1 图像到视频模型卡

row01 Stable Video Diffusion (SVD) 1.1 图像到视频是一个扩散模型,它以静态图像作为条件帧,并从中生成视频。

请注意:如需商业使用,请参阅 https://stability.ai/license。

模型详情

模型描述

(SVD 1.1) 图像到视频是一个潜在扩散模型,经过训练可以从图像条件生成短视频片段。

该模型经过训练,可以在给定相同尺寸的上下文帧的情况下生成分辨率为1024x576的25帧视频,从SVD 图像到视频 [25帧]微调而来。

微调过程中,固定了6FPS和Motion Bucket Id 127的条件,以在不调整超参数的情况下提高输出的连贯性。这些条件仍然可调,并未被移除。在固定条件设置之外的性能可能与SVD 1.0有所不同。

  • 开发者: Stability AI
  • 资金来源: Stability AI
  • 模型类型: 生成式图像到视频模型
  • 微调自模型: SVD 图像到视频 [25帧]

模型来源

出于研究目的,我们推荐我们的generative-models Github仓库(https://github.com/Stability-AI/generative-models), 该仓库实现了最流行的扩散框架(包括训练和推理)。

  • 仓库: https://github.com/Stability-AI/generative-models
  • 论文: https://stability.ai/research/stable-video-diffusion-scaling-latent-video-diffusion-models-to-large-datasets

用途

直接使用

该模型适用于非商业和商业用途。您可以根据以下许可将此模型用于非商业或研究目的。可能的研究领域和任务包括

  • 生成模型的研究。
  • 安全部署可能生成有害内容的模型。
  • 探索和理解生成模型的局限性和偏见。
  • 生成艺术品并在设计和艺术创作过程中使用。
  • 在教育或创意工具中的应用。

如需商业使用,请参阅 https://stability.ai/license。

以下是排除的用途。

超出范围的使用

该模型未经过训练以成为人物或事件的真实或事实性表示, 因此使用该模型生成此类内容超出了该模型的能力范围。 该模型不应以任何方式违反Stability AI的可接受使用政策。

局限性和偏见

局限性

  • 生成的视频较短(<= 4秒),且模型未达到完美的照片真实感。
  • 模型可能生成无运动或非常缓慢的摄像机平移的视频。
  • 模型无法通过文本控制。
  • 模型无法渲染可读文本。
  • 面部和人物可能无法正确生成。
  • 模型的自动编码部分是有损的。

建议

该模型适用于非商业和商业用途。

如何开始使用模型

请查看 https://github.com/Stability-AI/generative-models