Viggle AI:用于动态角色动画和视频创作的生成式人工智能
当我第一次接触到生成式人工智能时,我认为它蕴含着巨大的潜力,并且在日常创作中尚未得到充分挖掘。能够从静态图像制作角色动画的工具,在我看来就像是科幻电影里的情节,与实际应用相去甚远。
然而,像Viggle AI这样的平台正在迅速改变这一格局,将复杂的动画制作能力交到更广泛的用户手中。这些技术使得曾经复杂的过程变得出奇地易于使用。
快速摘要:Viggle AI 提供什么
以下是 Viggle AI 的快速概览:
- 生成式AI平台: 专注于角色动画和视频生成。
- 核心技术: 使用 JST-1,一种专有的视频 3D 基础模型,可实现逼真、可控的运动。
- 广泛用户基础: 被好莱坞专业人士、内容创作者和全球超过 4000 万用户使用。
- 主要功能: 包括“混合”(角色替换)、“多重”(多个角色)、“移动”(静态照片动画)、“说唱”(AI生成的说唱)、“麦克风”(语音转动作)、“编辑器”(高级自定义)和“实时”(实时网络摄像头转换)。
- V4 模型增强: 改进了复杂运动、角色一致性、纹理和面部表情的性能,并具有“角色细化”、“平滑运动”和“脚部锁定”等功能。
- 易用性: 可通过 Web、iOS 和 Android 应用程序访问,提供直观的界面和视频教程。
- 定价模式: 免费增值,提供有限制的免费版本和提供高级功能的付费 Viggle Pro 计划。
- 社区与支持: 在 Discord 上拥有强大的影响力,提供更新、动画预设和支持。
- 商业用途: 所有创作内容均为免版税,可用于商业用途。
- 伦理考量: 强调数据安全、内容可追溯性(C2PA 元数据)以及不当内容的过滤。
Viggle AI:用生成式动作让静态图像栩栩如生
Viggle AI 是一个专注于角色动画和视频生成的生成式人工智能平台。它不仅面向技术爱好者;好莱坞专业人士、短视频内容创作者以及全球超过 4000 万用户都在使用它。
该平台的核心创新在于 JST-1,一个专有的视频 3D 基础模型,它理解物理原理以生成逼真且可控的运动。这项尖端技术实现了高级视频处理和精确的动作控制,使Viggle AI能够将静态角色图像与视频动作无缝结合,实现逼真的动画,正如最近在X上演示的那样。该平台可通过iOS和Android的Web和移动应用程序访问。
Viggle AI 源于多伦多的一家初创公司,于2024年3月推出了其应用程序。它的增长非常显著,部分原因是“小丑/Lil Yachty”病毒式表情包的推动。该公司获得了由Andreessen Horowitz(a16z)领投,Two Small Fish Ventures(TSFV)参与的 A 轮融资,约为 2600 万加元(1900 万美元),融资总额超过 2700 万加元(2000 万美元)。

来源: mobidictum.com
此图显示了Andreessen Horowitz(通常称为a16z)的标志,这是一家风险投资公司。
这笔巨额资金旨在开发更强大的模型,推出新功能并提升用户体验。Viggle AI 的联合创始人兼首席执行官 Hang Chu 强调“可控性”是该平台的一个关键差异化因素,并强调了用户在创作过程中的能动性。
❝ 可控性 ❞
Viggle AI 联合创始人兼首席执行官
核心功能和能力
Viggle AI 提供了一套精心设计的功能,旨在赋能从新手到经验丰富的专业人士的创作者。
主要功能概述
该平台提供多样化的工具集,以实现您的创意愿景:
- 混合功能: 无缝地用上传的图像替换视频中的角色。
- 多重功能: 支持需要在一个视频中包含多个动画角色的项目。
- 移动功能: 使静态角色照片能够执行特定动作,同时保留原始背景。
- 说唱功能: 使角色能够使用用户提供或AI生成的歌词进行说唱。
- 麦克风功能: 提供语音转动作、语音同步和语音克隆功能,实现逼真的角色语言和歌唱。
- 编辑器: 提供高级视频自定义,包括精确的角色交换和对象跟踪。
- 实时功能: 允许实时网络摄像头转换,使用户能够实时扮演选定的角色。
Viggle AI V4:增强的性能和新功能
Viggle AI V4 是最新模型,在复杂运动、角色一致性、纹理、细节和面部表情方面性能得到显著提升。V4 引入了“角色细化”、“平滑运动”和“脚部锁定”等新功能,提高了其理解复杂和快速动作的能力,从而实现更稳定、更逼真的杂技动作。与许多基于扩散的视频生成模型不同,Viggle AI 使用底层 3D 世界模型来进行物理上连贯的运动,确保动画看起来自然且接地气。V4 在多人场景中保持身份、时间和空间关系方面表现出色,并且“多轨道”功能可以跟踪长达一分钟的场景,允许在更长的片段中进行特定的角色更改。Viggle AI 的处理速度比许多其他 AI 视频生成模型快得多,通常在几秒钟到一分钟内就能输出结果。它还突破了典型的 15 秒限制,支持更长的视频输出,长达一分钟甚至更长,只要小于 100 MB。
角色细化 生成角色的五个不同角度的参考图像,然后智能地合并成一个一致的参考,从而简化了动画过程。未来的发展同样令人兴奋,包括“Viggle AI Animate”,它将允许使用预设动画模板库轻松地对静态角色进行动画处理。同时,“Viggle AI 视频生成”的“可控模式”将能够精确调整风格、角色和动作,为创作者提供无与伦比的创意控制。
易用性和社区参与
该平台的直观界面简化了复杂的动画任务,使用了像 /mix、/animate、/ideate 和 /stylize 这样简单的命令。学习曲线因用户经验和期望的复杂度而异,但全面的视频教程可以帮助新用户掌握其功能。Viggle AI 采用免费增值模式,提供功能强大的免费版本,但有一些限制,例如水印或使用限制,特别是每天最多可以生成五个免费视频。对于需要更多功能的用户,付费的 Viggle Pro 计划将解锁更高质量、更长的视频以及更少的限制,具体请参阅此免费与付费 AI 工具的比较。/mix
/animate
/ideate
/stylize
Viggle AI 社区在 Discord 上蓬勃发展,用户可以在此获取及时更新、丰富的动画预设和专属支持。“Viggle AI Meme Generator”是一个特别受欢迎的功能,可以快速将静态图像转换为有趣的动画笑话,这些笑话会迅速传播到 TikTok、X 和 Discord 等平台。

来源: ai-q.in
Viggle AI Discord 服务器界面展示了社区成员如何互动和获取更新。
该平台还提供各种舞蹈风格的预设,产生了无数病毒式传播的“Viggle AI Dance”视频。此外,“Viggle AI Prompts”可以指导动作行为和输出风格,简单的直接指令通常能为创作者提供最佳结果。
Viggle AI 通过行业标准的措施和全球托管基础设施来强调数据安全。它利用 C2PA 元数据来追溯内容来源,确保透明度,并使用先进的文本和图像分类器来有效过滤不当或有害内容。与“红队”进行的严格测试以及开发先进的工具来检测和预防误导性内容,都是其积极应对安全和道德使用方法不可或缺的一部分。
商业用途和未来展望
使用 Viggle AI 创建的所有内容均为免版税,并可完全用于商业用途,为专业人士带来巨大价值。Viggle AI 支持基于文本提示、上传的图像或现有视频素材的便捷视频生成。该平台与 Google Cloud Vision 无缝集成,并提供强大的全球托管,其 API 支持 Python 和 JavaScript/TypeScript SDK,满足开发者的需求。
Viggle AI 旨在赋能电影和游戏工作室、营销和内容创作等各个领域的创意专业人士,特别是独立内容创作者。“创作者计划”通过提供 Pro 功能、额外的 1000 个积分(相当于 250 分钟视频)以及新功能的早期访问权限,进一步支持艺术家和创作者,具体详情请参阅 Viggle AI 创作者计划页面。
伦理与法律考量
尽管其功能创新,但关于 AI 模型所使用的训练数据,也出现了一些担忧。Viggle AI 使用“公共来源”和 YouTube 视频进行训练,引发了法律问题。YouTube 首席执行官 Neal Mohan 明确表示,使用 YouTube 视频训练 AI 文本到视频生成器将构成“明确违反”其服务条款。
❝ 明确违反 ❞
YouTube 首席执行官

来源: paleycenter.org
YouTube 首席执行官尼尔·莫汉(Neal Mohan)身穿职业装肖像,讨论服务条款。
Viggle AI 正在积极努力扩大其能力以满足当前的高需求,并承认其平台的快速增长和广泛关注。
结论
Viggle AI 代表了生成式人工智能在角色动画和视频制作领域的一项重大进展。通过提供直观的工具以及强大的底层技术,它使复杂的动画真正易于广大用户使用,从仅制作表情包的个人到创意行业的经验丰富的专业人士。随着平台继续快速发展,细致地解决其技术能力和相关的伦理考量,它对数字内容创作的深远影响可能会急剧扩大,进一步模糊静态图像与动态、沉浸式视觉叙事之间的界限。
来源: YouTube