OmniHuman-1OmniHuman-1 是一个端到端的多模态条件人类视频生成框架,能够基于单张人像和运动信号(如音频、视频或其组合)生成人类视频。该技术通过混合训练策略克服了高质量数据稀缺的问题,支持任意宽高比的图像输入,生成逼真的人类视频。它在弱信号输入(尤其是音频)方面表现出色,适用于多种场景,如虚拟主播、视频制作等。
TransPixar.proTransPixar 是一款基于先进人工智能技术的透明视频生成工具。它采用创新的 DiT 架构,能够将文本描述快速转化为高质量的透明视频,实现 RGB 和 Alpha 通道的完美对齐。该技术对于创意制作领域具有重要意义,能够极大提升创作效率,降低制作成本,为视觉特效、动画制作等行业带来全新的解决方案。目前,该产品主要面向创意专业人士,提供高效、专业的透明视频生成服务,具体价格未明确提及,但从其定位来看,可能属于付费范畴。
CausVidCausVid是一个先进的视频生成模型,它通过将预训练的双向扩散变换器适配为因果变换器,实现了即时视频帧的生成。这一技术的重要性在于它能够显著减少视频生成的延迟,使得视频生成能够以交互式帧率(9.4FPS)在单个GPU上进行流式生成。CausVid模型支持从文本到视频的生成,以及零样本图像到视频的生成,展现了视频生成技术的新高度。
VideoWorldVideoWorld是一个专注于从纯视觉输入(无标签视频)中学习复杂知识的深度生成模型。它通过自回归视频生成技术,探索如何仅通过视觉信息学习任务规则、推理和规划能力。该模型的核心优势在于其创新的潜在动态模型(LDM),能够高效地表示多步视觉变化,从而显著提升学习效率和知识获取能力。VideoWorld在视频围棋和机器人控制任务中表现出色,展示了其强大的泛化能力和对复杂任务的学习能力。该模型的研究背景源于对生物体通过视觉而非语言学习知识的模仿,旨在为人工智能的知识获取开辟新的途径。
Kawara AIKawara AI 是一款面向视频创作者的 AI 工具,通过智能组织和搜索视频文件,帮助用户高效管理视频素材。其核心功能包括自动剪辑、视频搜索和无缝集成等,旨在提升视频创作的生产力。产品目前提供免费试用,定位为视频创作者的得力助手,致力于简化视频编辑流程,节省时间和精力。
Diffusion as ShaderDiffusion as Shader (DaS) 是一种创新的视频生成控制模型,旨在通过3D感知的扩散过程实现对视频生成的多样化控制。该模型利用3D跟踪视频作为控制输入,能够在统一的架构下支持多种视频控制任务,如网格到视频生成、相机控制、运动迁移和对象操作等。DaS的主要优势在于其3D感知能力,能够有效提升生成视频的时间一致性,并在短时间内通过少量数据微调即可展现出强大的控制能力。该模型由香港科技大学等多所高校的研究团队共同开发,旨在推动视频生成技术的发展,为影视制作、虚拟现实等领域提供更为灵活和高效的解决方案。