可灵大模型是由快手AI团队自主研发的视频生成大模型,具备强大的视频创作能力。它采用3D时空联合注意力机制,能够生成符合物理规律的大幅度运动视频,模拟真实世界特性。可灵大模型支持生成长达2分钟、1080p分辨率的高清视频,并具有自由调整宽高比的功能。此外,该AI视频工具还结合了3D人脸和人体重建技术,实现表情和肢体的全驱动,只需一张全身照即可体验生动的AI唱跳功能。
可灵大模型有哪些功能
1.大幅度的合理运动:
采用3D时空联合注意力机制,能够建模复杂时空运动,生成符合运动规律的大幅度运动视频。
2.长达2分钟的视频生成:
依托高效的训练基础设施和推理优化,可灵大模型能够生成长达2分钟的视频内容。
3.模拟物理世界特性:
基于自研模型架构,模拟真实世界的物理特性,生成符合物理规律的视频。
4.强大的概念组合能力:
利用对文本-视频语义的深刻理解和Diffusion Transformer架构,将用户的想象力转化为具体画面。
5.电影级的画质生成:
基于自研3D VAE技术,可生成1080p分辨率的电影级视频。
6.支持自由的视频宽高比:
采用可变分辨率训练策略,能够在推理过程中输出多样的视频宽高比。
7.AI驱动的创新玩法:
结合3D人脸和人体重建技术,实现表情和肢体的全驱动,用户上传全身照即可体验生动的AI唱跳玩法。
如何快速使用可灵大模型
可灵大模型官网(kling.kuaishou.com)已上线,目前支持通过快影App进行体验。快影App的AI创作功能中已正式开放文生视频功能的邀测,创作者可申请并体验可灵大模型最新的文生视频功能。
使用步骤:
1.下载快影App:
在手机上下载并安装快影App。
2.注册/登录账户:
打开快影App后,使用快手账户登录。
3.进入AI创作功能:
在快影App中找到AI创作功能区域。
4.上传素材:
根据可灵大模型提供的功能,上传所需的素材,例如全身或半身照片,以便进行面部和肢体的驱动。
5.使用AI功能:
选择可灵大模型提供的具体功能,如AI舞王或AI唱跳等,按照提示操作。
6.生成视频:
根据App的指引,使用可灵大模型生成视频内容。