快手可灵团队开源项目LivePortrait爆火 一张照片生成动态视频 大叔秒变少女!


近日,快手可灵团队开源的人像视频生成框架LivePortrait在人工智能领域引起轰动。这款创新工具仅需一张静态图像就能生成栩栩如生的动态视频,展现了AI技术在视频生成领域的巨大潜力。

LivePortrait一经发布便在开源社区引起广泛关注。短短时间内,该项目在GitHub上已获得7.5K星标,成为当下最热门的AI项目之一。不仅如此,它还吸引了HuggingFace首席战略官Thomas Wolf的亲身体验,并在HuggingFace平台的全部应用中位居趋势榜首。

LivePortrait的核心优势在于其惊人的表情"移花接木"能力。它不仅可以让静态图像中的人物眨眼、微笑或转头,还能将一个人的表情和动态精确复制到另一个人身上,且不受风格限制,可适用于写实、油画、雕塑和3D渲染等多种风格。

这款工具的应用范围极其广泛。从单人肖像到全家福,从人物到宠物,LivePortrait都能实现生动的动态效果。更令人惊叹的是,它还能对视频中的表情进行精确控制,如调整嘴角上扬的弧度或眼睛大小的变化,为创作者提供了前所未有的表情控制能力。

在技术层面,LivePortrait采用了基于隐式关键点的创新框架,有别于当前主流的基于扩散模型的方法。它通过两个阶段的训练过程,大幅提升了模型的泛化能力、表达能力和纹理质量。第一阶段聚焦于框架改进,包括高质量数据整理、混合训练、网络架构升级等。第二阶段则通过贴合模块和重定向模块的训练,提高了面部表情细节的处理精度。

与现有方法相比,LivePortrait在生成质量和驱动精确度上表现出色,尤其是在捕捉细微表情和保持原图纹理方面。虽然在某些方面略逊于基于扩散模型的方法,但LivePortrait的推理效率极高,在RTX4090GPU上每帧生成速度可达12.8毫秒,大大超越了现有的扩散模型方法。

LivePortrait的出现不仅展示了AI技术在视频生成领域的最新进展,也为创意产业带来了新的可能性。随着这类技术的不断发展,我们可以期待在不久的将来,更多令人惊叹的AI视频生成应用将会涌现,为内容创作者和普通用户提供更丰富、更便捷的创作工具。

项目地址:https://top.aibase.com/tool/liveportrait

LivePortrait体验地址:

https://huggingface.co/spaces/KwaiVGI/LivePortrait

备注:资讯来源AIbase基地