AI在线 AI在线

美团开源虚拟人视频生成模型 LongCat-Video-Avatar:号称“不说话”时都像人

AI在线 12 月 18 日消息,据“龙猫 LongCat”公众号今晚的推文,美团 LongCat 团队正式发布并开源 SOTA 级虚拟人视频生成模型 ——LongCat-Video-Avatar。 该模型基于 LongCat-Video 基座打造,延续“一个模型支持多任务”的核心设计,原生支持 Audio-Text-to-Video、Audio-Text-Image-to-Video 及视频续写等核心功能,同时在底层架构上全面升级,实现动作拟真度、长视频稳定性与身份一致性三大维度的突破。 据官方介绍,该模型具备如下技术亮点。

AI在线 12 月 18 日消息,据“龙猫 LongCat”公众号今晚的推文,美团 LongCat 团队正式发布并开源 SOTA 级虚拟人视频生成模型 ——LongCat-Video-Avatar。

该模型基于 LongCat-Video 基座打造,延续“一个模型支持多任务”的核心设计,原生支持 Audio-Text-to-Video、Audio-Text-Image-to-Video 及视频续写等核心功能,同时在底层架构上全面升级,实现动作拟真度、长视频稳定性与身份一致性三大维度的突破。

图片

据官方介绍,该模型具备如下技术亮点。

“告别僵硬,迎接鲜活”:不仅能指挥嘴型,还能同步指挥眼神、表情和肢体动作,实现丰富饱满的情感表达。

连“不说话”的时候,都很像人:美团通过 Disentangled Unconditional Guidance(解耦无条件引导)训练方法,让模型明白了“静音”不等于“死机”。在说话的间歇,虚拟人也会如同人类一般自然地眨眼、调整坐姿、放松肩膀

据介绍,LongCat-Video-Avatar 因此成为首个同时支持文字、图片、视频三种生成模式的“全能选手”,虚拟人从此有了“真正的生命力”。

在 HDTF、CelebV-HQ 、EMTD 和 EvalTalker 等权威公开数据集上的定量评测表明,LongCat-Video-Avatar 在多项核心指标上达到 SOTA 领先水平。

图片

AI在线附项目地址:

  • GitHub: https://github.com/meituan-longcat/LongCat-Video

  • Hugging Face: https://huggingface.co/meituan-longcat/LongCat-Video-Avatar

  • Project: https://meigen-ai.github.io/LongCat-Video-Avatar/

相关资讯

与真人无异!Heygen 5.0数字人又来炸圈了

是的,如今不仅是搬砖人,数字人也加入了“内卷”的行列,就问你怕不怕。从上世纪 90 年代至今,数字人一直在默默发展,而近年来,随着 5G、AI 等技术的进步以及算力平台的迭代,数字人领域取得了显著的成果。 一觉醒来,Heygen 5.0 的最新升级再次让人发狂,他们推出了一款名为 Avatar in Motion 1.0 的新功能,与之前只能坐着或站着口播,做几个重复简单动作讲述的数字人相比,现在的版本可以让数字人动起来了,走动式口播和演示几乎已经与真人无异了,看不出来是数字人了。当视频在手机上无法加载,可前往PC
4/21/2024 2:55:45 AM
团队58UXD

科技 CEO 借助 AI 虚拟人 “替身” 出席财报会议

近日,科技公司 CEO 们不再仅仅是将 AI 技术融入他们的业务,反而开始在财报会议上使用 AI 虚拟人代替自己。 在刚刚结束的 Klarna 财报发布会上,该公司 CEO 兼联合创始人塞巴斯蒂安・西米亚托夫斯基的 AI 虚拟形象亮相,时长达83秒的宣传视频中,他的 AI 化身向观众介绍了2025年第一季度的业绩。 视频开头,AI 虚拟人幽默地表示:“是我,或者更确切地说,是我的 AI 虚拟形象。
5/23/2025 11:00:55 AM
AI在线

严打虚拟主播?腾讯微信视频号新规拟限制数字人带货

感谢近日,腾讯对《视频号橱窗达人“发布低质量内容”实施细则》进行修订,修订内容于今年 6 月 7 日-6 月 13 日进行意见征集。最新方案显示,“使用插件、AI 等工具生成虚拟形象进行直播”“提供、售卖、教学或展示平台不提倡传播的内容:如讲解和售卖虚拟人代播软件”等涉及虚拟人 / 数字人直播,将被视频号明确列入低质量内容,并进行违规处理。据澎湃新闻今日报道,相关人士透露,使用数字人 / 虚拟人直播目前属于平台直播带货中的违规行为,如被平台发现,将依据相关规则进行处罚,包括不限于减少直播推荐、减少账号推荐、限制直播
6/17/2024 9:10:22 PM
浩渺