AI在线 AI在线

神器大盘点!B站700万人气的AI整活视频都是如何完成的?

大家好,这里是和你们一起探索 AI 的花生~ 巴黎奥运会已经结束了,这段时间除了观看激动人心的竞赛,我的另一大乐趣就是在 B 站看各种奥运会的吐槽/整活视频。而在这个过程中,我也发现不少视频都用上了 AI 技术,给人带来了新的观看体验。那么今天就和大家聊聊其中比较新奇有趣的效果以及相关实现方法,说不定哪天你也用得上~ 相关推荐:一、视频角色替换 首先是一个调侃在奥运 会开幕式上出场的 “蓝精灵” 的视频。由于 “蓝精灵” 的装扮造型和 86 版《西游记》里的青狮怪非常相似,于是一个 B 站 up 主借用了电影《美人

神器大盘点!B站700万人气的AI整活视频都是如何完成的?

大家好,这里是和你们一起探索 AI 的花生~

巴黎奥运会已经结束了,这段时间除了观看激动人心的竞赛,我的另一大乐趣就是在 B 站看各种奥运会的吐槽/整活视频。而在这个过程中,我也发现不少视频都用上了 AI 技术,给人带来了新的观看体验。那么今天就和大家聊聊其中比较新奇有趣的效果以及相关实现方法,说不定哪天你也用得上~

相关推荐:

一、视频角色替换

首先是一个调侃在奥运 会开幕式上出场的 “蓝精灵” 的视频。由于 “蓝精灵” 的装扮造型和 86 版《西游记》里的青狮怪非常相似,于是一个 B 站 up 主借用了电影《美人鱼》里的经典片段,演绎 “青狮精因身份被蓝精灵冒充到警局报警”的剧情。

神器大盘点!B站700万人气的AI整活视频都是如何完成的?

视频截图来源:B 站 @苏三不是珊

如果是在之前,这种视频一般会抠出青狮怪的头像,贴在演员的头部,用来实现角色替换的效果,虽然简陋但足以达意。而这个视频中,青狮怪的形象则完全覆盖了原本的演员形象,并且动作姿势都和原版一样,再加上重新配音,让整个视频的融合度非常高,犹如青狮怪真身出演了电影一样。

这个视频的评论区就有人在问这种效果是如何实现的,大家应该也都猜到肯定是用了 AI,而持续关注我文章推荐的小伙伴可能已经知道具体用的是哪个工具,没错就是之前为大家推荐过的 AI 视频生成神器 Viggle。

了解 Viggle:

神器大盘点!B站700万人气的AI整活视频都是如何完成的?

目前 Viggle 已经有了官方网站,支持三种功能:Mix 功能可替换单一角色,Multi 可替换多角色,Move 是为图像角色添加动态;上面视频的实现方法就是先扣取了青狮怪的完整形象,然后用 Mix 覆盖住邓超所饰演的角色,做到完全替换。目前这些功能都可以免费试用,感兴趣的小伙伴可以体验一下。

最新的 Multi 功能演示,视频来源:Twitter@ViggleAI

二、头像开口唱歌

然后是一个关于韩国乒乓球选手林钟勋的视频。林钟勋原本要在 8 月 19 号入伍服兵役,但在赢得奥运会混双铜牌后,有了免除服兵役的资格,因此非常高兴,比赛结束后高举双手怒吼庆祝,甚至当场敬礼,宣布免服兵役,成为奥运会上的又一 “名场面”,引起不少网友的关注和调侃。

B 站一位 up 主就以杰伦的《牛仔很忙》为基础重新填词,用幽默的方式呈现林钟勋对不用服兵役的兴奋之情。虽然是一个整活视频,但是填词和视频效果非常精彩,目前播放量已经接近 700 万。

神器大盘点!B站700万人气的AI整活视频都是如何完成的?

视频截图来源:B 站 @蔚蓝边际

与一般只用图片配图的整活视频不同,这首歌全程由林钟勋 “本人” 演唱,不仅口型与歌词一致,甚至有眨眼、挑眉等细微动态,给人一种 “一本正经搞笑” 的感觉。大家肯定都明白这是 AI 合成的,目前能实现唇型匹配的工具也不少,但效果这么精准、连面部肌肉运动都能呈现出来的工具却不多,目前最热门的应该是快手团队开发的 LivePortarit 面部动画生成模型 。

了解 Live Portarit:

LivePortarit 可以将真人的面部动作完美复刻到图像角色身上,效果自然贴合,给影视、游戏、3D 动画制作带来了新的处理思路。这个视频应该是 up 主先录制了自己唱歌的视频,然后将复刻到林钟勋的头像上,最后再合成到视频中。Live Portarit 是开源模型,可以部署到本地免费使用,ComfyUI 也有对应插件,目前也可以在 Huggingface 上免费体验。

在线体验 : https://huggingface.co/spaces/KwaiVGI/LivePortrait

视频来源:Twitter@Yokohara_h

三、其他 AI 视频技术

其实生成式 AI 技术早已融入到视频剪辑制作的各个方面,最常用的有自动生成字幕、文本转语音(TTS)等;短视频中广泛使用的猴哥、紫薇的声音,是通过 AI 音色克隆实现的,我们现在也可以随时克隆自己的声音;还有 “不同明星演绎某一角色“ 的视频,也是目前非常热门的一个赛道,用的是 FaceFusion 这类换脸工具。

神器大盘点!B站700万人气的AI整活视频都是如何完成的?

通过换脸技术,让我们熟悉的明星重新演绎真人版《海贼王》。截图来源:B 站 UP 主 @ 电影七十二变 ,

而 AI 技术目前热仍在不断发展,未来将进一步改变视频的制作方式和呈现效果。比如前面提到的 LivePortarit, 最近又推出了动物版,可以将人物的面部表情复刻到小猫、小狗、小熊等动物身上。Windows 用户可以直接下载一键整合包,解压安装后在本地免费使用:

下载地址: https://huggingface.co/cleardusk/LivePortrait-Windows/blob/main/LivePortrait-Windows-v20240806.zip (解压就能用,文末有资源包)

用 LivePortarit 制作的创意视频。视频来源:微博@海辛 Hyacinth

萌宠类的视频本身自带流量,以其为基础的进行而二次创作也非常受欢迎,给小动物加上人类的眼睛嘴巴进行吐槽就是其中一种。而有了 Live Portarit 的这类新技术后,“动物开口说话唱歌” 将直接变成了现实,而不再需要后期合成了,大家更喜欢哪一种效果呢?

神器大盘点!B站700万人气的AI整活视频都是如何完成的?

动物配音吐槽是目前非常热门的一种视频类型。截图来源:B 站 UP 主@涛哥玩配音

还有新出的 AI 视频编辑器 Vozo,支持对视频进行无痕重新编辑。你可以重新编写视频脚本,然后 AI 会自动完成翻译、音色克隆、配音、唇型匹配等工作,还支持多角色处理、自动剪辑片段和调整画幅,让我们轻松得到一个新版本的视频。

Vozo 官网: https://www.vozo.ai/

可以预见在未来的影视制作中,同一部作品在全球发行时,演员唇型可以随配音发生变化,做到无痕配音;而短视频平台上也可能会一种新类型的视频:视频片段来自某部经典电影或者电视剧,不过人物说的话却完全不一样了,但口型却是一致的。而 “眼睛为实” 也将不再绝对,甄别视频真伪会成为一件需要严肃对待的事情。

利用 Vozo 快速将一段英文视频转为中文版本,并做到音色、唇型一致。来源:Twitter@zeng_wt

还有已经是 Next Level 的 Runway gen-3 图生视频功能,目前已经有创作者将其融入到自己的 Vlog 中,基于现实生成奇幻的的视觉效果,给原本平淡的视频内容带来新活力,这也将给给影视创作、广告营销视频、以及自媒体创作带来新的创意思路。

利用 Gen-3 图生视频功能,为真实视频添加视觉特效。来源:Twitter @runwayml

那么以上就是本期对 AI 技术在视频制作上应用现状的相关介绍,喜欢的话记得点赞、收藏、评论支持一波。如果你还知道其他更多有趣的 AI 视频效果,可以在评论区和我分享。

相关资讯

Runway!AI技术+视频制作的新一代视频内容生成工具

大家好,这里是和你们聊设计的花生~ 之前和大家聊过不少 AI 图像生成工具,有的可以根据文本生成图像,有的则是将 AI 技术运用到图像处理中,让扣除背景、消除画面元素成为非常轻松快速的事情,大大提升了设计师的工作效率。既然 AI 技术在图片处理的应用上如此成熟,那如果用到视频的剪辑制作上会有什么效果呢? Runway 官网: AI 技术的快速消除图像内容 比如在视频里实现一键抠图,将人物从背景中分离出来,进行背景更换或者插入文字图层:或者在视频里实现快速修图,用画笔一抹,就能去除视频中不需要的部分:甚至在视频里也
1/5/2023 7:04:55 AM
夏花生

想把图像变成动图/视频?这5款AI神器帮你轻松搞定!

大家好,这里是你们的 AI 神器挖掘机花生~ 今天为大家推荐 5 款可以将图像转换为动图或者短视频的 AI 神器,它们都是在线工具,操作简单还可以免费使用,可以让静态图像更具吸引力,适合用来生成动态海报或创意短视频~ 上期回顾:一、LeiaPix Converter 网站直达: (登录后使用) LeiaPix Converter 是一个免费将图片转换为 3D 伪深度动图的工具,操作简单方便,可以自定义动画范围、深度、时长、运动方式、动态强弱,图像可以保存为 MP4 /GIF 等多种格式。使用方法:进入网站后,先注
10/30/2023 12:09:46 AM
夏花生

MoonValley!零基础也能快速学会的AI视频生成神器

本文为大家介绍一款视频生成 AI 工具 Moonvalley,只需简短的提示词,即可产生 16:9 的电影质感片段。 接下来让我们来试一试吧。 更多AI视频生成神器:一、使用体验 目前,Moonvalley 处于 Beta 阶段,完全免费,需要在 Discord 中使用。 1. 加入频道 在 Discord 中搜索 Moonvalley,点击顶部「join」会跳到 discord 的授权页面,按照流程往下走就行。
1/10/2024 5:52:02 AM
yaoyao

高清视频一键生成!AIGC 免费视频生成神器 MorphStudio

前言 人人都能一键生成高质量视频的时代终于来了,视频“黑马”Morph Studio 来袭,只需要打几个字描述一下你想要的画面,就能瞬间生成视频。 还有一个非常重要的一点,Morph Studio 高清画质,超长视频,完全免费!接下来让我们来试一试吧。 使用体验 目前,Morph Studio 处于 Beta 阶段,完全免费,需要在 Discord 中使用。 更多干货:一、加入频道 网站中点击加入: 也可在 Discord 中邀请加入: 、加入公共子区 目前,Morph Studio 有五个公共子区,点击左侧公共
1/18/2024 6:13:51 AM
yaoyao

ComfyUI SVD 图片转短视频工作流分享!低配置也能用!

大家好,这里是和你们一起探索 AI 的花生~ 之前为大家推荐过一些可以将图像转为动图或者短视频的 AI 工具,比如 LeiaPix Converter、Runway、Pika 等,今天再为大家推荐一种在本地免费实现图像转短视频的方式,即在 ComfyUI 中使用开源模型 Stable Video Diffusion (SVD),经测试 8G 的显存也能用,并且效果也相当不错。 相关推荐:一、Stable Video Diffusion 简介 Stable Video Diffusion(SVD)是 Stabilit
1/18/2024 8:25:54 AM
夏花生

Runway 王炸更新!5个笔刷让人人都能成为神笔马良

前言 上周 Runway 再次升级 Gen-2「运动笔刷」更名为「多头运动笔刷」(Multi Motion Brush),这次可以说是 AI 视频可控性的王炸进化!5 个笔刷,可以对视频局部调整,人人秒变神笔马良。 目前所有用户都可以免费使用,额度 100 秒,每使用一次消耗 4 秒。 接下来让我们一起来试一试吧。 更多AI视频干货:一、使用体验 目前,Runway 可以在官网上或者下载手机 APP 使用。 1. 登录网址 打开官网: 进入 Runwayml 主页,点击图片上的粉色「Start with imag
1/29/2024 12:36:24 AM
yaoyao

国产AI视频神器 Dreamina 测评!支持中文,效果不输 Runway

大家好,我是花生~ 最近拿到了 AI 创作平台 Dreamina 视频生成功能的内测资格,这也是目前首个支持中文生成视频的 AI 工具,体验下来感觉非常不错,今天就带大家看看它具体的生成效果。 相关推荐:Dreamina 官网: (AI 视频生成功能目前处于内测阶段) Dreamina 目前支持文生图和图生图 2 项功能,提示词支持中英文,2-3 分钟就能生成一个 3 秒的视频,这与目前大部分的 AI 视频生成工具差不多。其文生图功能目前的参数设置包括:有静止、推进、拉远、向左旋转、向右旋转 5 种镜头运动可选;
3/20/2024 8:51:28 AM
夏花生

万字干货!Sora 如何如何转化为实际生产力?

2 月 16 日凌晨(北京时间)正月初七,在没有任何消息和预兆下,Open AI 突然发布了首个文生视频大模型——Sora,借此Sora正式对外曝光,AI视频领域也迎来了前所未有的关注度,并且在极短时间内震惊业界,并持续破圈。 如今虽然距离 Sora 发布已有 1 个月的时间,但各方对 Sora 大模型的讨论仍在持续,主流业界也对 Sora 基本达成了共识。Sora 到底为什么能够震惊业界?是真的遥遥领先,还是在过度神话?以及我们如何将 Sora 落地应用于实际项目?本篇文章将带你一一了解!引言 Sora 的技术文
3/19/2024 8:41:28 AM
团队新浪MDC

LTX Studio 最新测评! 颠覆传统的一站式 AI 视频创作神器

大家好,这里是和你们一起探索 AI 的花生~ AI 视频生成工具正在被越来越多地应用到实际创作中,大家应该看过不少用 AI 生成的 “电影预告片”,比如 CCTV6 电影频道发起的 “AI 影像人才优选计划” 中的短片《玉覆荆楚》 ,效果就非常惊艳。像此类视频一般需要先写好剧本分镜,然后用 Midjourney 或者 SD 出图,再用 Runway 或者 Dreamina 这样的 AI 视频工具分别生成动态,最后再导入 Pr 或者剪映中进行后期编辑处理,最终形成一个完整的短片。不过今天我要为大家介绍一款新的工具 L
4/19/2024 5:42:05 AM
夏花生

清华出品!AI视频神器 Vidu 横空出世,效果直追 Sora!

大家好,这里是和你们一起探索 AI 的花生~ 这两天一款名为 Vidu 的视频生成模型火爆网络,它由北京生数科技与清华大学联合发布,能直接通过文本生成 16 秒 1080P 的高清视频,且视频质量与 OpenAI Sora 不相上下, 因此被认为是 Sora 目前最有力的竞争对手。 Vidu 内测名额申请: shengshu.feishu.cn当视频在手机上无法加载,可前往PC查看。相关推荐:Vidu 是中国首个具备长时长、高一致性及高动态性的视频大模型,从官方的演示视频中也可以切实感受到其强大的生成能力。对于 “
4/30/2024 8:26:56 AM
夏花生

保姆级教程!小学生看了都会的AI视频短片制作教程

前言 我相信这是一篇针对大朋友、小朋友都通俗易懂的视频剧本构思到视频落地的全流程拆解教程。基于大语言模型和绘图模型的前提,有了一次和小伙伴们探索文生图到图生视频的创作实践。 废话不多说,直接上保姆级干货教程!保证你能够轻松学会!学之前,快来看看我们制作的视频短片吧~当视频在手机上无法加载,可前往PC查看。一、前期准备 1. 确定主题 针对于现有的 AI 生成能力,央视推出了多组 AI 视频短片,为此我们也决定生成一个符合时代主旋律的 AI 小视频。经过脑暴阶段,有了一带一路背景下丝绸之路这个角度的创作故事。创作方向
7/11/2024 6:40:27 AM
桂大羊

AI 视频哪家强?7款AI视频生成工具详细测评

国内外AI视频生成工具那么多,各自有哪些优缺点,该如何选择?这篇文章帮你总结好了!一、可灵 AI-内测完全免费 支持文生图/视频、图生图/视频、支持首尾帧、支持运镜调整,内测完全免费 网站链接: 、Dreamina(即梦) 支持文生图/视频、图生图/视频、支持首尾帧、支持运镜调整,每天 88 积分(预计 9 个视频) 网站链接: 、Luma-图转视频稳定 支持文生视频、图生视频、支持首尾帧、每月可免费生成 30 个视频 网站链接: 、Pika-支持语音视频同步生成 支持文生视频、图生视频、支持首尾帧、支持运镜,支持
8/23/2024 12:44:16 AM
DataGrand UED

工具大盘点!11款AI视频生成神器优缺点分析(附打分表)

今年 2 月,OpenAI 发布了全新的文生视频模型 Sora,致使 AI 视频生成领域迎来了一系列令人瞩目的突破。 在这一系列技术浪潮下,AI 视频生成赛道也给传统视频创作行业带来了冲击。传统视频制作获取素材成本较高,且需要大量人员投入时间精力参与视频制作。 而 AI 视频生成则无需烦恼这些。首先,通过 AI 生成视频素材,可以减少对外购买版权素材的依赖,降低视频制作的成本。其次,借助 AI 可以通过智能渲染和特效应用的即时完成视频的剪辑和处理,大幅缩短后期处理时间。最后,使用 AI 生成视频技术可以根据用户偏好
9/2/2024 7:12:33 AM
Infinite AI工作室

消失近半年后, Pika 带着它的新模型和病毒式营销回来了

大家好,我是花生~ 国庆长假已经结束了,大家过得开心吗?在我们享受闲暇假期的时候,AI 的发展可是一点儿都没缓下来,接连出现了多款新的模型和工具。今天就和大家聊聊最近再次爆火出圈的 AI 视频生成工具 Pika,看看它是如何在消失近半年后,借助新的模型和营销策略,重新回归的 AI 视频头部地位的。 了解 15 月前刚发布的 Pika :一、新的 Pika 1.5 模型 Pika 官网: 之所以说是 “再次”,是因为去年 7 月份的时候,我就给大家介绍过 Pika 了。那个时候它刚刚推出,凭借不错的视频质量和丰富的
10/9/2024 7:45:16 AM
夏花生

2024 最全合集!13个AI视频产品评测&实战效果!

前言 - AI 视频闭源产品近半年发展 Sora 之后,DiT 架构成为视频生成产品的主流技术。这大半年里,横空出世的 Luma AI、Kling 成为视频生成领域最大黑马,而老牌选手 Runway 也推出了实力强劲的 Gen3 模型。AI 视频生成在画面表现力、语义理解、清晰度、可控性方面有了大幅提升,同时多家产品在音画同步、笔刷等工具上做了更新,提升了产品可控性。 这篇文章会带大家了解 AI 视频产品的最新能力,不同产品的优势,以及展示各个产品的实测效果。 这个系列预计分为闭源、开源两篇。以下是本文目录:一、先
10/10/2024 8:37:43 AM
Bay的设计奥德赛

用一个实战案例,带你完整掌握AI视频设计流程

我们在上期文章完成了对市面上主流 AI 视频生成类产品的调研,本期我们将结合一个案例,展开说明如何利用 AI 工具快速实现视频制作。 工具大盘点! 11款AI视频生成神器优缺点分析(附打分表)今年 2 月,OpenAI 发布了全新的文生视频模型 Sora,致使 AI 视频生成领域迎来了一系列令人瞩目的突破。
9/26/2024 12:20:26 AM
Infinite AI

工具大盘点!5款AI视频生成神器优缺点分析(附打分表)

24年初,Sora 爆红网络,随之大量的AI视频生成的产品趁势崛起。 我们当时也做过相关产品的调研,并发布了文章11款AI视频生成神器优缺点分析。 工具大盘点!
12/16/2024 12:13:49 AM
Infinite AI

秒变大师!5步带你轻松制作AI视频

在当今的设计领域,AI 技术已经不再是一个新鲜词汇,特别是在视频创作的环节中,AI 的创新玩法和应用场景正让整个行业焕发出前所未有的活力。 从自动化剪辑到智能生成视频内容,AI 的加持正在改变设计师们的创作模式。 那么,作为设计师,我们如何通过 AI 视频的"新玩法"来提升创意和效率?
12/19/2024 12:35:03 AM
58UXD 团队
  • 1