0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

用户投稿 46 0

一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

最近的AI视频赛道,在玩法上“卷”出了新高度。有用户用它完善视频细节:

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

还有人用它创作了科幻大片:

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

还有大鱼吃小鱼,实现普通摄像头难以拍摄的效果:

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

较强的灵活性和视频可控性,一下让人难以分辨虚实,而这些镜头都是靠爱诗科技的AI视频工具PixVerse实现的。PixVerse继4月更新运动笔刷功能之后,今日又重磅上线了PixVerse V2模型。V2支持直接生成长达8秒的视频 ,甚至可以一次性生成1-5个视频片段,并保证风格、主体和场景的一致性

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

PixVerse已经率先朝着AI视频生成的一致性方向发力。这是要进军AIGC短片吗?此次更新的PixVerse V2实力究竟如何?“AI新榜”从角色一致性、想象力、控制力维度上,第一时间给各位玩家实测了一番。

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

实测PixVerse新功能:一次性生成5个8秒视频 据了解,PixVerse突破了时长技术限制,能单次生成8秒的视频。但要知道AI视频生成的时长越长越容易“露怯”,出现瑕疵。那么,其文本理解能力还能稳定发挥吗?我们先用V2简单测了一下文生视频和图生视频。文生视频

‍提示词:golden retriever in sunglasses sunbathing on a beach in Hawaii

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

PixVerse V2版本

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

PixVerse V1版本从生成效果来看,动物类的表现很不错,几秒内可以动的细节更多,比如狗狗的耳朵,毛发。虽然动作幅度依旧比较小,但整体视频呈现得更完整,在视频质量以及清晰度上都有明显的进步。另外,PixVerse V2升级了模型理解和表达能力,在真实性和细节表达 上进一步加强。

提示词:A beautiful women is walking towards the camera

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

PixVerse V2版本

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

PixVerse V1版本可以看到,人物类镜头方面,画面主体没有出现特别大的技术瑕疵,光影效果也做得很好。相比前一个版本,V2生成的人物动作幅度更大,也更真实。但遗憾的是,和其他的AI视频工具一样,仍然是无法理解提示词当中的镜头术语 ,如“走向镜头”,画面中主体的运动只是简单转了下头。图生视频 图生视频怎么能少得了这张经典梗图:

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

在图生视频模式下,我们没有输入任何提示词,想看看PixVerse V2的“联想”能力如何。

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

PixVerse V2并没有让图中男生变成“渣男”,而是转过头与红衣女孩错过,看多了其他AI视频工具的戏剧效果,PixVerse V2展现的反而有点淡淡的忧伤。三个人的动作幅度都不大,但难能可贵的是唯一出现脸部的红衣女孩没有出现“变脸”,牺牲了戏剧效果但保证了角色的一致性 。相比之下,这张“房子着火我微笑”的梗图生成效果就比较一般了。转头离去,但“变脸”速度巨快:

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

控制住了变脸,但场景突然切换:

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

要说整活,还是AI在行啊。但总的来说,图生视频参考了我们上传的图片元素,玩梗能力在线,做二创是个不错的选择 。在此前“AI新榜”的短片尝试,以及大量用户反馈和社区讨论反馈中,AI视频的一致性一直是一个难题,更不用说单次生成长达40秒的视频片段了,一起看看PixVerse V2的多片段生成能力。生成多片段40秒视频 在PixVerse首页点击右侧“PixVerse V2”,就可以进入多片段生成页面,同样支持文生和图生视频。

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

在这里,需要我们选择“Scene 1”,输入相应提示词,再添加“Scene 2”,输入第二个场景想要呈现的画面,以此类推,最多添加5个不同的场景后,一次性生成完整片段。换句话说,就是把短片的视频分镜,通过自然语言的形式呈现出来 。从官网发布的信息看,在PixVerse V2模式下,5个场景的画面风格都会与第一个场景保持一致。如果我们还上传了图片,那么这些图片会参考场景1的图片风格进行重绘,保证生成视频风格的一致性。比如,我们输入的提示词如下:

Scene 1:the panda is playing the violin.Scene 2:It is playing the piano.Scene 3:It is eating the hamburger.

大约等待5分钟左右,V2一次性生成了长达16秒的视频片段。可以看到,在视频主体、场景以及画面色调上尽量保持了一致性,还省去了我们单个片段不断“抽卡”的时间。

只不过,最终生成的画面在精细度上还有待提高,依旧会出现小提琴、汉堡微变形的画面瑕疵。如果我们对某个片段熊猫的动作、环境、镜头运动不满意,还可以选择替换相应的角色元素,进行二次编辑。

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

我们继续尝试一下人物类镜头一致性,将上述提示词中的“panda”换成了“the woman”,测试了一波V2的角色控制能力。没想到的是,PixVerse V2直接规避了短板,生成了全是近景特写的片段,压根没出现人物。

考虑到是“the woman”太过宽泛,我们又将主体替换成确切的人物角色“Harry Potter”,测试结果显示,在多片段生成时,人物手指等细节瑕疵无可避免,但场景、风格一致性上发挥稳定

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜 0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

1秒只需0.1元,AI视频的成本竞赛 今年下半年,AI视频领域掀起了一波应用间的较量,快手可灵、Runway Gen-3等陆续面向公众开放使用。几家产品的问世,都向我们传递了一个信息“AI视频生成技术更适合短视频制作 ”。除了效果表现之外,陆续有AI工具开始采取付费订阅制,快手可灵同样结束了免费试用期,正式迈入了“收费时代”。

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

快影App内公告作为AI领域向来绕不开的问题,商业化的困境同样出现在了视频应用上。当生成越长的视频,是否成本就越贵? 据调查机构Factorial Funds发文表示, Sora约30亿参数的训练成本,比1.8万亿参数的GPT-4还要多。

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

Factorial Funds对Sora的相关报道对于AI视频而言,一些生成服务会根据视频的时长、所需处理的视频复杂性以及使用技术等因素来定价。如果AI视频还包括了高度定制化的内容,对视频生成的质量、连贯程度以及真实性有要求,实际所用的推理成本自然就会更高。曾有媒体报道,国内AI企业做过一个估算,大约两分钟的AI视频实际要花掉180元盈利,是摆在所有AI视频工具面前的共同问题 。哪怕是PixVerse也扛不住相应的推理成本。目前,PixVerse推出了订阅套餐方案,基础会员每月5美元,可以获得1150个积分。

0.6秒短视频制作 一次性生成5个8秒视频,用AI做抖音短视频不是梦?AI新榜

PixVerse每生成8秒的视频,需要消耗30个积分,这样算来,1150个积分大约能生成20条完整的15秒短视频,一条短视频的成本折合人民币1.5元,是Runway Gen-3费用的1/3

当然,背后的技术以及生成视频结果的不确定性,导致实际使用的成本会骤升。

费用之外,对于大多数普通用户而言,短短几秒的视频时间,如果只是简单的镜头移动,除了获得体验感,很难有真正的使用场景。

爱诗科技创始人王长虎在年初接受采访时也提到:“在未来6-12个月里,我们希望用AI制作出15秒长的可消费内容。只有当普通人都能用AI生成出好看、好玩的内容,才是AI视频的ChatGPT时刻 ”。

目前看来,高算力、高成本依旧是商业化的主要障碍,但不少视频玩家也从中找到了用户留存的新方法,“AI整活”“老照片动起来”“AI修复”等抽象玩法在互联网上层出不穷。在大多数用户对AI视频工具的新鲜感褪去之后,如何用新玩法留住用户,摸索出新的赚钱方法,或许会是视频内容玩家下一个竞争赛道。

上传一张图片就能生成5秒短视频,腾讯混元图生视频模型上线并开源

潮新闻客户端 记者 鲁佳

3月6日,腾讯混元宣布,腾讯混元图生视频模型上线并开源,用户可以用一张图片生成5秒的短视频。目前用户通过混元AI视频官网(https://video.hunyuan.tencent.com/)即可体验,企业和开发者可在腾讯云申请使用API接口。混元视频生成开源模型目前在Github、HuggingFace等主流开发者社区均可下载体验。

基于图生视频的能力,用户只需上传一张图片,并简短描述希望画面如何运动、镜头如何调度等,混元即可按要求让图片动起来,变成5秒的短视频,还能自动配上背景音效。此外,上传一张人物图片,并输入希望“对口型”的文字或音频,图片中的人物即可“说话”或“唱歌”;使用“动作驱动”能力,还能一键生成同款跳舞视频。

此次开源的图生视频模型,是混元文生视频模型开源工作的延续,模型总参数量保持 130 亿,模型适用于多种类型的角色和场景,包括写实视频制作、动漫角色甚至CGI角色制作的生成。

混元开源技术报告披露,混元视频生成模型具备灵活的扩展性,图生视频和文生视频在相同的数据集上开展预训练工作。在保持超写实画质、流畅演绎大幅度动作、原生镜头切换等特性的基础上,让模型能够捕捉到丰富的视觉和语义信息,并结合图像、文本、音频和姿态等多种输入条件,实现对生成视频的多维度控制。

“转载请注明出处”

相关问答

微信10秒短视频如何制作?

3、然后点击收藏页面右上角的加号,添加收藏;4、然后进入一个编辑页面,在编辑页面点击添加图片的那个图标;5、然后选择页面中点击左下角的图片和视频选项,...

七秒热门短视频怎么制作?

1.短视频的精与奇美拍、秒拍包括最近的火山小视频等短视频渠道火起来之后,短视频团队像雨后春笋层出不穷,不管是美食类、技巧类还是纯搞笑类的短视频,都有很...

一个30秒短视频的后期制作成本大概是多少?

视你要达到什么标准而定。视你要达到什么标准而定。

我想把驾校做个30秒左右的小视频品牌宣传,应该怎么拍,怎么做?

驾驶学校视频宣传片,该如何进行策划?在驾校服务同质化程度日益严重的今天,驾驶学校视频宣传片的传播广告应该是最直接、最见效的武器了。广告是建立稳定的品牌...

谁知道怎么制作快手视频。他们的视频都剪辑了。还..._网络编...

7秒的视频都是用快手直接拍摄的,其他的视频是制作好以后,再上传到快手的。比如我可能先用美册视频制作软件剪辑完成以后,保存到手机相册里面,这个时...

有些微信小视频时间挺长的,30秒左右。那个怎么弄。怎么拍的?

去下载一个微视来用吧不但可以和其他短视频软件一样看短视频和拍短视频还可以对本地短视频进行二次编辑添加各种特效,还有一个黑科技的功能就是发30秒的朋友...

微信朋友圈60秒的小视频是怎么发的?

微信朋友圈60秒长视频可以在微信中点击右上角的“更多”,然后选择需要发送的长视频,并点击“分享到朋友圈”即可。具体操作步骤如下:1、打开微信,点击“我...

15秒短视频制作方案有哪些?_天涯问答_天涯社区

[回答]每一个公司都有自己的相应的特色,如果是制作短视频的话,视频的创意以及脚本就至关重要了,还有一点就是短视频可能会涉及演员方面的问题,演员的问题...

未加V自媒体作者发的50多秒短视频,播放量达到16万咋做到的?有什么技巧?

加不加v对于一个视频能不能火影响不大,主要是内容的质量和音乐的搭配,根据推荐法则好的内容会持续被推荐给新的人看,直到在一个推荐阶段播放量上不去了,就停...

10秒短视频要如何拍摄短故事?

10秒时长拍一个故事的话,有点太短了,如果真的要用10秒钟记录一个故事的话,可以简单的记录,也可以讲述一个不完整的故事,因为故事要有起因经过结果,10秒钟之...

抱歉,评论功能暂时关闭!