您的位置:首页 > 互联网

一次性生成5个8秒视频,用AI做抖音短视频不是梦?_ae制作抖音15秒短视频

发布时间:2024-07-24 20:38:59  来源:互联网     背景:

声明:本文来自于微信公众号 AI新榜,作者:阿虎左卡,授权转载发布。

最近的AI视频赛道,在玩法上“卷”出了新高度。

有用户用它完善视频细节:

win10正式版什么时候发布

还有人用它创作了科幻大片:

甚至让马斯克微笑点头:

98寸电视怎么样

还有大鱼吃小鱼,实现普通摄像头难以拍摄的效果:

较强的灵活性和视频可控性,一下让人难以分辨虚实,而这些镜头都是靠爱诗科技的AI视频工具PixVerse实现的。

PixVerse继4月更新运动笔刷功能之后,今日又重磅上线了PixVerse V2模型。V2支持直接生成长达8秒的视频,甚至可以一次性生成1-5个视频片段,并保证风格、主体和场景的一致性。

PixVerse已经率先朝着AI视频生成的一致性方向发力。这是要进军AIGC短片吗?此次更新的PixVerse V2实力究竟如何?“AI新榜”从角色一致性、想象力、控制力维度上,第一时间给各位玩家实测了一番。

实测PixVerse新功能:一次性生成5个8秒视频

据了解,PixVerse突破了时长技术限制,能单次生成8秒的视频。但要知道AI视频生成的时长越长越容易“露怯”,出现瑕疵。那么,其文本理解能力还能稳定发挥吗?我们先用V2简单测了一下文生视频和图生视频。

文生视频

‍提示词:golden retriever in sunglasses sunbathing on a beach in Hawaii

PixVerse V2版本

抖音制作15秒视频

PixVerse V1版本

从生成效果来看,动物类的表现很不错,几秒内可以动的细节更多,比如狗狗的耳朵,毛发。虽然动作幅度依旧比较小,但整体视频呈现得更完整,在视频质量以及清晰度上都有明显的进步。

另外,PixVerse V2升级了模型理解和表达能力,在真实性和细节表达上进一步加强。

提示词:A beautiful women is walking towards the camera

PixVerse V2版本

PixVerse V1版本

可以看到,人物类镜头方面,画面主体没有出现特别大的技术瑕疵,光影效果也做得很好。相比前一个版本,V2生成的人物动作幅度更大,也更真实。

但遗憾的是,和其他的AI视频工具一样,仍然是无法理解提示词当中的镜头术语,如“走向镜头”,画面中主体的运动只是简单转了下头。

图生视频

图生视频怎么能少得了这张经典梗图:

在图生视频模式下,我们没有输入任何提示词,想看看PixVerse V2的“联想”能力如何。

PixVerse V2并没有让图中男生变成“渣男”,而是转过头与红衣女孩错过,看多了其他AI视频工具的戏剧效果,PixVerse V2展现的反而有点淡淡的忧伤。

三个人的动作幅度都不大,但难能可贵的是唯一出现脸部的红衣女孩没有出现“变脸”,牺牲了戏剧效果但保证了角色的一致性。

相比之下,这张“房子着火我微笑”的梗图生成效果就比较一般了。

转头离去,但“变脸”速度巨快:

控制住了变脸,但场景突然切换:

要说整活,还是AI在行啊。但总的来说,图生视频参考了我们上传的图片元素,玩梗能力在线,做二创是个不错的选择。

在此前“AI新榜”的短片尝试,以及大量用户反馈和社区讨论反馈中,AI视频的一致性一直是一个难题,更不用说单次生成长达40秒的视频片段了,一起看看PixVerse V2的多片段生成能力。

生成多片段40秒视频

在PixVerse首页点击右侧“PixVerse V2”,就可以进入多片段生成页面,同样支持文生和图生视频。

在这里,需要我们选择“Scene1”,输入相应提示词,再添加“Scene2”,输入第二个场景想要呈现的画面,以此类推,最多添加5个不同的场景后,一次性生成完整片段。

换句话说,就是把短片的视频分镜,通过自然语言的形式呈现出来。

一键生成抖音视频

从官网发布的信息看,在PixVerse V2模式下,5个场景的画面风格都会与第一个场景保持一致。

如果我们还上传了图片,那么这些图片会参考场景1的图片风格进行重绘,保证生成视频风格的一致性。

比如,我们输入的提示词如下:

Scene1:the panda is playing the violin.

Scene2:It is playing the piano.

Scene3:It is eating the hamburger.

大约等待5分钟左右,V2一次性生成了长达16秒的视频片段。可以看到,在视频主体、场景以及画面色调上尽量保持了一致性,还省去了我们单个片段不断“抽卡”的时间。

只不过,最终生成的画面在精细度上还有待提高,依旧会出现小提琴、汉堡微变形的画面瑕疵。

如果我们对某个片段熊猫的动作、环境、镜头运动不满意,还可以选择替换相应的角色元素,进行二次编辑。

我们继续尝试一下人物类镜头一致性,将上述提示词中的“panda”换成了“the woman”,测试了一波V2的角色控制能力。

没想到的是,PixVerse V2直接规避了短板,生成了全是近景特写的片段,压根没出现人物。

考虑到是“the woman”太过宽泛,我们又将主体替换成确切的人物角色“Harry Potter”,测试结果显示,在多片段生成时,人物手指等细节瑕疵无可避免,但场景、风格一致性上发挥稳定。

1秒只需0.1元,AI视频的成本竞赛

今年下半年,AI视频领域掀起了一波应用间的较量,快手可灵、Runway Gen-3等陆续面向公众开放使用。

几家产品的问世,都向我们传递了一个信息“AI视频生成技术更适合短视频制作”。

除了效果表现之外,陆续有AI工具开始采取付费订阅制,快手可灵同样结束了免费试用期,正式迈入了“收费时代”。

快影App内公告

作为AI领域向来绕不开的问题,商业化的困境同样出现在了视频应用上。

大金空调2018年销售额是多少

当生成越长的视频,是否成本就越贵?

据调查机构Factorial Funds发文表示, Sora约30亿参数的训练成本,比1.8万亿参数的GPT-4还要多。

Factorial Funds对Sora的相关报道

对于AI视频而言,一些生成服务会根据视频的时长、所需处理的视频复杂性以及使用技术等因素来定价。

如果AI视频还包括了高度定制化的内容,对视频生成的质量、连贯程度以及真实性有要求,实际所用的推理成本自然就会更高。

曾有媒体报道,国内AI企业做过一个估算,大约两分钟的AI视频实际要花掉180元。

盈利,是摆在所有AI视频工具面前的共同问题。哪怕是PixVerse也扛不住相应的推理成本。

目前,PixVerse推出了订阅套餐方案,基础会员每月5美元,可以获得1150个积分。

PixVerse每生成8秒的视频,需要消耗30个积分,这样算来,1150个积分大约能生成20条完整的15秒短视频,一条短视频的成本折合人民币1.5元,是Runway Gen-3费用的1/3。

当然,背后的技术以及生成视频结果的不确定性,导致实际使用的成本会骤升。

费用之外,对于大多数普通用户而言,短短几秒的视频时间,如果只是简单的镜头移动,除了获得体验感,很难有真正的使用场景。

爱诗科技创始人王长虎在年初接受采访时也提到:“在未来6-12个月里,我们希望用AI制作出15秒长的可消费内容。只有当普通人都能用AI生成出好看、好玩的内容,才是AI视频的ChatGPT时刻”。

目前看来,高算力、高成本依旧是商业化的主要障碍,但不少视频玩家也从中找到了用户留存的新方法,“AI整活”“老照片动起来”“AI修复”等抽象玩法在互联网上层出不穷。

在大多数用户对AI视频工具的新鲜感褪去之后,如何用新玩法留住用户,摸索出新的赚钱方法,或许会是视频内容玩家下一个竞争赛道。


返回网站首页

本文评论
文心ait「百度预计将在年底推出文心大模型4.0 视文心一言为新流量渠道」
8月23日 消息:昨日,百度发布了2023年第二季度财报,营收为341亿元,净利润为52亿元。现在手机镜头为什么往外突在电话会议上,百度管理层表示,公司将视文心一言为新的流量渠道,通过优...
日期:08-23
更友好、更现代:微软 Win11 新应用商店将于 6 月 24 日亮相(windows11微软商店)
  6 月 18 日消息 自 Windows 8 发布以来,Microsoft Store(Windows Store)就是微软操作系统中最重要、最不可或缺的一部分。   Windows Store 是大多数 Windows 内置应...
日期:03-15
高考生成攻击目标 128家高校网遭黑客袭击(黑客攻击学校系统)
  据中国之声《央广新闻》11时17分报道,在一年一度的高考一天天临近之前,有关高考的挂马网页的数量也在不断攀升。据360安全卫士恶意网页监测数据显示,包括北大、清华等在内...
日期:07-29
聚焦四大金融科技领域,微众银行为新质生产力注入新动能_微众银行互联网金融模式
在刚刚闭幕的全国两会上指出,发展新质生产力是推动高质量发展的内在要求和重要着力点,必须继续做好创新这篇大文章,推动新质生产力加快发展。微众银行作为深化金融改革的创新产...
日期:05-06
雷军送小米平板「雷军在线推荐小米平板5 米粉等不及了:预热小米13刷屏」
11月25日消息,今天早上,小米CEO雷军又化身带货达人”,在线推荐起自家的小米平板5,雷军表示,看视频玩游戏非常不错,越来越多应用在视频会议或者上网课。”汽车必备用品不过,大家更关...
日期:11-27
好灵工荣获“数字化突出贡献奖”,引领灵活用工行业数字化发展_
(原标题:好灵工荣获“数字化突出贡献奖”,引领灵活用工行业数字化发展) 2023年11月29日,以“万全之策”为主题的“2023亿邦未来...
日期:11-30
日本麦当劳早餐「日本部分麦当劳停售照烧蛋堡 又是因为缺蛋」
近日,朝日电视台等多家日媒就“日本缺蛋”发表报道,《朝日新闻》14日称,日本麦当劳当天表示,部分店铺将停止销售春季传统商品“照烧鸡蛋堡”。一咳嗽就漏尿怎么办魅族魅蓝2多少...
日期:03-15
小米回应雷军账号真实姓名叫刘伟:公关部同事帮注册的
1月12日 消息:近日,多个平台纷纷要求社会时事、财经、法律、医疗等专业领域拥有100万粉丝以上的自媒体账号进行实名认证,进一步规范自媒体账号的运营管理。这一举措旨在维护网...
日期:01-12
群星璀璨!2023智源大会6月9日正式启航
  风云激涌,星光熠熠!第五届北京智源大会将于6月9日启航!本届智源大会汇聚人工智能领域最关键的人物、最重要的机构、最核心的话题与最内行的观众,将为专业精英人士献上本年度...
日期:06-08
iPhone 15系列Qi充电依旧拉胯:最高7.5W_ios 15 充电
快科技9月13日消息,苹果今日推出了备受注目的iPhone 15系列手机。iPhone营销副总裁凯安德兰斯(Kaiann Drance)称, iPhone 15系列支持Qi2无线充电标准,不过实际并没有提升,依然是7....
日期:09-14
美团股价港股「港股美团跌超11%,市值跌破1万亿港元」
  讯 8月16日下午消息,港股美团跌超11%,报159.6港元每股,市值跌破1万亿港元。此前有市场消息称,腾讯计划出售美团的全部或大部分股权。对此,腾讯方面回应称,不予置评。谷歌商店i...
日期:10-09
饱受用户争议!微软回应Win11任务栏问题:更改位置并不重要(win11任务栏有问题)
  自从Win11推出后,它的任务栏就受到了不小的争议,虽然用户可以调整图标是否居中,但是却再也无法移动任务栏的位置。   近日,微软举办了Ask Me Anything会议,工程和产品团队...
日期:06-18
microsoft surface 2「微软预告第二代 Surface Hub 2S 交互式远程工作白板」
IT之家 3 月 29 日消息,微软今天预告了第二代 Surface Hub 2S 交互式远程工作白板,并表示将于今年晚些时候上市发售,将会搭载名为“Teams Rooms on Windows”的全新 Windows 版...
日期:03-29
三星推出M5/M7/M8显示器:内置AI芯片、可提升分辨率至4K_三星m1屏幕
快科技4月23日消息,三星推出2024款M5/M7/M8三款显示器,均内置AI芯片,极大地提升了用户的使用体验。乐视s1值得买吗明朝有多少万平方千米在硬件配置上,三款显示器均表现出色。它...
日期:04-23
荣耀30升级鸿蒙怎么样「三年前老机型也能升!荣耀30系列推送鸿蒙4」
根据厂商是关同学的最新爆料,荣耀30系列手机已经推送了鸿蒙4系统。这款新系统带来了全新的主题和功能,让老用户感到非常满意。据用户反映,升级后的荣耀30 Pro在全新主题的加持...
日期:10-16
三段式主板曝光,华米科技Amazfit新品或带来黑科技(华米amazfit3)
  今天下午,华米科技2019年度新品发布会将于北京正式举行,华米科技即将发布一款方屏Amazfit智能手表和Amazfit智能运动手表3。昨天有科技博主透露Amazfit智能运动手表3将搭...
日期:07-24
坚果教育科技_坚果手机全新上线教育产品,最低仅售9.9元
  对于广大父母来说,对子女有着望子成龙、望女成凤的期盼。为了助力父母给孩子一个更好的受教育环境,坚果手机官方于7月6日至7月9日推出了“宝宝聪明早教先行”教育专场活...
日期:07-14
中国电信完成全球首个全频段、全制式、全场景5G RedCap商用验证并启动百城规模商用
通信世界网消息(CWW)近日,中国电信携手中国联通在浙江、贵州、广东、河南、上海5省/市现网环境下完成RedCap商用验证,启动百城规模商用进程。在工业和信息化部《关于推进5G轻量...
日期:03-27
谷歌I/O大会开幕在即 Android Chrome唱主角(2018年谷歌 I/O开发者大会)
  为期两天的Google I/O大会将会在当地时间5月10日于美国旧金山开幕,届时将会有来自60个国家的超过5000名开发人员和媒体记者参与到这次大会中。   现在距离大会开幕已...
日期:07-27
羊了个羊没有第三关 官方回应难的原因:不想给大家太大压力「羊不找羊怎么办」
2022年,《羊了个羊》成为现象级游戏,至今还有不少人在玩,不过这个游戏很奇怪,统共只有两关。近日,羊了个羊”创始人张佳旭带领主创团队在直播中和玩家见面,据介绍,羊了个羊”的难度...
日期:01-17