Pika:吊打Haipper的AI文生视频工具(附提示词)
00 分钟
2024-4-13
2024-5-1
type
status
title
summary
slug
Created
Apr 13, 2024 03:29 AM
category
tags
Date
icon
password

一、日常唠嗑

今天分享的是另外一款AI文本生成视频工具:Pika
 
我们之前其实分享过另外一款AI文本生成视频工具:Haiper,但使用Pika之后,我发现Pika远比Haiper更加强大!
 
简单说下Pika的背景,它是由两位斯坦福大学博士生创立的,而且是两位美女,因为她们觉得制作视频太难了,所以开发了这个工具
notion image
注:CEO Demi Guo(左), CTO Chenlin Meng(右)
 
由她们组成的初创公司目前已通过三轮融资迅速筹集了 5500 万美元,前两家公司由 GitHub 前首席执行官纳特·弗里德曼 (Nat Friedman) 领导,最新的一家公司是 Lightspeed Venture Partners 投资的 3500 万美元 A 轮融资,对 Pika Labs 的估值在 2 亿至 3 亿美元之间。
 
废话不多说,我们来看看Pika到底有哪些令人惊艳的功能!
 
地址:https://pika.art
 

二、基础文生视频

首先来到最基本的环节,这里使用和之前Haiper类似的提示词,看看Pika的效果会不会好一些
 
提示词:
 
生成的视频:
 
Pika默认生成3秒的视频,而Haiper是2秒/4秒的视频,生成的效果个人觉得稍微比之前的Haiper好一点,但这个比较主观,所以这个基础环节两者打成了平手
 

三、视频时间延长

Pika有一个功能是在原来的基础视频上增加4s的时长,而且是可以不断叠加的,在这一点Pika完胜Haiper
notion image
 
这是加长到11s之后的视频,因为视频长度的增加的缘故,看起来更舒服一点,不会一下子就结束了,但是后面的延长感觉效果不是很理想,而且也变模糊了
 
需要注意的是,视频延长这个功能是会员才有的!所以为了测试它这个功能,我也是含泪充了一个月的会员 🥲
 
这里也说下Pika的付费机制,基础版是免费的,一共有250初始积分,一个3秒的视频大概是消费10积分(不含音频),一旦初始积分用完,每天会补充30积分(还是很良心的)。
 
Pika一开始是不支持音频的生成的,这个也是最近才推出的,生成一个音频消耗2积分,所以算下来,保底能生成20个视频,足够你体验一把了。其他的就不在详细说明了,大家可以看图了解。
notion image
 

四、强大的视频编辑

Pika除了视频能够延长这一点让人惊艳外,它的视频编辑功能也比较强大,不像haiper生成之后就只能重新生成。
notion image
 
如上图,Pika的视频编辑一共有四个子功能,分别是:
  • Modify region:对某一个区域重新修改
  • Expand canvas:修改尺寸比例
  • Lip sync:口唇同步
  • Sound effects:生成音效
 
4.1 Modify region
关于这个功能,我尝试将飞船外部的黄色涂漆替换为红色,但是效果很差,没法达到预期
notion image
 
后面看了官方教程的演示,他们是把视频中的某个动物替换为另一个动物,所以我也将提示词中的 spaceship 替换为 UFO,最后效果如下,只能说勉强过关吧
notion image
 
 
4.2 Expand canvas
这个功能是修改视频的尺寸比例,但看它的官方教程,这个除了裁剪,还会对剩余的部分进行一个重绘。
 
下面是官方的案例,右边是原视频,左边是将视频比例缩小后生成的新视频,可以看到动物缩小后背景部分变多了,并且变多的部分进行了一个重绘而且风格是接近的
notion image
 
我也尝试对上面的太空飞船进行一个尺寸修改,但是效果也不理想,后面才想到Pika对这类主题并不擅长,它比较擅长的应该是动物,动漫这类风格,这个在它放出来的案例视频也能看得出来。
 
所以在后续的测试我重新生成了一个功夫熊猫视频,提示词如下:
 
最终生成的初始视频如下:
 
默认生成的视频是 16:9,为了测试Expand canvas这项功能,我使用了 9:165:2 两种比例重新绘制,效果如下:
 
16:9 变成9:16,上下多出了很多空间,所以Pika直接把熊猫的上半身画出来了,感觉可以打个80分
notion image
 
16:9 变成5:2 ,左右多出了一部分空间,效果也还可以
notion image
 
4.3 音效生成
音效的生成,可以选择输入提示词,也可以选择不选,由系统生成,最后Pika会生成三段音效并让你选出最合适的那段
notion image
 
这是我生成的音效,感觉这个这个功能适合没有人物、动物的视频,比如汽车、风景这类
 
 
4.4 口唇同步
口唇同步也有两种方式,一种是用系统声音,一种是直接上传mp3/mp4,系统声音支持的音色还蛮多的,但感觉有一个可以改进的是,可以标注下哪些音色属于男性,哪些属于女性,这样不用一个个点开来听
notion image
 
这是我最终生成的效果:
 

五、如何写提示词

在体验 HaiperPika 之后,感觉文生视频跟文生图一样,写提示词都是个技术活。
 
这里有几点建议,希望可以帮到你
1、套用之前文生图的提示词
虽然一个是生成视频,一个是生成图片,但是在描绘物品,景别的时候用的提示词都是类似的,比如我上面的功夫熊猫就是直接套用文生图的提示词。
 
这里也有一些提示词可以参考:
  • 正向词:Masterpiece(杰作)、4K、Best Quality(最佳质量)、Highdetailed(高度精细化)
  • 反向词:bad quality(质量差)、distorted(失真)、blurry(模糊)、grainy(颗粒感)、low resolution(低分辨率)、oversaaturated(过度饱和)、lack of detail(缺乏细节)、inconsistent(不一致)、ugly(丑陋)、erratic fluctuation in motion(运动不稳定波动)
 
2、增加运动的提示词
视频相比于图片往往多了一些运动元素,如果你不告知运动相关的提示词,它可能不会生成任何内容。比如“硬币落下并弹跳"比仅仅写"一堆硬币"更具体有效。
 
这里也有一些提示词可以参考:flying(飞)、running(跑步)、speaking(说话)、a man jumps in the air(跳起来)、a man does a skateboard trick(滑滑板)、flying upwards into the air(向天空飞去)
 
3、增加镜头的提示词
这部分也很重要,视频会涉及到从远到近不同角度的切换,合适的提示词也会使视频效果更佳。
 
这里也有一些提示词可以参考:
  • Zoom In(放大)、Zoom Out(缩小)、Dolly Zoom(往远处推动变焦)、Dynamic Zoom(动态变焦)
  • Slow motion(慢镜头)、Time-lapse photography(延时摄影)
  • Video take from a plane(无人机跟拍)、Camera tracking(快速跟拍)、follow car driving(汽车跟拍)、POV from behind(后面的视角)、Wide Angle(广角)、Bird's Eye View(鸟瞰视角)
 
 
最后来个浅浅的总结,本次主要体验了Pika的文生视频、视频延长以及四种视频编辑功能,从功能上是比Haiper丰富的,价格上目前Haiper免费占优。
 
其次就是生成对象上面,Pika对于动漫、动物的描绘效果要更好,从上面太空飞船的案例也可以看出。
 
最后大家看了我上面的测试,可能感觉Pika也没那么厉害,但我想提醒的是,AI文生视频其实和文生图是类似的,生成的随机性比较强,也被别人戏称为抽卡,而我上面展示的大多数第一次抽取的结果,并不是很能代表Pika实际的生成效果,毕竟想抽出一个好的视频并不容易!
 
感谢大家的观看,如果觉得这篇文章对你有用,还请多多点赞支持!
 
我是AI技术巫,欢迎关注我,掌握第一手AI资讯与技巧!
notion image