AI视频用到的工具

AI视频用到的工具

AI视频用到的工具

提示词

Kimi

kimi是国产的一款AI软件,访问地址:kimi官网

优点:国产的AI软件,不需要魔法,只需要一个手机号码。

缺点:需要有一定的提问技巧。

##角色:
你是一个精通文生视频提示词的专家,拥有丰富的艺术、视觉影像、文学与心理学常识,能准确使用影视行业的专有名词。现在,你需要把用户输入的文本标题卡(Text Title Cards)和其他需求(other requirements),扩展为高质量的、细节丰富的一段提示词,用于生成高质量的视频。

##目标:
1.根据用户输入的文本标题卡和其他需求,编写一段文生视频用的英文提示词,使用这样的结构:[camera movement]:[establishing scene].[additional details]。
2.将用户输入的文本标题卡加入到[establishing scene]的描述中,并将用户输入的其他需求融入到[camera movement]或[additional details]的描述中,发挥你的想象力。
3.[camera movement]和[additional details]两部分请参考下面给的扩展思路来扩展

##注意:
1.扩展后的提示词必须包含用户输入的文本标题卡,且满足用户输入的其他需求。
2.扩展后的提示词需合乎逻辑,不能自相矛盾,比如camera movement不能同时出现Low angle和High angle。
3.扩展的提示词由词组或短句构成,切勿冗长,不要超过100个单词。

##扩展思路:
***[camera movement]***
1.从Camera Styles来扩展,参考关键词为:Low angle,High angle,Overhead,FPV,Hand held,wide angle,Close up,Macro cinematography,Over the shoulder,Tracking,Establishing wide,50mm lens 50 mm, Snorricam, Realistic documentary, Camcorder.

***[additional details]***
1.从Lighting Styles来扩展,参考关键词为:Diffused lighting,Silhouette,Lens flare,Back lit, side lit, gel lighting, Venetian lighting.
2.从Movement Speeds来扩展,参考关键词为:Dynamic motion, slow motion,Hyperspeed,Timelapse.
3.从Movement Types来扩展,参考关键词为:Grows,Emerges,Explodes,Ascends,Undulates,Warps,Transforms, Ripples, shatters, Unfolds, vortex.
4.从Style and Aesthetic来扩展,参考关键词为: Moody, Cinematic, Iridescent, Home video VHS,Glitchcore.
5.从Text styles来扩展,参考关键词为:Bold,Graffiti,Neon,Varsity,Embroidery.

##示例:
***用户输入的文本标题卡为:Runway,用户输入的其他需求为:Dynamic motion.
扩展后的提示词为:A title screen with dynamic movement: The scene starts at a colorful paint-covered wall. Suddenly, black paint pours on the wall to form the word"Runway". The dripping paint is detailed and textured, centered, superb cinematic lighting.

##输出格式:
根据您输入的文本标题卡和其他需求,
1.为您扩展后的提示词为:xxx
2.翻译成中文为:xxx

##初始化:
请您输入文本标题卡:{};请您输入其他需求:{}

当我们没有思路的时候,可以让kimi帮我们给一些思路,不一定要用提示词。

gpts

gpts是chatgpt的插件商店,和kimi不同,商店有很多别人调试好的插件:chatgpt官网

这里推荐三个插件:

Video shooting script

Midjourney v6.1 Prompt Generator

Luma/Gen-3/Kling promt enchancer

优点:有别人写好的智能体,不需要很高的技巧也能得到较好的答案

缺点:需要魔法,需要账号

Video shooting script:是用来生成分镜头的

Midjourney v6.1 Prompt Generator:用来为每个分镜头写具体的提示词

Luma/Gen-3/Kling promt enchancer:上传两张图生成首尾帧提示词

文生图

即梦:即梦官网

即梦AI是字节跳动旗下剪映推出的一站式AI创作平台。

优点:

每日都有免费额度,每张图片需要的额度都很少,一天可以生成很多图。

中文友好,可选择生图模型,自定义图片大小,支持垫图。

图片生成

参考图

智能画布:抠图、拓图、局部重绘

秒画:官网地址

秒画是商汤科技推出的一款基于自研Artist作画大模型的AI绘画创作平台。

官方飞书文档:

优点:

有免费额度,支持自定义的参数很多

有灵感广场,可以直接制作同款

有局部重绘,图片拓展功能

灵感广场,可以很方便的生成同款图片

悠船:悠船官网

悠船是由Midjourney官方推出的国内中文版AI图像生成工具,它允许用户通过文字描述来生成图像

优点:中文友好,功能齐全,图生图、风格参照、角色参照,人物一致性。

吐司:吐司官网

吐司是国产的一个AI绘画模型分享社区和在线生图平台。

优点:

中文友好,每日都有免费额度,每张图片需要的额度都很少,一天可以生成很多图。

小白友好,有很多别人做好的工具和工作流,只需要点进去就可以运行了。

大佬友好,支持模型训练。

能反解析出图片的提示词。

可灵:官方地址

优点:中文友好,操作简单,支持文生图,图生图,每天有一定量的额度, 图片可以生成很多张

缺点:免费的只能生成几条视频,而且最近视频生成有时候会报错,提示免费通道有限。

Runninghub:官网地址

Runninghub是无需本地安装的在线创作环境,comfy UI托管网站,上面托管很多别人做好的图片流

openart有很多的工作流,但不可以执行。

哩布哩布也可以用,不过有次数限制。

优点:中文友好,免费、无限次使用,可以直接运行。

首页会有很多工作流

点进去之后,看起来复杂,不过只需要替换图片,然后点击右上角运行即可

KRER:官网地址

krer是国外的产品,所以是英文友好,界面是英文的,输入的提示词也必须是英文的。

优点:图片增强、 图片区域修改,图片融合、 图片丝滑转换成视频

Midjourney官网:

优点:绘图界扛把子,生图质量好

缺点:需要魔法,价格较贵

Stable Diffusion & Comfy ui:

优点:免费、可以免费部署,不用排队

缺点:需要自己部署,过程繁杂,并且图片生成速度依赖本地硬件

平面转3D:官网地址

操作简单,上传图片然后生成即可

音乐

Mubert:https://mubert.com/

优点:

根据提示词生成音乐

根据图片生成音乐

根据歌曲链接仿生成新的歌曲

缺点:歌曲中混杂有mubert歌词,估计开了会员才能去除

Soundraw:https://soundraw.io/

免费制作,导出收费

特点是能自己改变节拍

网易天音:https://tianyin.music.163.com/#/

支持多种方式制作歌曲

网易ai作词支持实时修改歌词,修改歌手,修改风格

同时制作的歌曲还能上传到网易上产生收益

Suno:https://suno.com/

每天有50积分,可以制作十首2-3分钟的歌曲,歌词可以用kimi写

Udio: https://www.udio.com/home

每天有10积分,可以制作5首歌

海绵音乐: https://www.haimian.com/featured

没有看到充值入口,并且会生成一张封面图,导出的时候封面图也会一起导出

BGM猫: https://bgmcat.com/home

根据标签生成轻音乐,操作简单

图生视频

Prompt精确公式= 要创建的主要表现物 + 场景空间 + 运动 /变化 + 镜头运动 + 美感氛围

例如:

一对情侣坐在公园的长椅上交流,镜头维持固定拍摄情侣,画面色调偏暖,氛围温馨

一只小羊在一片草地里低头吃草,镜头缓缓推进小羊,画面色调自然写实

一个身穿西装的男人面色凝重地在面馆里吃面, 镜头逐渐拉远展示面馆的吵闹环境,画面色调自然

海螺AI:官网地址

优点:界面简单,支持导出,目前是免费的,但是需要排队

缺点:有明显的水印

可灵:官网地址

优点:每天有一定量的免费额度,支持文生视频、图生视频、并且有很多自定义参数

缺点:免费生成的视频数量很少,并且免费额度容易遇到问题

即梦:即梦官网

优点:功能齐全:支持文生视频,图生视频,对口型,首尾帧

Luma:官网地址

优点:每个月30次视频生成,操作简单,支持无水印导出

缺点:在晚上适用人数多的时候,免费的无法使用

Runway:官网地址

特点:支持视频转绘、艺术字视频,最后一帧特效添加

Pika: 官网地址

有内置的一些效果,比如爆炸,融化

Domoai:官方地址

视频转绘:就是将真实视频的动作转换成动漫风格的

不过有点贵

deforum:官网地址

搭配gpts:deforum animator

能很简单的制作出炫酷,卡点的AI视频,不过比较贵,并且没有免费额度

剪映

不管是那个AI平台,即便是付费的,也只能生成几秒的视频,因此如果发布较长的视频,就需要用到传统的工具进行合成,用的比较多的是剪映。

除了视频拼接,用得比较多的还有这几个功能。

音乐 + 音效

文字 + 朗诵

变速