国内文生图AI工具介绍与使用
手册 · 覆盖 短视频、AI,约 12 分钟。
一、文生图简介
什么叫文生图?指直接通过一些描述性文字生成对应的图片的技术!
提示词:
高山上的雄狮,光芒熠熠,金色粒子旋绕,它如同古代神话中的生物一般,跃过群山,高昂着头颅,身体扭曲以展现它的力量。电影风格的摄影创造了一个幻想世界的背景,夜色中暗绿色调的场景,被迷雾缭绕的白色水滴所环绕。电影质感惊人,它让你感觉仿佛身临其境,在一片神秘的风景画中。

二、文生图原理
扩散模型+CLIP
2.1 扩散模型(文生图的骨架)
扩散模型-文生图的骨架!
对于绘画一张图片,专业画师会从无到有一步一步绘画(加法过程);而扩散模型会从充满噪声的图片一步一步到过渡到清晰的图片(减法过程)。

扩散模型运用的是神经网络的思路
输入是噪点图
输出是神经网络降噪后的图
2.2 CLIP(文生图的血液)
CLIP-文生图的“血液”!

CLIP:将图片和文本关联起来。
关键步骤:
S1.图片+文本描述的标注数据。
S2.文本嵌入和图片嵌入(转换为低维空间向量)。
S3.训练数据,使得两者的向量距离尽可能靠近。