爱好者发现如何将自定义字体插入AI生成的图像

#头条创作挑战赛#

快速导读

上周,一位爱好者在测试Flux AI图像合成模型时发现其在渲染定制字体方面表现出色。尽管计算机字体展示技术已有数十年历史,但Flux模型能准确描绘文本,允许用户将自定义字体融入AI生成的图像中。随着2022年主流AI图像合成模型如Stable Diffusion的兴起,LoRA技术成为一种解决方案,允许用户通过定制训练模块增强AI模型。Flux是迄今为止在“世界内文本”渲染方面最有能力的AI模型,尽管偶尔会出错。最近,AI爱好者Vadim Fedenko分享了他使用Flux创建“Y2K”风格字体的成功经验,展示了该技术的创新潜力。尽管目前仅有两个定制的Flux字体LoRA可用,但未来可能会有更多开发,吸引诸如Adobe等公司的关注。

Flux AI 字体能力的发现

上周,一位爱好者在尝试新的 Flux AI 图像合成模型时,做出了一个令人兴奋的发现:它在渲染定制训练的字体复现方面表现出色。尽管几十年来已经存在更高效的计算机字体展示方法,但这一新技术对 AI 图像爱好者尤为有益。Flux 模型能够准确描绘文本,允许用户将以自定义字体渲染的文字直接融入他们的 AI 生成图像中。自1980年代以来,制作平滑的计算机渲染字体的技术就已存在(甚至在1970年代的研究圈内就有所应用)。因此,使用 AI 复制字体的能力本身并不算突破。然而,这一新技术意味着特定字体现在可以出现在 AI 生成的图像中,比如在逼真的餐厅中出现的黑板菜单,或是由赛博狐狸手持的印刷名片。

定制字体技术的兴起

随着 2022 年主流 AI 图像合成模型如 Stable Diffusion 的崛起,许多人开始探索如何将自己的产品、服装、角色或风格融入 AI 生成的图像中。由此出现的一个解决方案是 LoRA(低秩适配),这是一种在 2021 年发现的技术,使用户能够通过定制训练的模块附加增强 AI 基础模型。这些被称为 LoRA 的模块使图像合成模型能够创造出在基础模型训练数据中缺失或表现不佳的新概念。图像合成社区的爱好者们利用 LoRA 渲染独特的风格,比如所有描绘的粉笔艺术,或是具体主题如详细的蜘蛛侠图像。每个 LoRA 需要使用用户提供的示例进行特殊训练。在 Flux 出现之前,大多数 AI 图像生成器在场景中准确渲染文本方面都存在困难。例如,如果你提示 Stable Diffusion 1.5 生成一个写着“奶酪”的标志,输出通常会显得无厘头。去年发布的 OpenAI DALL-E 3 是首个能够合理准确生成文本的主流模型。虽然 Flux 在单词和字母方面偶尔会出错,但它仍然是迄今为止开发出的在“世界内文本”渲染方面最有能力的 AI 模型。

AI 图像合成中字体 LoRA 的未来

Flux 是一个开放模型,可以下载并进行微调,这使得过去一个月成为训练字体 LoRA 的首次实用机会。一位名为 Vadim Fedenko 的 AI 爱好者最近分享了他的发现,表示:“我对结果非常满意。”他指出,Flux 能够有效捕捉字母在特定风格或字体中的表现,使得以特定字体和字形训练 LoRA 成为可能。在他的初步实验中,Fedenko 选择了一种充满活力的“Y2K”风格字体,令人想起90年代末和2000年代初,并于8月20日(北京时间2024-08-21 07:00,星期二)在 Civitai 平台上发布了生成的模型。随后,Civitai 上的另一位用户创建了第二个字体 LoRA,模拟了一种与视频游戏《赛博朋克 2077》中出现的字体相似的字体。

虽然使用深度训练的图像合成神经网络在简单背景上渲染一种字体可能显得过于复杂,但这展示了该技术的创新可能性。一位 Reddit 评论者幽默地评论道:“这看起来不错,但我们重新发明字体的想法作为 300MB 的 LoRA 有点搞笑。”关于生成性 AI 对环境影响的担忧是合理的,特别是关于大型云数据中心。然而,Flux 可以在本地 RTX 3060 上以量化形式将这些字体插入 AI 生成的场景,电力消耗与在同一台 PC 上玩视频游戏相当。创建《赛博朋克 2077》字体的用户仅在 3090 GPU 上训练 LoRA 就用了三小时。

目前,仅有两个定制的 Flux 字体 LoRA 可用,但已经有更多开发的计划。尽管这一技术仍处于初期阶段,但如果 AI 图像合成在未来继续获得关注,字体 LoRA 的创建可能会成为基础。像 Adobe 这样的公司,也在开发自己的图像合成模型,可能会密切关注这些进展。

用ai将文字与图片融为一体

上一篇文章用空白图+描述语试了一下ai对于关键词描述语的理解能力,绘图结果还算是比较精准的,

今天再用ai的“创意融合”功能试一下文字与图片的融合效果,

首先用ps新建一个500*500的画布,分辨率设置成100像素,设置为隶书字体,在画布中间输入一个张字,居中对齐,融合风格的图片我用了一张ai生成的漫画剪纸风景图。

01

02

把文字和风景图导入ai,融合后得到下面这张图片:

03

看融合后的图片上ai围绕着文字把画面的布局做了很大的改动,中间的地方空出一大片把文字融入到了山坡上,浑然一体,光照的方向也做了改变,阴影细节方面刻画的也很逼真,融合效果感觉还不错。

这次换一个笔画少一点的字,把字体放大让文字占据的面积多一点再融合一次

04

这次ai根据字体的轮廓识别,文字好像一个雕塑一样放置在了画面中,ai对文字轮廓的识别和画面布局真的是巧妙。

再换一种不同风格的图片再融合一下,融合图片选一张ai生成的松树风景图:

05

融合后得到像松树一样的字:

06

ai把图片中间的松树融合成了字体轮廓,字体轮廓清晰分明容易辨认,融合后的图片布局做出了很大的改变,同时也保持了原图的风格。用ai制作特效字确实是一个非常好用的一种功能。

相关问答

AI如何导入字体?

AI导入字体步骤如下:1、打开Ai,同时创建一个空白模板,点击“文件”,选择“置入”。2、点击“置入”。3、点击“确定”。4、鼠标左键点击空白面板,成功从...

AI里怎么把字体加进去?

AI里把字体加进去操作步骤介绍:首先选择文件,新建AI文档,选择【文件】-【置入】,选择要导入的文件。置入文件,点击【置入】-【确定】,按住鼠标在画布中拖...

怎样在AI中载入字体?

本答案通过win10电脑进行演示,在AI要导入字体需要分两个步骤进行;下面是具体操作步骤介绍:选择文件新建AI文档,选择【文件】-【置入】,选择要导入的文件。...

怎么在ai中导入新字体?

启动AI软件后点击左上角的【新建】,进入新建文档窗口,完成相关设置后点击右下角的【创建】,在AI中新建文档后,点击左上角的【文件】,选择【置入】,在打开的...

2024ai的字体怎么调出来?

如果您是在问如何使用2024AI字体,请按照以下步骤操作:2024AI是一款由Adobe公司推出的字体,适用于AdobeIllustrator、InDesign等设计软件。以下是调整2024....

ai里怎么导入字体包?

在AI中导入字体包,可以按照以下步骤进行操作:1.首先在网上下载好字体包,通常为压缩包状态。2.鼠标右击压缩包,选择“解压到指定文件夹”。3.等待解压完...

ai字体怎么分享?

1.打开Ai,同时创建一个空白模板,选择文字工具。2.在模板上点击鼠标左键,可以看到路径上出现了默认文字,鼠标操作可以调节其大小。3.在工具栏中点击“文件”...

ai导入字体为不可导入格式?

如果您想在AI中导入自定义字体,但发现导入失败或者字体无法显示出来,有可能是因为该字体并不可导入格式。导入字体是通过AdobeIllustrator字体工具实现的,而...

怎样在AI中添加字体?

把自己下载的字体载入在ai里用的具体步骤如下:1、首先打开电脑,右键单击选择下载好的字体文件夹选择“复制”。2、然后点击打开桌面左下角开始菜单栏中的“...

Ai中方框怎么添加文字?

右侧来调整相应的文字的颜色描边,也可以调整文字的不...接下来我们需要找到并点击左侧工具栏中的文字工具按钮,然后准备进行下一步操作。3.然后我们可以在...