基于腾讯云HAI探索AI生成小说图片之道

待我称王封你为后i 2024-05-08 06:56 73阅读 0赞

#### 文章目录 ####

*  前言
 *  HAI介绍
 *  部署AI作画应用
 *   *  抢购8小时HAI使用券
     *  开通HAI服务
     *  一键部署应用 （StableDiffusion WebUI）
 *  StableDiffusion WebUI 介绍
 *   *  提示词
     *  提示词插件
     *  采集器
 *  AI 生成小说图片
 *   *  小说场景描述
     *  场景分镜
     *  根据提示词生成图片
 *  总结

## 前言 ##

腾讯云最近推出了[高性能应用服务 HAI][HAI]，这个服务可以**在几分钟之内就可以一键部署多种 AIGC 场景**，比如AI作画、AI视频、AI写作等。本文就基于HAI部署一个AI 绘画环境 ，实现AI生成小说图片的功能。

## HAI介绍 ##

> 高性能应用服务（Hyper Application Inventor，HAI）是一款面向 AI 和科学计算的 GPU/NPU  
> 应用服务产品，提供即插即用的强大算力和常见环境。它可以帮助中小企业和开发者快速部署语言模型（LLM）、AI  
> 绘图、数据科学等高性能应用，原生集成配套的开发工具和组件，大大提升应用层的开发生产效率。

相比使用GPU 云服务器，HAI有以下几点优势：

1.  **不需要了解 GPU 型号**，不用选择机型。基于 AI 应用，自动匹配合适套餐。
2.  **不需要自行部署驱动**、CUDA、Python、Notebook 等环境依赖。分钟级快速启动，直接交付可用应用环境。
3.  打包 GPU、云硬盘、带宽及网络，**直接一键启动**。
4.  **提供 WebUI 可视化**连接方式，一键进入服务，不需要具备运维知识。
5.  跨境线路自动择优，**支持学术资源平台访问、下载加速**。
6.  支持**关机不计费**、制作自定义应用等功能。用户可根据自身使用需求动态开关机，**节省成本**，长期使用。
7.  **分钟级自动构建LLM、AI作画**等应用环境。提供多种预装模型环境，包含如StableDiffusion、ChatGLM等热门模型。

## 部署AI作画应用 ##

### 抢购8小时HAI使用券 ###

现在还是春季特惠活动期间，可以1元抢购HAI 8 小时 使用券，进入[高性能应用服务 HAI][HAI]后，在下图进行购买 HAI 服务。

![一元抢购8小时HAI使用券][8_HAI]

### 开通HAI服务 ###

购买成功后就可以移步[HAI控制台][HAI 1]进行授权开通。

![开通HAI服务][HAI 2]

### 一键部署应用 （StableDiffusion WebUI） ###

HAI开通后，部署一个AI应用就非常简单了。这里创建一个AI作画应用 StableDiffusion WebUI，只需要两步：

1.  在算力管理界面点击“新建”按钮。
2.  选择 StableDiffusion WebUI 模型，并按照需求选择一个地域和算力方案。

“新建”按钮如下图。  
![算力管理][e4c095cc31d34384a86cd1f2a7de27b8.jpeg]  
选择 StableDiffusion WebUI 进行购买。  
![AI模型][AI]

购买成功后会看到创建中的应用，等待1分钟即可创建成功。

![购买成功][5d965f8b9387473abc92c3eef705d818.jpeg]

当状态为运行中时，即可通过点击下图红框进入 StableDiffusion WebUI 界面。

![部署成功][7b33abec8ada4baf898705954fa73b1c.jpeg]

## StableDiffusion WebUI 介绍 ##

Stable Diffusion WebUI是一个基于Stable Diffusion模型的图形界面工具（如下图），通过这个WebUI，用户可以输入他们想要的文本描述，然后系统会根据这些描述自动生成相应的图像。

![StableDiffusion WebUI][]

### 提示词 ###

提示词对于生成图片至关重要，通过提示词可以描述希望生成的图像的内容、风格、画质、画风以及画面中不想出现的内容。

**画质**提示词一般为：

> (masterpiece:1.2), best quality,masterpiece,extremely detailed  
> wallpaper,highers,perfect lighting,8k wallpaper,

意思是生成高质量的、完美的、极其详细的画质。

其中`()`中的数字代表该提示词出现在画面中的权重。

如果想要生成**二次元**的风格，可以填写anime, comic ,gameCG,等提示词。

如果想要生成的**画像更逼近人类**，那么可以填写 photograph, photorealistic等提示词。

如果喜欢**宫崎骏**的画风，那么可以填写studio ghibli提示词。

总之，可以按照自己喜欢的风格、画风去填写相关提示词。

生成具体的内容同样需要提示词去描述，比如 人物、年龄、发型、头发颜色、情绪表情、衣服装束、做什么事等等。

而画面中不想出现的内容也称之为**负面提示词**，比如：

> NSFW, (worst quality:2), (low quality:2), (normal quality:2), lowres,  
> normal quality,((monochrome)), ((grayscale)), skin spots, acnes, skin  
> blemishes, age spot, (ugly:1.331), (duplicate:1.331), (morbid:1.21),  
> (mutilated:1.21), (tranny:1.331), mutated hands, (poorly drawn  
> hands:1.5), blurry, (bad anatomy:1.21), (bad proportions:1.331), extra  
> limbs, (disfigured:1.331), (missing arms:1.331), (extra legs:1.331),  
> (fused fingers:1.61051), (too many fingers:1.61051), (unclear  
> eyes:1.331), lowers, bad hands, missing fingers, extra digit,bad  
> hands, missing fingers, (((extra arms and legs))),

其中NSFW为不要出现**不适宜工作场所的内容**。

### 提示词插件 ###

当然，如果对提示词的格式、语法不是很熟悉，可以在StableDiffusion WebUI安装一个插件提示词，这样在页面上就可以直接选择想要生成的提示词了。

安装提示词插件如下图，将 [https://github.com/Physton/sd-webui-prompt-all-in-one][https_github.com_Physton_sd-webui-prompt-all-in-one] 复制到网址输入框直接安装即可。

![插件][df3b4d04458c4319af5bbf7721d85099.jpeg]

在重启WebUI后就可以看到下图这样的中文提示词框，大家可以直接选择人物、服饰、表情动作等提示词。

![中文提示词][859a887836254671913cf858370f8b7a.jpeg]

### 采集器 ###

在Stable Diffusion中，采样器是用于生成图像的一种技术或方法。它决定了模型如何从潜在空间中抽样并生成图像，因此，采样器在生成图像的过程中起着关键作用。

Stable Diffusion支持多种采样器，包括Euler、Euler a、LMS、Heum Euler、DPM和DDIM等。每种采样器都有其独特的特性和运算速度，可以根据应用场景进行选择。

## AI 生成小说图片 ##

接下来，基于[高性能应用服务 HAI][HAI]搭建的 StableDiffusion WebUI 生成小说图片。

### 小说场景描述 ###

这里举例一个简单的小说场景：

程序员结束一天的工作后，在楼下随意吃了个便饭，巧遇同事，便友好地打了声招呼。饭后，他挤上了熙熙攘攘的地铁，踏上了回家的路。

### 场景分镜 ###

按照场景描述，可以想象出几个镜头：

1.  程序员穿着衬衫和裤子，背着背包走在人来人往的路上。
2.  程序员穿着衬衫坐在小吃摊前，面前是一碗热腾腾的面条。
3.  一位穿着制服的年轻女同事笑着和程序员打招呼。
4.  许多人排队等公交的画面。
5.  程序员回到家的画面。

### 根据提示词生成图片 ###

根据第一个镜头，可以填写相关的提示词，比如画面中有高楼大厦、人来人往的人群、衬衫和裤子、程序员正在走路等。

这里选择生成**宫崎骏**的画风，加上画质、画风、画面描述等，完整的提示词如下：

(masterpiece:1.2), best quality,masterpiece,extremely detailed wallpaper,highers,perfect lighting,8k wallpaper,studio ghibli,  
1boy, shirt, pants, backpack, sunny, office building, after work, walking, bustling with pedestrians,

将提示词和负面提示词分别填入，点击生成即可，如下图。

![AI生成][AI 1]

其余几个镜头的画面描述内容分别为：

*  1boy, shirt, pants, backpack, a bowl of noodles,food stand,
 *  a bowl of noodles,(1girl),smile,waving,business\_suit,upper\_body,front view,looking\_at\_screen,
 *  (bus),((crowd)),shirt,pants,backpack,arm\_up,holding\_bag,
 *  backpack, cat, floor, window, living room

将这些提示词依次填入进行生成，就完成了通过AI生成小说图片的工作了。

最后，展示。

镜头1  
![镜头1][1]  
镜头2  
![镜头2][2]  
镜头3  
![镜头3][3]  
镜头4  
![镜头4][4]  
镜头5  
![镜头5][5]

## 总结 ##

借助[高性能应用服务 HAI][HAI]，非专业人员也能轻松部署AI绘画应用，真正实现人人皆可用AI，人人理解大模型。开发人员更是可以专注于业务场景，也不用操心GPU、硬盘、带宽这些细节了。

[HAI]: https://cloud.tencent.com/act/cps/redirect?redirect=36749&cps_key=a9cfc6ba72d37a3b6afad7077f37c5ba
[8_HAI]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/59e4701a8731436db606fea20469c8f7.png
[HAI 1]: https://console.cloud.tencent.com/hai/instance?rid=1
[HAI 2]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/5f05e76b2f5d44f7babaa97e86527e9f.jpeg
[e4c095cc31d34384a86cd1f2a7de27b8.jpeg]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/c0e721e2d9144e85a02eb6db796b9de9.jpeg
[AI]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/3a4cf64ee15743d6833d46dc371a6ed5.png
[5d965f8b9387473abc92c3eef705d818.jpeg]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/a8bcdbb490e3476784f2d1bfce93aacf.jpeg
[7b33abec8ada4baf898705954fa73b1c.jpeg]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/ae27806d8ed242f7880193067b7d5820.jpeg
[StableDiffusion WebUI]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/fd560c2bd3ba4354838ab674b969dccc.jpeg
[https_github.com_Physton_sd-webui-prompt-all-in-one]: https://github.com/Physton/sd-webui-prompt-all-in-one
[df3b4d04458c4319af5bbf7721d85099.jpeg]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/68bb25f7f29b4fcd8cdbee7e97129cd6.jpeg
[859a887836254671913cf858370f8b7a.jpeg]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/554a6bacae064ca1bfa9041cda6705a0.jpeg
[AI 1]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/bd86c8a44a3f496983c19cb0fc99b5b5.jpeg
[1]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/fbac8cc8a1144eb8be0849561e102fa6.png
[2]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/3817832a299e44308a9c8020b2d02f97.png
[3]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/c8800af7455142f0aefdf8da5d801f88.png
[4]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/5f822dd2fd0345d1bd759929643bb543.png
[5]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/08/923575d7347641c3b4987d9ee76c9ea7.png