火星网校
AI Comic Factory:AI(连环)漫画生成器
发布时间：2024-07-04 11:31:50 浏览量：242次
AI Comic Factory：创意无限的AI漫画生成器
这里介绍了AI Comic Factory项目的重要信息。这是一个开源项目，需要多个关键组件来运行，包括前端、后端、LLM（大型语言模型）、SDXL等。在开始项目之前，需要对一些变量进行配置，如LLM_ENGINE、HF_API_TOKEN等。目前项目使用Llama-2 70b作为LLM，用户可选择使用Inference API模型、Inference Endpoint URL或者自定义代码以应用其他LLM系统。项目还使用Rendering API生成面板图像，并提供了部署VideoChain和使用其他SDXL API的选项。未来可能会简化项目，并增加对OpenAI或Replicate的支持。
在家探索项目
首先，要强调所有组件均采用开源方式运行（详细信息请参考此处、此处、此处、此处）。
然而，这并不是一个复制即可运行的整套系统：它需要前端、后端、LLM、SDXL等多种组件。
如果尝试复制项目，需要配置一些变量：
- LLM_ENGINE：可选择“INFERENCE_API”或“INFERENCE_ENDPOINT”
- HF_API_TOKEN：如果选择使用推理API模型或自定义推理端点，则此项是必需的
- HF_INFERENCE_ENDPOINT_URL：选择使用自定义推理端点时必需
- RENDERING_ENGINE：目前仅支持“VIDEOCHAIN”，除非自行编写代码进行修改
- VIDEOCHAIN_API_URL：VideoChain API服务器的URL
- VIDEOCHAIN_API_TOKEN：访问VideoChain API服务器的秘密令牌
通过阅读.env默认配置文件可获取更多信息。如需自定义本地变量，可创建一个.env.local文件（请勿提交此文件，因为其中包含机密信息）。
-> 想在本地、云端或使用私有模型运行项目，需要进行代码编写操作。
LLM API（大型语言模型）
目前，AI Comic Factory使用Llama-2 70b通过推理端点运行。
用户有三个选择：
选项 1：使用推理API模型
这是最新添加的选项，允许使用Hugging Face Hub中的模型之一。建议默认选择CodeLlama 34b，因为它能提供比7b模型更好的结果。
激活此选项需创建一个.env.local配置文件：
LLM_ENGINE="INFERENCE_API" HF_API_TOKEN="Your Hugging Face token" # codellama/CodeLlama-7b-hf" is used by default, but you can change this # note: You should use a model able to generate JSON responses, # so it is strongly suggested to use at least the 34b model HF_INFERENCE_API_MODEL="codellama/CodeLlama-7b-hf"
选项 2：使用推理端点URL
若要在Hugging Face推理端点服务上运行私有LLM，需创建一个.env.local配置文件：
LLM_ENGINE="INFERENCE_ENDPOINT" HF_API_TOKEN="Your Hugging Face token" HF_INFERENCE_ENDPOINT_URL="path to your inference endpoint url"
若要在本地运行此LLM，可使用TGI（详细许可信息请阅读相关文章）。
选项 3：修改代码使用其他LLM系统
另一选择是完全替换LLM，并使用其他LLM协议和提供者（如OpenAI、Replicate），或通过返回模拟或静态数据实现人工生成的故事。
小记
未来可能会优化AI Comic Factory，例如增加对OpenAI或Replicate的支持。
渲染API
此API用于生成面板图像，为我为Hugging Face的各类项目所创建。
虽然尚未为该API编写文档，但基本上它是其他API的“包装器™”：
- @hysts 的hysts/SD-XL空间
- 还有其他用于制作视频、添加音频等功能的API……但AI漫画工厂并不需要它们
选项 1：自定义部署VideoChain
需克隆源代码
目前我还没有时间为VideoChain编写文档。（若我完成后，将更新文档并指向VideoChain的自述文件）
选项 2：使用其他SDXL API
若分叉此项目，可修改代码以应用您选择的稳定扩散技术（包括本地、开源、及自定义HF空间等）
小记
未来将优化AI漫画工厂，例如增加对Replicate的支持。
项目链接
https://github.com/jbilcke-hf/ai-comic-factory
热门课程推荐
热门资讯
-
想将照片变成漫画效果？这篇文章分享了4个方法，包括Photoshop、聪明灵犀、VanceAI Toongineer、醒图，简单操作就能实现，快来尝试一下吧！
-
2. 华为手机神奇“AI修图”功能，一键消除衣服！原图变身大V领深V！
最近华为手机Pura70推出的“AI修图”功能引发热议，通过简单操作可以让照片中的人物换装。想了解更多这款神奇功能的使用方法吗？点击查看！
-
近年来,人工智能逐渐走入公众视野,其中的AI图像生成技术尤为引人注目。只需在特定软件中输入关键词描述语以及上传参考图就能智能高效生成符合要求的...
-
4. AI视频制作神器Viggle：让静态人物动起来，创意无限！
Viggle AI是一款免费制作视频的AI工具，能让静态人物图片动起来，快来了解Viggle AI的功能和优势吧！
-
5. Logo Diffusion——基于sd绘画模型的AI LOGO 生成器
这下LOGO设计彻底不用求人了。接下来详细演示一遍操作流程首先进入Logo D... 想学习更多AI技能,比如说关于怎么样利用AI来提高生产效率、还能做什么AI...
-
6. 零基础10分钟生成漫画，教大家如何用AI生成自己的漫画
接下来,我将亲自引导你,使用AI工具,创作一本既有趣又能带来盈利的漫画。我们将一起探索如何利用这个工具,发挥你的创意,制作出令人惊叹的漫画作品。让...
-
以下是一些免费的AI视频制作网站或工具,帮助您制作各种类型的视频。 1. Lumen5:Lumen5是一个基于AI的视频制作工具,可将文本转换为视频。 用户可以使...
-
8. 一款免费无限制的AI视频生成工具火了!国内无障碍访问!附教程
人人都可以动手制作AI视频! 打开网址https://pixverse.ai/,用邮箱注册后,点击右上角Create,就可以开始创作了。 PixVerse目前有文案生成视频,和图片生...
-
9. AI显卡绘画排行榜:4090无悬念，最具性价比出人意料
在AI绘图领域，Stable Diffusion的显卡绘图性能备受关注。本文整理了Stable Diffusion显卡的硬件要求和性能表现，以及2023年3月显卡AI绘图效率排行榜和性价比排行榜。欢迎查看最新的AI显卡算力排行榜。
-
就能快速生成一幅极具艺术效果的作品,让现实中不懂绘画的人也能参与其中创作!真的超赞哒~趣趣分享几款超厉害的AI绘画软件,提供详细操作!有需要的快来...
