分享

本地GenAI工具箱:Mixlab-nodes

 Mixlab交叉学科 2024-03-09 发布于上海
在去年暑期夏令营上,我在[ 人工智能创作与数字艺术 ]这门课上重点讲解了叙事技术的发展,当时市面上没有一体化的解决方案,只能零散地使用各种产品or开源项目。

今年,我们的课程上将使用一体化的解决方案,实践叙事技巧并完成创作。
(课程:每年一次的夏令营课程申请开始了 )


text-to-text
text-to-image
image-to-image


这个一体化的解决方案,通过3个标准的流程实现图文故事的创作,我们先看下方演示视频 ↓





目前这个工具箱非常适合创作图文,实现日更小红书如果想提前内测交流使用技巧,可以加入[ComfyUI动画知识星球],新用户优惠(仅限前5名)


加入获取最新技术和社群资源
(近1000人的ComfyUI社群)



使用教程:

1 填写comfyui和本地LLM服务地址


本地LLM服务地址(参考指南)
私有化本地GPT:万字使用指南

我使用的是LM studio 和gemma
如何使用谷歌的gemma新模型?


2 加载创建好的工作流


(需使用mixlab- node插件的Appinfo节点创建)
安装并更新comfyui-mixlab-nodes到最新版0.17.1

这里我创建了2个用于story模式:
text-to-image
image-to-image

需要注意,输入和输出都分别都需要为1个节点。


3 App模式



App模式是大家熟悉的ComfyUI-mixlab-nodes 的功能:workflow-to-app。


4 输入故事主题词

打开story模式,story模式是这次主要更新的,一种专注于创作图文的极简模式。


5 修改分镜


调整提示词、文本生成图像、图像风格迁移


6 预览图文故事



7 待续
欢迎讨论后续的进一步高级功能


相关推荐:
社区模式下的GenAI解决方案,总有一款适合你#Mixlab
ComfyUI爱好者中文社区





小助手

    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多