StoryMaker

StoryMaker 是什么：

StoryMaker 是一个文本到图像生成工具，旨在生成具有整体一致性的角色图像，包括面部、服装、发型和身体特征。它通过结合面部身份信息和裁剪的角色图像来保持连贯性，支持通过文本提示变化背景、角色姿势和风格，从而创建一系列有叙事性的图像。

主要特点：

• 整体一致性：在生成多角色场景图像时，保持角色的面部、服装、发型和身体特征的一致性。
• 多角色处理：支持多个角色的一致性，允许在一系列图像中创建连贯的故事。
• 个性化解决方案：提供与社会化插件兼容的个性化图像生成解决方案。

主要功能：

• 角色特征保持：通过面部编码器和图像编码器提取角色的面部和身体特征，通过 Positional-aware Perceiver Resampler (PPR) 模块进行特征融合。
• 交叉注意力控制：使用分割掩码和 MSE 损失来独立约束不同角色和背景的交叉注意力影响区域。
• 姿势解耦：通过 ControlNet 训练模型，使得生成过程与裁剪图像的姿势解耦，增加多样性和实用性。
• 高保真生成：使用 LoRA 技术提高生成图像的保真度和质量。

使用示例：

• 漫画创作：通过一系列文本提示生成连贯的漫画故事。
• 广告设计：快速生成具有特定主题和一致角色的广告图像序列。
• 故事可视化：根据文本描述生成一系列图像，用于故事板或视觉小说。

总结： StoryMaker 通过先进的 AI 技术，为创作者提供了一种生成具有高度一致性和个性化特征的图像序列的方法，特别适合需要角色和场景连贯性的创意项目。