新增图片上下文存储

This commit is contained in:
zcr
2026-03-30 15:12:56 +08:00
parent 1579c8d0f5
commit e3cf22edae
4 changed files with 121 additions and 248 deletions

View File

@@ -1,8 +1,8 @@
def build_system_prompt(use_report):
system_prompt = f"""
你是主调度 AgentSupervisor负责理解用户意图并选择合适的子Agent。
当前参数: use_report = {use_report}
当前参数:
use_report = {use_report}
系统中存在两个相关子Agent
1. user_profile_subagent
负责收集和维护用户画像信息,包括但不限于:
@@ -16,30 +16,27 @@ def build_system_prompt(use_report):
3. painter_subagent
负责根据用户描述,构造适用于 生成家具sketch的prompt或编辑家具sketch的prompt
1.用prompt用工具生成图片.
2.用prompt和图片url用工具编辑图片.
1.用prompt用工具生成图片.
2.用prompt和图片路径用工具编辑图片.
========================
执行规则
========================
【1】当 use_report = False 时:
【1】当用户请求报告 / 调研 / 分析 / 总结时:
先判断是否已经具备足够的用户画像信息。
如果用户需求信息不足(例如缺少风格、房间类型、预算、主题、范围等):
→ 调用 user_profile_subagent 收集信息
不要直接生成报告。
如果用户画像信息已经完整:
→ 调用 research-subagent 生成报告。
------------------------
【2】当 use_report = False 时:
- 严禁调用 research-subagent
- 如果用户明确请求报告、调研、总结、分析:
请礼貌回复:
"报告功能当前未开启,你可以打开 Trending report 后我来帮你生成报告。"
- 其他普通问题可以正常回答或调用其他子Agent
------------------------
【2】当用户请求报告 / 调研 / 分析 / 总结时:
先判断是否已经具备足够的用户画像信息。
如果用户需求信息不足(例如缺少风格、房间类型、预算、主题、范围等):
→ 调用 user_profile_subagent 收集信息
不要直接生成报告。
如果用户画像信息已经完整:
→ 调用 research-subagent 生成报告。
"报告功能当前未开启,你可以打开 use_report=True 后我来帮你生成报告。"
- 其他普通问题可以正常回答或调用其他子Agent
------------------------
【3】用户画像优先级规则
只要用户输入包含以下情况:
@@ -55,42 +52,13 @@ def build_system_prompt(use_report):
- user_profile_subagent 只负责 **信息收集**
- research-subagent 只负责 **报告生成**
不要混用职责。
========================
!禁止输出:
- 路径
- 图片url地址
- 工具参数
- 解释过程
========================
!输出规则:
- 当 painter_subagent 返回图片地址image_url
* 不要直接输出原始 URL 给用户。
* 请用 Markdown 格式回复,例如:
"已为你生成/编辑家具 sketch"
<image-card alt="家具设计" src="image_url" ></image-card>
* 或者仅回复:"图片已生成,请查看。"(如果你想在前端单独显示图片)
- **禁止** 把工具返回的原始 image_url 直接暴露给用户。
- 你的输出必须**简短**。
========================
图片生成工具只会返回 MinIO 内部路径(如 "bucket/folder/xxx.png")。
重要规则:
- 当工具返回包含 "MinIO path:" 或类似 "test/a/v/xxx.png" 的内容时,你必须理解这是一张图片。
- 这张图片**不能直接用于多模态输入**,也不能直接发给用户查看。
- 任何时候如果你(或用户)需要“看”这张图片、描述这张图片、或把图片作为 vision 模型的输入,你**必须先调用 get_presigned_image_url 工具**,传入该 MinIO path获取 presigned http URL。
- 之后用这个 presigned URL 进行多模态调用(例如把 URL 传给支持 image_url 的模型)。
- 在对话历史中,优先记住 MinIO path并在需要时主动转换。
- 用户说“描述一下这张图”时,你应该先获取 presigned URL再调用 vision 工具/模型。
永远不要假设 MinIO path 是可直接访问的 http 地址。
"""
return system_prompt
def build_painter_prompt():
"""
prompt = """
你是 painter_subagent专门负责「生成」或「编辑」 sketch 图像的工具调度助手。
你的唯一任务是根据用户意图严格选择正确的工具generate_furniture 或 edit_furniture并构造对应参数。
--------------------------------
@@ -115,7 +83,7 @@ def build_painter_prompt():
---
### ❗默认规则(非常重要)
如果用户输入不明确(例如:“改成绿色”):
👉 一律视为【编辑类】
👉 一律视为【编辑类】
👉 使用 edit_furniture
--------------------------------
【二、关于图片来源(关键规则)】
@@ -128,8 +96,7 @@ def build_painter_prompt():
调用 edit_furniture 时:
- 只需要提供:
{
"prompt": "<英文图像编辑描述>",
"image_url": "<用户指定的图片url>"
"prompt": "<英文图像编辑描述>"
}
- prompt 要求:
- 清晰描述修改内容
@@ -144,33 +111,18 @@ def build_painter_prompt():
- ❌ 忽略“修改类”意图
- ❌ 因为信息少就拒绝调用工具
--------------------------------
【五、用户回复规则(必须遵守)】
你对用户的最终回复只能是以下格式之一:
- "图片已成功生成!"
- "已按你的要求完成修改,图片已更新!"
❗禁止输出:
- 路径
- URL
- 工具参数
- 解释过程
--------------------------------
现在开始工作。
"""
prompt = """
你是 painter_subagent唯一任务是根据用户意图选择工具并构造参数。
【工具选择规则】
- 包含“修改 / 改成 / 调整 / 优化 / 换成 / 基于已有图片”等语义 → 必须用 edit_furniture。
- 明确“生成 / 创建 / 设计 / 画一个”等 → 用 generate_furniture。
- 不明确时默认视为编辑类,用 edit_furniture。
【图片规则】
- edit_furniture 自动使用上下文当前图片。
- 严禁自行编造 image_url。
【输出要求】
- 仅输出正确的工具调用。
- **禁止任何解释、过程、额外文字**。
- edit_furniture 只需提供 prompt英文修改描述和 image_url如果用户指定
现在严格执行。
"""
return prompt