爬虫采集Agent工作流设计完整流程提示词

角色定义与任务定位

请以“数据流程架构可视化专家”的身份，进行本次创作。你的核心目标是：将“爬虫采集Agent工作流”的完整设计流程，转化为一幅逻辑清晰、视觉专业、要素完备的架构图或流程图，使其能够直观地指导开发、用于技术方案讲解或系统设计文档。

适用场景

• 技术方案设计与评审会议的可视化材料
• 自动化数据采集系统的架构说明文档
• 面向开发团队的工作流协同与任务分解图
• 智能体（Agent）在数据抓取领域应用的概念阐释图

核心提示词

可直接用于图像生成工具的核心提示词组合：

• **基础组合**：A detailed architecture diagram of a web crawler agent workflow, showing the complete process from task initiation to data storage, professional technical illustration, clean lines, labeled components.
• **强调智能体**：Multi-agent system for data scraping, depicting coordinator, fetcher, parser, and validator agents communicating, flowchart style, with decision diamonds and data flow arrows.
• **强调流程**：Step-by-step workflow of a robust web scraping pipeline: URL seeding, proxy rotation, request handling, HTML parsing, data extraction, cleaning, deduplication, and JSON output, in a vertical sequence diagram.

风格方向

• **专业技术图示**：采用扁平化或极简线框风格，色彩使用蓝色、灰色、绿色系，体现科技感与专业性。
• **信息图表风**：结合简洁的图标（如齿轮代表处理、数据库符号代表存储、云朵代表网络）、清晰的标签和说明性文字。
• **蓝图感**：浅色背景，深色线条，模块之间有清晰的边界和连接线，营造出系统设计蓝图的氛围。

构图建议

• 采用从左到右的水平流向或从上到下的垂直流向，明确展示流程的时序与逻辑。
• 将核心Agent（如调度Agent、采集Agent、解析Agent、监控Agent）作为主要功能模块进行突出展示。
• 使用不同的形状区分元素类型：矩形框表示处理模块，菱形表示判断决策，圆柱形表示数据库，箭头线表示数据流与控制流。
• 考虑设置一个“关键路径”高亮区，用主色调突出从“任务输入”到“数据输出”的核心主干道。

细节强化

• 在流程关键节点添加简短说明，如“反爬虫策略处理”、“异常重试机制”、“数据质量校验”。
• 描绘出轻量的数据流动效果，如在连接线上添加小箭头或数据包小图标。
• 加入代表网络环境的元素，如微弱的全球网格背景或线条，暗示互联网爬取场景。
• 材质上，模块可带有轻微的填充色或极细的阴影，以增加层次感和可读性，避免完全扁平。

使用建议

• 生成图像时，将“核心提示词”与“风格方向”、“构图建议”中的描述性语言结合使用，例如：“A blueprint-style, horizontal flowchart of a multi-agent web scraping workflow, with flat design icons, showing proxy rotation and data validation steps, on a light grey background.”
• 可根据具体技术栈调整模块标签，例如将解析Agent细化为“BeautifulSoup解析模块”或“正则表达式提取器”。
• 此方案生成的图示，可直接嵌入技术PPT、设计文档，或作为AI编程助手生成代码的结构参考。