进阶版爬虫采集私有化部署文档提示词

角色定义与任务定位

请以“企业级数据解决方案架构师”兼“技术文档工程师”的身份，进行内容生成。你的核心目标是：为需要将爬虫采集系统部署在私有化环境（如企业内部服务器或专属云）的团队，创建一份详尽、可操作、且视觉表达专业的部署文档。这份文档需兼顾技术严谨性与团队协作的易读性，旨在指导顺利完成部署、配置与验证。

适用场景

• 为企业内部数据中台或业务部门编写私有化爬虫部署标准操作程序（SOP）。
• 在项目交付时，为客户提供清晰、专业的系统部署与配置指南。
• 为研发团队绘制部署架构图，明确组件关系、数据流与网络边界。
• 编写面向运维团队的监控、维护与故障排查手册。

核心提示词

可直接用于生成文档框架或视觉草图的提示词组合：

• “企业级分布式爬虫集群私有化部署架构图，拓扑结构清晰，包含调度中心、爬虫节点、代理池、数据存储（MySQL/Redis）、消息队列（Kafka），标注内网/外网边界。”
• “Step-by-Step 部署文档：从服务器环境准备（Docker， Python环境）到爬虫配置、反爬策略设置（代理轮换，请求头管理）、数据入库验证的全流程。”
• “高可用爬虫采集系统部署方案，展示负载均衡、故障转移机制与监控面板（Grafana看板，显示请求成功率、数据抓取量）。”
• “私有化部署安全配置重点：网络隔离、访问控制列表（ACL）、数据加密传输（SSL/TLS）、凭据安全管理。”

风格方向

• 文档风格：技术白皮书与标准操作指南的结合体。采用分章节、编号步骤、重点高亮（如警告、小贴士）的格式。
• 视觉风格：专业、清晰的科技感图表。采用扁平化或微立体设计，配色以深蓝、灰色、绿色为主，体现稳定与可信赖感。
• 整体基调：专业严谨，逻辑性强，避免口语化。强调安全性、可维护性与可扩展性。

构图建议

• 绘制“系统部署拓扑图”时，采用分层构图：基础设施层（服务器、网络）、应用服务层（各组件）、数据流层（箭头指示方向）。
• 在“部署流程图”中，使用泳道图区分“运维人员操作”、“系统自动执行”和“验证检查点”。
• 对于“配置界面示意图”，聚焦关键参数输入框（如采集频率、目标域名、解析规则）及其说明标签。
• 采用“前后对比”构图展示部署效果，如部署前的分散脚本 vs 部署后的统一监控仪表盘。

细节强化

• 环境依赖：明确列出操作系统、Docker版本、Python库及版本号（如Scrapy, Requests）。
• 网络细节：标注端口开放要求（如调度中心API端口、数据库端口）、内外网访问策略。
• 数据流细节：在图表中用不同颜色/线型的箭头区分“控制指令流”、“原始数据流”、“清洗后数据流”。
• 安全细节：突出展示密钥/凭证的存储位置（如Vault）、加密方式以及访问日志审计要点。
• 容错细节：展示爬虫节点故障后，任务如何被重新调度；代理IP失效后的自动切换机制。

使用建议

• 将“核心提示词”中的语句直接输入AI图像生成工具（如Midjourney, Stable Diffusion），可生成架构示意图、UI草图等视觉素材。
• 生成文本内容时，结合提示词中的关键词（如“Step-by-Step”、“高可用”、“安全配置”），引导AI产出结构化的章节内容。
• 在实际文档中，务必用真实的配置示例、命令代码块和参数表格替换提示词中的占位描述，以增强实用性。
• 根据读者对象（开发者、运维、项目经理）调整不同章节的详略程度，可在文档开头提供“阅读路径图”。