name: scrape-do-automation description: “通过Rube MCP (Composio) 自动化Scrape Do任务。始终首先搜索工具以获取当前模式。” requires: mcp: [rube]
通过Rube MCP自动化Scrape Do
通过Composio的Scrape Do工具包和Rube MCP自动化Scrape Do操作。
工具包文档: composio.dev/toolkits/scrape_do
先决条件
- Rube MCP必须已连接（RUBE_SEARCH_TOOLS可用）
- 通过
RUBE_MANAGE_CONNECTIONS与工具包scrape_do建立活跃的Scrape Do连接 - 始终先调用
RUBE_SEARCH_TOOLS以获取当前工具模式
设置
获取Rube MCP: 在客户端配置中添加https://rube.app/mcp作为MCP服务器。无需API密钥 — 只需添加端点即可工作。
- 通过确认
RUBE_SEARCH_TOOLS响应来验证Rube MCP是否可用 - 调用
RUBE_MANAGE_CONNECTIONS，工具包为scrape_do - 如果连接未处于ACTIVE状态，请按照返回的授权链接完成设置
- 在运行任何工作流之前，确认连接状态显示为ACTIVE
工具发现
在执行工作流之前，始终发现可用工具：
RUBE_SEARCH_TOOLS
queries: [{use_case: "Scrape Do operations", known_fields: ""}]
session: {generate_id: true}
这将返回可用的工具slug、输入模式、推荐的执行计划和已知陷阱。
核心工作流模式
步骤1: 发现可用工具
RUBE_SEARCH_TOOLS
queries: [{use_case: "您的特定Scrape Do任务"}]
session: {id: "现有会话ID"}
步骤2: 检查连接
RUBE_MANAGE_CONNECTIONS
toolkits: ["scrape_do"]
session_id: "您的会话ID"
步骤3: 执行工具
RUBE_MULTI_EXECUTE_TOOL
tools: [{
tool_slug: "从搜索中获取的工具slug",
arguments: {/* 符合模式的参数，来自搜索结果 */}
}]
memory: {}
session_id: "您的会话ID"
已知陷阱
- 始终先搜索: 工具模式会变化。在调用
RUBE_SEARCH_TOOLS之前，切勿硬编码工具slug或参数 - 检查连接: 在执行工具之前，验证
RUBE_MANAGE_CONNECTIONS显示ACTIVE状态 - 模式合规: 使用搜索结果中的确切字段名和类型
- 内存参数: 在
RUBE_MULTI_EXECUTE_TOOL调用中始终包含memory，即使为空（{}） - 会话重用: 在工作流内重用会话ID。为新工作流生成新的ID
- 分页: 检查响应中的分页令牌，并继续获取直到完成
快速参考
| 操作 | 方法 |
|---|---|
| 查找工具 | 使用Scrape Do特定用例调用RUBE_SEARCH_TOOLS |
| 连接 | 使用工具包scrape_do调用RUBE_MANAGE_CONNECTIONS |
| 执行 | 使用发现的工具slug调用RUBE_MULTI_EXECUTE_TOOL |
| 批量操作 | 使用run_composio_tool()调用RUBE_REMOTE_WORKBENCH |
| 完整模式 | 为具有schemaRef的工具调用RUBE_GET_TOOL_SCHEMAS |
由Composio提供支持