parsehub-automation

Parsehub 自动化指南 - 通过 Rube MCP 实现网页抓取自动化

技能概述

Parsehub Automation 是一个通过 Rube MCP (Composio) 实现的 Parsehub 任务自动化技能，让你无需编写代码就能完成网页数据抓取、监控和提取工作流。

适用场景

定期数据监控与采集

电商价格追踪、竞品信息监控、新闻内容更新检测等需要定期执行的网页数据抓取任务，可以设置自动化工作流替代手动操作。

批量数据提取

需要从多个网页或模板项目中提取结构化数据时，通过自动化工具批量调用 Parsehub run template，一次性获取所有目标数据。

集成到现有系统

将 Parsehub 抓取能力集成到 Claude Agent 或其他应用中，通过 MCP 标准协议实现无缝连接，无需单独管理 API 密钥。

核心功能

工具自动发现与 Schema 获取

始终通过 RUBE_SEARCH_TOOLS 先查询当前可用的 Parsehub 工具列表和参数规范，避免硬编码过期的 API，确保每次调用都使用最新 Schema。

连接状态管理

使用 RUBE_MANAGE_CONNECTIONS 验证 Parsehub 连接状态，确保 toolkit 处于 ACTIVE 状态后才执行任务，避免因未授权导致的调用失败。

多工具协调执行

通过 RUBE_MULTI_EXECUTE_TOOL 在同一会话中串联多个 Parsehub 操作，支持创建项目、运行模板、获取结果的完整工作流。

常见问题

如何通过 Rube MCP 连接 Parsehub？

添加 https://rube.app/mcp 作为 MCP 服务器后，调用 RUBE_MANAGE_CONNECTIONS 并指定 toolkit 为 parsehub。如果连接未激活，会返回授权链接，完成授权后状态会变为 ACTIVE。无需单独配置 API Key。

Parsehub 自动化支持哪些操作？

支持通过 Composio Parsehub toolkit 的全部功能，包括：运行项目模板、查询运行状态、获取抓取数据、管理项目等。具体可用工具需通过 RUBE_SEARCH_TOOLS 实时查询获取最新列表。

与直接使用 Parsehub API 有什么区别？

通过 Rube MCP 的优势是：无需单独管理 API 密钥、统一的工具发现机制、自动 Schema 验证、与 Claude Agent 原生集成。适合需要将 Parsehub 集成到 AI 工作流的场景。