Hustler Extract
收藏资源简介:
Web content APIs for developers and AI agents. Extract turns any public URL into clean, LLM-ready markdown with boilerplate removed. LinkSweep scans any page for broken links, dead images, and redirect chains, returning JSON or CSV reports. DeployCheck audits up to 25 staging or production pages and returns a machine-readable pass/fail verdict for CI/CD pipelines. Simple per-call pricing, no monthly subscription.
Hustler Extract 数据集概述
基本信息
- 数据集名称:Hustler Extract
- API 版本:1.2.0(当前版本)
- 类别:Business Software
- API 创建者:cjaime708
- 订阅人数:1
- 基础端点地址:https://hustler-extract.p.rapidapi.com
- 调用方式:所有请求通过 RapidAPI 网关,需使用
X-RapidAPI-Key
性能指标
- 热度:8.6
- 服务等级:100%
- 延迟:266ms
- 测试通过率:100%
功能概述
面向开发者和 AI 代理的 Web 内容 API,包含三个端点,共用一个订阅:
- Extract:将任意公共 URL 转换为干净、适配 LLM 的 markdown,去除样板内容、导航、广告和脚本。
- LinkSweep:扫描任意页面中的失效链接、失效图片和重定向链,返回 JSON 或 CSV 报告。
- DeployCheck:审计最多 25 个预发布或生产页面,返回机器可读的通过/失败结论,适用于 CI/CD 流水线。
端点详情
POST /extract — URL 转干净
抓取任意公共网页并返回其主体内容为干净、适配 LLM 的 markdown,去除样板、导航、广告和脚本。适用于研究流水线、摘要生成、RAG 摄取和 AI 答案溯源。
请求体(JSON):
json { "url": "https://example.com/article" }
响应(JSON):
json { "ok": true, "url": "https://example.com/article", "title": "Article Title", "byline": "Author Name", "siteName": "Example", "markdown": "# Article Title
The article text...", "wordCount": 1240, "charCount": 8102 }
cURL 示例:
bash curl --request POST --url https://hustler-extract.p.rapidapi.com/extract --header Content-Type: application/json --header x-rapidapi-host: hustler-extract.p.rapidapi.com --header x-rapidapi-key: YOUR_KEY --data {"url":"https://example.com/article"}
POST /linksweep — 失效链接与失效图片扫描
扫描任意公共页面中的失效链接、失效图片和重定向链,返回结构化报告(JSON 或 CSV)。
请求体(JSON):
json { "url": "https://example.com", "maxLinks": 100, "includeImages": true, "format": "json" }
字段说明:
| 字段 | 必填 | 默认值 | 说明 |
|---|---|---|---|
url |
是 | — | 要扫描的页面 |
maxLinks |
否 | 100 | 检查的最大链接数 |
includeImages |
否 | true | 是否同时检查图片 |
format |
否 | "json" |
"json" 或 "csv" |
响应(JSON):报告对象包含 summary(总计:已检查、失效、重定向、失效图片)以及逐链接详情数组(brokenLinks、deadImages、redirects)。当 "format": "csv" 时,响应为可下载的 CSV。
POST /deploycheck — 预部署链接审计(CI/CD)
提交最多 25 个预发布或生产页面 URL,获取机器可读的通过/失败结论:整组页面中的失效链接、失效资源和无法加载的页面。专为编码代理和部署流水线设计。
请求体(JSON):
json { "urls": ["https://staging.example.com/", "https://staging.example.com/pricing"] }
响应(JSON):
json { "verdict": "fail", "summary": { "pages": 2, "brokenLinks": 1, "deadAssets": 0, "unloadable": 0 }, "pages": [ { "url": "https://staging.example.com/", "ok": true, "brokenLinks": [], "deadAssets": [] }, { "url": "https://staging.example.com/pricing", "ok": false, "brokenLinks": ["https://..."], "deadAssets": [] } ] }
其他端点
- health
定价方案
通过 RapidAPI 方案计费,任意端点的每次调用均计为一次请求,消耗月度配额:
| 方案 | 价格 | 请求配额 |
|---|---|---|
| BASIC | $0.00 / 月 | 100 次 / 月 |
| PRO | $9.00 / 月 | 1,000 次 / 月 |
| ULTRA | $29.00 / 月 | 5,000 次 / 月 |
| MEGA | $79.00 / 月 | 20,000 次 / 月 |
速率限制
按方案适用标准每分钟限流。若达到限制,应退避后重试;持续超额使用将返回 HTTP 429。
支持
如有端点相关问题或异常结果,可联系提供方,并附上请求 URL、所用方案及收到的响应。




