five

Web News Extractor

收藏
RapidAPI2026-05-31 更新2026-05-31 收录
下载链接:
https://rapidapi.com/pattrickpx-pattrickpx-default/api/web-news-extractor1
下载链接
链接失效反馈
官方服务:
资源简介:
News Scraper API is Content extraction API for frontpages and single web pages
创建时间:
2026-05-31
原始信息汇总

数据集概述:Web News Extractor

Web News Extractor 是一个基于 FastAPI 构建的网页内容提取服务,专为自动化任务设计。其核心功能是从网页中提取结构化内容,支持两种主要工作流程:从首页或列表页面发现文章,以及将单个网页转换为干净的 Markdown 格式。

核心功能

  • 首页/列表页面文章提取:通过 POST 请求向 /extract 端点发送一个或多个 URL,API 会识别并提取文章,可选择性地同时获取每篇文章的 Markdown 内容。
  • 单页面 Markdown 提取:通过 POST 请求向 /extract/url 端点发送单个 URL,直接返回该页面的 Markdown 格式内容,不执行文章发现逻辑。
  • 流式响应支持:通过 /extract/stream 端点返回渐进式事件(NDJSON 格式),适用于需要实时处理大量 URL 的场景。

API 端点

端点 方法 说明
/ GET 返回基本服务信息
/health GET 简单的健康检查
/extract POST 处理一组 URL,返回提取的文章
/extract/url POST 处理单个 URL,返回页面内容的 Markdown
/extract/stream POST 返回渐进式事件的 NDJSON 流
/docs GET Swagger UI 交互式文档
/redoc GET ReDoc 交互式文档
/openapi.json GET OpenAPI 规范文件

使用场景

该 API 适用于内容自动化、数据抓取管道、发布工作流及站点监控等场景,如从新闻列表页面批量提取文章、单篇文章的格式转换与内容汇总、以及构建市场集成。

技术细节

  • 当前版本:0.1.0
  • 输入格式:JSON(通过 POST 请求发送 URL 列表或单个 URL)
  • 输出格式:结构化的 JSON 响应
  • 接口文档:提供 Swagger UI (/docs) 和 ReDoc (/redoc) 交互式文档

提供方信息

  • 提供方:pattrickpx
  • 分类:Media
  • 订阅人数:1
  • 服务数据:100% 服务等级,452ms 平均延迟,100% 测试通过
二维码
社区交流群
二维码
科研交流群
商业服务