简体中文

English

简体中文

English

BBC Topics Search

BBC Topics Search 用于按主题 ID 获取 BBC topic 页面中的内容列表数据。

  • 按主题 ID 抓取 BBC topic 页面内容
  • 支持按地区发起请求
  • 支持从指定页开始连续抓取多页结果
  • 返回主题页中的文章、视频和其他内容项

使用 XCrawl 获取 BBC Topics Search 结果

使用方式

curl -s -X POST 'https://run.xcrawl.com/v1/data' \
  -H 'Authorization: Bearer $XCRAWL_API_KEY'\
  -H 'Content-Type: application/json' \
  -d '{
    "engine": "bbc_topics_search",
    "location": "US",
    "topic_id": "cq04nvd56lxt",
    "start_page": 1,
    "pages": 1
  }'

请求参数说明：

  • engine 固定为 bbc_topics_search
  • location 用于指定请求地区
  • topic_id 用于指定 BBC 主题标识
  • start_page 和 pages 用于控制抓取页码范围

响应示例

{
  "result": [
    {
      "url": "https://www.bbc.com/news/topics/cq04nvd56lxt?page=3",
      "topic_id": "cq04nvd56lxt",
      "topic_title": "Bereavement - BBC News",
      "current_page": 3,
      "item_count": 30,
      "video_count": 1,
      "result_count": 30,
      "results": [
        {
          "position": 30,
          "headline": "2 Jan 2026 How embracing grief can help you enjoy what you have",
          "url": "https://www.bbc.com/news/videos/clyk58v1ykjo",
          "content_type": "video",
          "media_type": "video"
        }
      ]
    }
  ]
}

参数说明

必填参数

参数类型说明
locationstring指定请求地区。
topic_idstring指定 BBC 主题 ID。
start_pagenumber指定从第几页开始抓取。
pagesnumber指定连续抓取的页数。

参数补充说明

  • location 默认值为 US
  • location 支持多个地区值，例如 US、HK、CA、GB、JP
  • topic_id 默认值为 cq04nvd56lxt
  • start_page 默认值为 1
  • pages 默认值为 1

响应字段

字段类型说明
urlstring抓取的 BBC topic 页链接。
base_urlstring用于补全相对链接的站点基础地址。
page_titlestringtopic 页标题。
canonical_urlstring页面声明的规范链接。
topic_idstring主题标识。
topic_titlestring主题页标题。
current_pagenumber当前页码。
languagestring页面语言代码。
item_countnumber当前返回的内容数量。
video_countnumber视频内容数量。
result_countnumber结果对象数量。
metaobject页面元数据。
resultsarray内容列表。

结果项字段

results[] 中每一项通常包含以下字段：

字段类型说明
positionnumber结果位置，从 1 开始。
group_keystring来源容器标识。
group_titlestring来源容器标题。
headlinestring内容标题。
urlstring内容链接。
pathstring内容相对路径。
content_typestring归一化后的内容类型，例如 article、video、live。
media_typestring原始媒体类型，通常用于视频内容。