开放网页与 SEO 数据
开放网页与 SEO 数据 · 288 个端点
- 关键词搜索返回列表。
- 运行浏览器 agent在某个 URL 上启动异步浏览器 agent,让它朝自然语言目标推进。
- 取消浏览器 agent 运行停止待处理或运行中的 Agent 运行;已完成的步骤仍会在上游计费。
- 检查浏览器 agent 运行读取 Agent 运行的状态、步骤数、结果以及已捕获的步骤元数据。
- 获取 Agent 步骤 HTML获取某次运行中某个步骤所捕获的 HTML(该运行需请求了 HTML 捕获)。
- 获取 Agent 步骤截图获取某次运行中某个步骤所捕获的 JPEG 截图(该运行需请求了截图)。
锚文本分布
- 某域名外链的锚文本分布锚文本分布——每个锚文本的外链数与引用域数
- 按域名或 URL 查询外链锚文本入链的锚文本分布,并给出每条锚文本的域名数与页面数。
- 按域名或 URL 查询外链锚文本目标外链概况中的锚文本,并给出链接数与域名数。
- 按域名或 URL 查询外链锚文本指向目标页面的锚文本,并给出每条锚文本的引用域名数与链接数。
- web.anchors.list — routed: best of 3 providers, own keys firstAnchor texts of backlinks pointing at a domain — provider-native rows in `anchors`; `limit` is the price dial
- 按域名或 URL 查询外链锚文本目标外链概况中的锚文本,并给出域名数与链接数。
- 按域名或 URL 查询外链锚文本指向目标的锚文本,并给出每条锚文本的引用域名数与链接数。
- web.anchors.list — routed: best of 3 providers, own keys firstAnchor texts of backlinks pointing at a domain — provider-native rows in `anchors`; `limit` is the price dial
网络问答
- 用网络内容回答问题,输出散文或 JSON根据网络当前的热门结果回答一个问题或整段 agent 提示词(最多 4,000 字符),并附上所引用的页面。在问题中要求 JSON,或传入 JSON Schema,答案即为该形状的 JSON。answer.source 说明文本是 Google 自己的回答(google_ai_mode、google_ai_overview),还是依据页面写成(crawl4ai)。当页面中没有答案时 answered 为 false,且免费。实验性:字段可能新增。
- 带引用的问答获取由 Exa 搜索结果支撑的 LLM 回答。与 OpenAI 的 chat completions 端点完全兼容。
- 研究一个网络问题启动带引用的异步多来源研究。
- 基于实时网络研究回答问题在实时网络上研究一项任务,并返回带来源的结构化答案。
- 快速回答网络问题使用 fast Agent 预设生成简短的带引用答案。
- 研究并回答网络问题通过轻量多步研究生成带引用的答案。
- 回答带来源的问题流式输出基于 Valyu 搜索结果的带引用答案。
- 回答网络问题返回带引用的答案以及用于生成该答案的网络结果。
- 取消后台研究请求取消,然后轮询直到本次运行进入终态。
网络研究
研究任务状态
外链竞品
- 与某域名共享外链来源的域名与目标共享引用域的域名,按重叠度排序
- 按域名查询外链竞品 — 共同引用域名外链概况与目标重叠的域名,按共同引用域名排序。
- 竞品链接差距链接到指定竞品但没有链接到你的来源 — 用于挖掘链接差距。
外链列表
- 指向某域名或 URL 的外链——锚文本、排名单条外链——来源页面、锚文本、follow 状态、首次发现时间、页面/域名排名
- 按域名或 URL 查询外链 — 来源与目标指标单条入链,包含来源与目标的完整 URL 指标。
- 按域名或 URL 查询外链 — 来源页面、锚文本指向某个域名或 URL 的单条外链,包含来源页面、锚文本与 follow 状态。
- 按域名或 URL 查询外链 — 锚文本、Trust Flow指向某个 URL 或域名的单条外链,包含锚文本及两端的 Trust Flow。
- web.backlinks.list — routed: best of 3 providers, own keys firstBacklinks pointing at a domain or page — provider-native backlink rows in `backlinks`; `limit` is the price dial
- 按域名或 URL 查询外链 — 来源页面、锚文本指向某个域名或 URL 的单条外链,包含来源页面、锚文本与 follow 状态。
- 按域名或 URL 查询有效外链 — 锚文本当前有效指向某个域名或 URL 的外链,包含来源页面、锚文本与链接类型。
- web.backlinks.list — routed: best of 3 providers, own keys firstBacklinks pointing at a domain or page — provider-native backlink rows in `backlinks`; `limit` is the price dial
- 检查引用站点检查特定来源是否链接到目标 — 每个来源返回一个布尔值。
外链概况
- 某域名的外链概况——数量、排名、垃圾分某域名或 URL 的外链汇总概况——数量、排名、垃圾分、分项拆解
- 按域名查询外链概览 — 权威度、垃圾评分分布外链概况汇总,并按 DA、垃圾评分与根域名给出分布直方图。
- 按域名或 URL 查询外链概览 — 引用域名外链概况汇总 — 外链数、引用域名、IP、子网、follow 比例。
- 按域名查询外链概览 — 引用域名、.edu/.gov某个域名的外链概况汇总 — 外部链接、引用域名、.edu/.gov。
- web.backlinks.summary — routed: best of 3 providers, own keys firstBacklink profile summary for a domain — counts in `backlinks` / `referring_domains`, the provider's full row in `summary`
- 按域名或 URL 查询外链概览 — Authority Score外链概况汇总 — Authority Score、链接数、引用域名、follow 比例。
- 按域名查询外链概览 — 引用域名、权威度外链概况汇总 — 外部链接、引用域名、IP、域名权威度。
- web.backlinks.summary — routed: best of 3 providers, own keys firstBacklink profile summary for a domain — counts in `backlinks` / `referring_domains`, the provider's full row in `summary`
网站抓取
- 网站抓取抓取一个网站,在一次归一化响应中获取最多 10 个页面的干净文本内容,适合把站点喂给 LLM 与搜索索引。
- 抓取网站从一次有边界的链接页面抓取返回 Markdown。
- 将整站抓取为后台任务从起始 URL 开始,在站内按层级抓取,经过 include 与 exclude 过滤,在 max_pages 处截断;仅以任务形式运行。用 crawl4ai.web.scrape.job.status 轮询,用 crawl4ai.web.scrape.job.results 读取页面(url、level、title、status、links、markdown 或 html)。
- 抓取网站启动有界抓取,按已处理页面计费。
- 抓取网站启动一次有范围上限的异步网站抓取,只为已完成的页面付费。
- 异步抓取单个网页启动一次有上限的单页 Markdown 抓取,并返回其任务 id。
- 异步抓取网站启动站点抓取,之后从任务状态中获取其 ZIP 下载 URL。
- 抓取网站从起始 URL 跟踪链接,返回有数量上限的页面集合。
- 抓取网站一次请求内梳理网站结构并从发现的页面中提取干净内容。
抓取页面
- 获取网站抓取页面列出自己发起的抓取所包含的页面,可选择包含 Markdown 或 HTML 内容。
- 获取 ScrapeGraphAI 抓取页面获取自己发起的抓取页面,并返回每页解析后的抓取结果。
网站抓取状态
- 查询网站抓取读取自己拥有的抓取的 status、结果页面与额度使用。
- 检查网站抓取进度读取自己发起的抓取进度、已完成页面数与最终额度消耗。
- 检查 ScrapeGraphAI 抓取读取自己发起的抓取状态与轻量页面元数据。
- 检查站点抓取读取本团队 deepcrawl 任务的状态与 ZIP URL。
- 检查邮箱域名状态域名 → 两个布尔值:是否为一次性/临时邮箱域名,以及是否为免费邮箱服务商 — 注册或接收线索前的低成本预筛。
页面提取
- 网页抓取抓取任意网页,返回干净 Markdown(或 HTML、原始 HTML)形式的正文,另含标题与元数据。
- 抓取网页将单个页面以 Markdown、HTML、图片或截图返回。
- 抓取网页为适合 LLM 的干净 Markdown将一个 URL、网页或 PDF 抓取为干净、可直接供 LLM 使用的 Markdown 文本和/或 HTML。Crawl4AI 会选择成本最低且可用的引擎(存档、普通抓取、能执行 JavaScript 的真实浏览器),可选包含链接、媒体、元数据与表格;对拦截数据中心的站点使用代理。
- 按 URL 获取页面内容获取一组 URL 的完整页面内容、摘要与元数据。
- 抓取网页将单个页面以 Markdown、HTML 或链接形式获取。
- 获取页面内容将已索引或实时网页获取为 Markdown,可选按提取指令精简。
- 提取网页从最多十个 URL 提取干净的 Markdown 内容、元数据、链接与图片。
- 获取网页从公开 HTML 或 PDF URL 获取干净的 Markdown。
- 获取渲染后的网页内容获取公开 HTTP(S) 页面并返回可直接供 LLM 使用的内容
- 抓取网页将单个页面抓取为干净的 Markdown、HTML、纯文本或托管截图。
- 提取网页内容从最多 20 个公开 URL 返回聚焦摘录或完整 Markdown 内容。
- 从单个页面提取结构化数据抓取一个公开 HTML 页面,并通过自然语言提示返回结构化 JSON。
- 将单个网页抓取为 Markdown抓取一个公开 HTML 页面并返回干净的 Markdown。
- 读取网页从单个公开 URL 返回干净的文本与元数据。
- 提取网页抓取一个公开网页,返回干净的文本以及可选的 Markdown、链接、图片、视频与元数据。
- 抓取网页将指定页面抓取为 Markdown、纯文本或原始 HTML。
- 提取网页内容从一至二十个 URL 提取干净内容,可选返回查询聚焦片段与图片。
- 抓取干净页面内容将最多十个 URL 抓取为 Markdown、HTML 或结构化 JSON,可选返回链接、元数据与选择器。
- 提取页面内容获取最多十个公开 URL 的 Markdown、HTML 或元数据。
- 将网页抓取为 Markdown抓取一个页面,返回其标题及 Markdown 形式的完整正文。
- 按 URL 提取页面 — 内容与分类从最多二十个 URL 提取干净的正文或摘要片段,并返回每个 URL 的状态与模式。
- web.extract — routed: best of 15 providers, own keys firstExtract clean content from one web page — provider-native rows in `pages`
- web.extract — routed: best of 15 providers, own keys firstExtract clean content from one web page — provider-native rows in `pages`
- 提取网页从单个公开 URL 返回干净内容。
- 带浏览器选项的网页提取获取公开 HTTP(S) 页面并返回可直接供 LLM 使用的内容
批量页面提取
- 一次批量抓取一列 URL,流式返回一次调用最多抓取 25 个 URL;结果以 NDJSON 流式返回,每个 URL 完成时输出一行,最后一行汇总本批总成本。
- 批量提取页面启动最多十个 URL 的有界批量抓取。
- 查询批量抓取读取自己拥有的批次的 status、结果页面与额度使用。
- 运行前预估抓取价格一次 URL 抓取(或一组)按 Crawl4AI 自身工作量模型估算的额度范围。免费。
结构化提取
- 用 LLM 从网页提取结构化 JSON 数据抓取一个页面(会为你抓取)或读取你自己的内容,返回符合 JSON Schema 和/或纯英文指令的类型化 JSON,由 LLM 提取。
- 从网页提取结构化数据获取一个页面,并按所给 schema 提取类型化 JSON。
- 提取页面结构化数据使用提示与 JSON Schema 从公开页面提取字段。
- web.extract.structured — routed: best of 3 providers, own keys firstExtract typed JSON from one web page, described by a JSON schema and/or a plain-English instruction — the extracted data in `data`
- web.extract.structured — routed: best of 3 providers, own keys firstExtract typed JSON from one web page, described by a JSON schema and/or a plain-English instruction — the extracted data in `data`
- 任意 RSS 或 Atom 订阅源任意 RSS 2.0 或 Atom 订阅源的条目:标题、链接、发布时间、作者、摘要前 300 个字符及条目 ID。给出订阅源的 `url`;`limit` 限制行数(最多 200)。列:title, link, published, author, summary, id.
- 被链接最多的域名全网被链接最多的根域名,包含 DA 与垃圾评分(全索引范围,无需指定目标)。
- 被链接最多的页面全网被链接最多的页面,包含完整 URL 指标(全索引范围,无需指定目标)。
- Moz 链接索引版本返回当前提供结果的 Moz 链接索引 — 用于判断指标是否已随索引刷新而变化。
引用域名列表
- 某域名或 URL 的引用域——数量、排名指向目标的引用域,含外链数、排名与首次/最近发现时间
- 按域名或 URL 查询引用域名 — 权威度、垃圾评分链接到目标的根域名,包含每个来源的 DA、垃圾评分与链接数。
- 按域名或 URL 查询引用域名 — 权威度、链接数链接到目标的引用域名,包含每个来源的链接数与权威度。
- 按域名查询引用域名 — Trust Flow、国家、IP链接到目标的引用域名,包含 Trust Flow、国家、IP 与链接数。
- 按域名或 URL 查询引用域名 — Authority Score链接到目标的引用域名,包含 Authority Score、国家与链接数。
- 按域名查询引用域名 — 权威度、链接数链接到目标的引用域名,包含每个来源的链接数与权威度。
站点 URL 映射
- 网站地图一次调用即可把整个网站映射为干净的 URL 列表(含标题与描述)。
- 映射网站在不获取页面正文的情况下,发现域名上有边界的 URL 列表。
- 不抓取即可列出站点所有 URL来自已知该站点的来源的 URL:其 sitemap、首页上的链接,以及最新的 Common Crawl 索引(mode full 会加上 Wayback Machine)。一次调用,多数站点需 1 到 3 秒。每行:url、sources、last_seen、depth。
- 映射网站在不抓取内容的情况下发现网站上的 URL。
- 在网站上查找相关 URL梳理站点结构,返回最多 1,000 个按搜索查询排序的 URL。
- 发现站点 URL列出站点 sitemap 中或通过链接发现的 URL。
- 发现网站链接查找网站上的 URL,不返回完整页面正文。
- 梳理网站结构在深度、广度、路径与域名控制下发现网站中的 URL。
- web.map — routed: best of 6 providers, own keys firstDiscover the URLs on a website — provider-native map rows in `results`
- web.map — routed: best of 6 providers, own keys firstDiscover the URLs on a website — provider-native map rows in `results`
web.monitor.activity
- 读取页面监控活动读取最近的执行记录、完成状态以及按格式给出的变更差异。
- A page monitor's timelineEvery change one monitor saw, matched or not (matched: [] shows why you got no alert), and its health events, oldest first. Marks nothing read.
- Buy a watch budget for your team's monitorsAdd Crawl4AI credits to your team's watch budget. You choose the amount; it is charged once, now, and your monitors run until it is used, then pause by themselves. Send your own purchase id as ref: a retry with the same ref adds nothing and charges nothing.
- Watch budget left for your teamYour team's watch budget: credit_limit (all you bought), spent, and state (running, or paused when the budget is used up).
- Read your watched changesNew changes from all your team's monitors, oldest first, each with a one-line summary and typed facts (before and after values, with links to both page versions). Reading marks them read. wait (up to 60 s) holds the call open until a change arrives.
web.monitor.create
- 创建定时页面监控在已连接的账号上安排周期性页面抓取与变更检测。
- Watch a page: describe the change to reportSay in plain words what you care about, for example "tell me when a plan gets more expensive", "a new job in Berlin" or "back in stock". The monitor turns your sentence into conditions, ignores every change that does not match (layout, dates, banners), and reports only matching changes as facts: what changed, from what, to what, with both versions of the page. Numbers work too: "the Business plan costs more than $250". On treg's key it runs from your team's watch budget (crawl4ai.watch.budget.add).
web.monitor.delete
- 删除页面监控永久删除某个监控及其已保存的执行历史。
- Stop watching a pageRemove one of your monitors and its history. To keep it for later, pause it with crawl4ai.watch.update instead.
web.monitor.get
- 获取单个页面监控读取单个监控的状态、计划与抓取配置。
- One page monitorOne of your monitors: its conditions, health, baseline, last check, and who paused it (you, its expiry, or the budget).
web.monitor.list
- 列出页面监控列出已连接账号上的全部定时监控。
- Your team's page monitorsAll of your team's monitors, newest first, with each one's sentence as Crawl4AI understood it (conditions), health and last check.
- 暂停页面监控停止后续执行,同时保留该监控及其活动记录。
- 恢复页面监控让已暂停的监控回到其保存的计划。
web.monitor.update
- 更新页面监控修改监控的 URL、名称、计划、格式、Webhook 或抓取配置。
- Change a page monitorChange one of your monitors: its sentence (read again into new conditions), every, notify (replaced whole), schema, name, expires_at, or paused true/false.
- A page as a monitor saw itOne version of a watched page as Markdown: the evidence behind a change (its before and after links point here).
- 页面审计按需抓取一个 URL——状态码、加载耗时、页面评分、meta 与内容
- 研究网络针对自然语言问题检索并综合网络上下文。
下载抓取结果
- 按数据集 ID 下载 Apify 运行结果下载已完成的抓取运行的结果
- 按快照 ID 下载抓取记录下载已完成的抓取任务产出的记录
- 读取抓取任务结果自己拥有的任务的结果,NDJSON 格式,每个 URL 一行,每页 500 行。
- 以 JSON 或 CSV 下载批量提取任务结果以 JSON 或 CSV 下载批量任务提取出的结果,或一份诊断用的 URL 报告
- 以 JSON 或 CSV 下载抓取任务结果以 JSON 或 CSV 下载抓取任务提取出的结果,或一份诊断用的 URL 报告
启动抓取任务
- 在后台启动 Apify Actor 运行在后台启动抓取运行并获取其运行 ID
- 启动批量抓取对一批 URL 启动异步抓取任务并返回快照 ID
- 以后台抓取任务爬取多个 URL最多提交 500 个 URL 作为后台任务;轮询其状态,然后读取结果。不会因慢页面而等待。
- 从 URL 列表启动批量提取任务将一大批显式列出的 URL 异步送入 Extract API,并把结果汇总为一个集合——与 Crawl 不同,它不会发现链接
- 从种子 URL 启动站点抓取任务爬取站点的链接与页面,将发现的每个页面送入 Extract API,并把结果汇总为可搜索的集合
抓取任务状态
- 按运行 ID 查询 Apify Actor 运行检查后台抓取运行是否已完成
- 按快照 ID 查询异步抓取任务检查异步抓取任务是否已完成
- 查询抓取任务自己拥有的任务的状态、按状态计数与额度使用。
- 管理抓取任务一个接口即可对一或多个抓取任务执行状态查询、暂停/恢复、重启与删除
结构化抓取
- 一次调用将 URL 抓取为结构化记录抓取一个或多个 URL 为结构化记录,并在同一次调用中返回
- 按 URL 自动识别页面类型并提取自动识别所处理页面的类型,并路由到相应的 Diffbot API
网页截图
- 网站截图对任意网页 URL 用真实浏览器截图。
- 截取网页截图将公开 HTTP(S) 页面截取为 PNG
- 截取网页截图渲染页面并返回 base64 PNG 截图。
- 任意 URL 的整页截图使用此接口可截取任意网页的高质量整页截图。
- 截取网页将单个公开 URL 渲染为 PNG、JPEG 或 WebP 二进制图像数据。
- 按浏览器选项截图将公开的 HTTP(S) 页面截取为 PNG 图片。
- 下载已截取的截图使用所连接的密钥下载 screenshot_url 指向的 PNG
网页搜索
- 搜索开放网络按查询查找排序后的网页,可选域名过滤。
- 搜索网络:带标题、URL、摘要的实时排序结果跨多个引擎的实时网络搜索,排序并清洗:每条结果有标题、URL 与摘要。当实时网络返回少于 10 条时,用 Crawl4AI 索引的结果补齐。若需后续问题、相关查询与实体卡片,请用 crawl4ai.web.search.rich。
- 带丰富结果的网络搜索网络搜索加丰富区块:后续问题、相关查询、实体卡片、视频、新闻与讨论。
- 面向 LLM 上下文窗口的网页搜索搜索网络并返回适合喂入 LLM 上下文窗口的结果
- 搜索网络搜索端点可让你智能搜索网络并从结果中提取内容。
- 搜索开放网络最多查找十条网页结果,不抓取其完整页面。
- 搜索开放网络使用站点、出版物、收录时间与时间点过滤条件搜索 Keenable 的网页索引。
- 搜索开放网络根据网络查询返回排序来源、带出处的回答或结构化 JSON。
- 按查询词搜索网络 — 排序页面与摘要片段搜索实时网络,返回排序后的页面、摘要片段以及可选的完整页面内容。
- 搜索开放网络使用自然语言查询与域名过滤条件搜索网络。
- 快速搜索网络在 turbo 或 fast 模式下返回带查询聚焦摘录的排序页面。
- 深度搜索网络在 basic 或 advanced 模式下返回带查询聚焦摘录的排序页面。
- 搜索网络针对单个查询返回排序后的网页及提取的片段。
- 快速搜索网络返回延迟更低的网络结果,适用于日常查询与 agent 工作流。
- 搜索网络并返回已抓取页面内容搜索网络并返回排名靠前的 HTML 页面,同时内联 Markdown 内容。
- 搜索网络并提取结构化答案搜索 HTML 页面、返回其 Markdown,并对结果执行一次 AI 提取。
- 搜索实时网络返回来自一个或多个搜索引擎的排序网络结果。
- 使用 Google 搜索开放网络搜索 Google,返回自然结果以及存在时的答案框、知识面板、相关问题与相关搜索。
- 搜索开放网络返回排序后的网络结果,不抓取其完整页面。
- 搜索开放网络以语义排序搜索网络,支持可选答案、域名与日期过滤、图片以及页面内容。
- 搜索开放网络按关键词或语义搜索网络,支持域名、语言、位置与日期过滤。
- 搜索网络与新闻返回排序后的网络与新闻结果,包含片段与元数据。
- 搜索网络使用 DeepSeek 自有搜索引擎搜索实时网络——排序结果带重排分数、供模型使用的摘要、可选页面正文、发布日期与站点权威度。
- web.search — routed: best of 19 providers, own keys firstSearch the open web — provider-native result rows in `results`
- 搜索并获取完整页面内容搜索网络并抓取选定的结果页面。
- web.search — routed: best of 19 providers, own keys firstSearch the open web — provider-native result rows in `results`
- 搜索开放网络返回排序后的实时网络结果。
- 使用缓存页面正文搜索在可用时返回 You.com 缓存中的完整页面内容。
- 使用实时页面正文搜索返回完整页面内容,按要求实时抓取页面。
- 搜索并返回页面高亮片段在排序后的网络与新闻结果旁返回查询聚焦段落。
- 多角度网络搜索根据一个问题生成多个子查询,并返回按子查询分组的排序网络结果。
- 深度网络搜索搜索端点可让你智能搜索网络并从结果中提取内容。
新闻搜索
- 按主题搜索新闻搜索端点可让你智能搜索网络并从结果中提取内容。
- 搜索近期新闻返回来自一个或多个来源的排序新闻报道。
- 搜索近期新闻使用 Tavily 的 news 主题搜索新闻文章。
- 搜索近期新闻搜索 TinyFish 的新闻索引,可选时效、日期、域名、语言与位置过滤。
- 按查询词搜索新闻 — 文章与主题搜索近期新闻文章及相关主题分组。
- web.search.news — routed: best of 4 providers, own keys firstSearch recent news — provider-native article rows in `results`
- 搜索新闻并获取完整页面内容查找新闻并抓取选定的结果页面。
- web.search.news — routed: best of 4 providers, own keys firstSearch recent news — provider-native article rows in `results`
web.search.publications
- 搜索研究出版物搜索端点可让你智能搜索网络并从结果中提取内容。
- 搜索研究出版物按主题、出版年份、域名、语言与日期搜索研究论文。
- web.search.publications — routed: best of 2 providers, own keys firstSearch research publications by topic — provider-native paper rows in `results`
- web.search.publications — routed: best of 2 providers, own keys firstSearch research publications by topic — provider-native paper rows in `results`
- 查找与某 URL 相似的页面查找与所给链接相似的链接,并可选返回页面内容。
站点热门页面
- 按域名查询权威度最高的页面,含 URL 指标某个域名下权威度最高的页面,包含每个页面的完整 URL 指标。
- 按域名查询被链接最多的页面 — 外链、Trust Flow某个站点被链接最多的页面,包含 Trust Flow、Citation Flow 与外链数。
- 按域名查询被链接最多的页面 — 外链、引用域名列出站点被链接最多的页面,按外链数与引用域名数排序。
- 查找热门开发者话题读取当前 GitHub 或 Hacker News 的热门内容。
- 绕过拦截并抓取页面从抵抗普通抓取的页面获取内容。
URL 权威指标
- 最多 1000 个域名或 URL 的外链权威排名每次调用最多返回 1000 个域名或页面的外链权威排名(0-1000)
- 按 URL 查询 Domain Authority、Page Authority 与 Spam Score最多为 50 个 URL 返回 Domain Authority、Page Authority、Spam Score 与链接数。
- 按域名或 URL 查询页面与域名权威度分数获取 SE Ranking 对某个 URL 或域名的页面权威度与域名权威度评分。
- 按域名或 URL 查询 Trust Flow 与 Citation Flow一次调用最多为 100 个 URL 或域名返回 Trust Flow、Citation Flow 与链接数。
- web.url.metrics — routed: best of 3 providers, own keys firstAuthority / link metrics for one URL or domain — the provider's own metrics row in `metrics`
- web.url.metrics — routed: best of 3 providers, own keys firstAuthority / link metrics for one URL or domain — the provider's own metrics row in `metrics`
账号与工具类端点
- 可用的 Lighthouse 检查OnPage Lighthouse API 基于 Google 开源 Lighthouse 项目,提供网页质量数据。
- 外链变化趋势此接口将提供 target 字段中所指定域名的新增与丢失外链及引用域数量。
- 外链历史此接口将提供可追溯至 2019 年初的历史外链数据。
- 外链索引总量此接口将提供你发起请求时数据库所收录的外链、域名与页面总数。
- 按日期统计的外链总量此接口将提供目标域名在两个指定日期之间的时段内可用的外链数据概览。
- 批量外链变化此接口将提供 targets 数组中指定的域名、子域名与页面的新增与丢失外链数量。
- 批量外链数此接口将提供 targets 数组中指定的域名、子域名与页面的外链数量。
- 批量外链垃圾分此接口将提供 targets 数组中指定的域名、子域名与页面的垃圾分。
- 批量外链汇总此接口将提供最多 1000 个页面、域名或子域名的外链及相关数据的综合概览。
- 批量点击流搜索量DataForSEO 关键词数据 API 的批量点击流搜索量接口,可在一次实时请求中为最多 1000 个关键词提供基于点击流的搜索量数据。
- 批量引用域变化此接口将提供 targets 数组中指定的域名、子域名与页面的引用域数量。
- 批量引用域数此接口将提供 targets 数组中指定的域名、子域名与页面的引用域数量。
- 按类目的商家列表商家列表类目聚合接口返回相关信息:相关类目组以及每个类目中的实体数量。
- 按关键词的引用评分此接口将提供请求中所指定关键词及其他参数的评分分布数据。
- 按关键词的引用情感此接口将提供目标关键词可用引用的情感分析数据。
- 按类目的引用趋势此接口将提供目标类目在指定日期范围内的全部引用数据。
- 按关键词的引用趋势此接口将提供目标关键词在指定日期范围内的全部引用数据。
- 合并关键词趋势此接口将提供来自 DataForSEO Trends 的关键词热度数据。
- 抓取链接此接口将提供目标网站上检测到的内部与外部链接列表。
- 抓取资源此接口将提供资源列表,包括图片、脚本、样式表与失效元素。
- 已抓取页面 HTML此接口返回你在请求中所指定页面的 HTML。
- 已抓取页面检查此接口返回已抓取页面列表,含页面检查项及与页面表现相关的其他指标。
- Diffbot 套餐与用量获取账户套餐档位、月度额度、令牌状态、子令牌,以及按 API 划分的每日用量明细
- 重复页面内容此接口返回内容与请求中所指定页面相似的页面列表。
- 重复的标题或 meta 标签此接口返回标题或描述标签重复的页面列表。
- 提取文章正文从新闻或博客页面提取干净的正文、作者、日期、图片、标签、情感与 NLP 事实
- 提取实体与情感对提交的文本或 URL 运行预训练分类器、命名实体识别器、句子分词器与情感分析器
- 提取活动详情从活动列表页提取活动名称、日期、场地、价格与主办方
- 提取论坛讨论从论坛主题或评论区提取单条帖子、作者、日期与情感
- 提取索引页链接从索引页或类目页提取被链接条目的列表(含标题、日期、图片)
- 提取招聘信息从招聘页面提取职位、雇主、地点、薪资与描述
- 提取页面图片提取页面的主图与次图,含尺寸与元数据
- 提取商品详情从电商页面提取商品名称、价格、SKU、图片、规格与评价
- 提取视频页详情从视频页面提取标题、嵌入/播放器 URL、时长、缩略图与元数据
- 按 HTML 术语查找域名此接口根据域名首页使用的 HTML 术语提供域名。
- 按技术查找域名此接口根据域名所使用的技术提供域名。
- 全局点击流搜索量DataForSEO 关键词数据 API 的点击流全局搜索量接口,可在一次实时请求中为最多 1000 个关键词提供基于点击流的搜索量数据。
- IP 归属地与公司信息通过将某个 IP 与我们数据集中近 20 亿个 IP 进行一对一匹配来补充数据,返回归属地、公司与元数据。
- 关键词引用概览此接口将提供目标关键词可用引用数据的概览。
- 关键词搜索量返回关键词的点击流搜索量,按月份给出数据。
- 关键词趋势地区代码调用此 API 即可获取 DataForSEO Trends 的地区列表。
- 按年龄与性别的关键词趋势此接口将基于 DataForSEO Trends 数据,提供每个指定词的关键词热度人口分布(按年龄与性别)。
- 按地区的关键词趋势此接口将提供来自 DataForSEO Trends 的按地区划分的关键词热度数据。
- Lighthouse 页面审计OnPage Lighthouse API 基于 Google 开源 Lighthouse 项目,用于衡量网页与 Web 应用的质量。
- 不可索引页面此接口返回因 robots.txt、HTTP 头或 meta 标签设置而被 Google 及其他搜索引擎禁止索引的页面列表。
- 页面外链汇总此接口将为你指定的目标域名或子域名的每个页面,提供所有外链及相关指标的详细汇总数据。
- 页面关键词密度此接口将提供指定网站或网页上出现的词的关键词密度与关键词频率数据。
- 页面加载瀑布图此接口用于提供页面速度洞察。
- 使用某资源的页面此接口将返回特定资源所在的页面列表。
- 有外链的页面此接口将提供域名页面的详细概览,含每个页面的外链数据。
- 解析分享的视频 URL混合模式:视频数据。
- 解析已抓取页面内容此接口可解析你指定的任意页面内容,返回目标页面的结构化内容,包括链接 URL、锚文本、标题与文本内容。
- 解析实时页面内容此接口可解析你指定的任意页面内容,返回目标页面的结构化内容,包括链接 URL、锚文本、标题与文本内容。
- 重定向链当初始 URL 与目标 URL 之间至少有两次重定向时,即形成重定向链。
- 引用 IP 与网络此接口将提供指向你所指定目标的引用 IP 与子网的详细概览。
- 相关网站技术聚合技术接口将提供与你指定技术一同出现的、网站最常用的技术列表。
- 搜索中文新闻与社交内容在新闻、微博、微信、知乎、抖音、小红书、Bilibili 与快手等平台搜索近期内容,支持来源与时间过滤。
- 搜索 Google Maps 商家商家列表搜索 API 返回指定类目下 Google Maps 所列商家的相关信息。
- 搜索关键词引用此接口将提供目标关键词可用的详细引用数据。
- 共享引用域此接口将提供指向指定网站的域名列表。
- 共享引用页面此接口将提供指向指定目标的引用页面列表。
- 站点审计摘要使用此功能可获取网站的整体信息,并深入查看已扫描网站的具体页面问题。
- 启动站点审计抓取OnPage API 按 60+ 项可自定义的页面参数检查网站,并展示发现的所有缺陷与优化机会,方便你轻松修复。
- 按地区统计的技术数量技术汇总接口将提供不同国家与语言中使用指定技术名称、技术组或技术类目的域名数量。
- 技术域名数量随时间变化技术统计接口将提供不同国家与语言中使用指定技术的域名数量的历史数据。
- 无法抓取的资源此接口返回目标网站上检测到的、因内容类型不一致而无法抓取的资源列表。
- 校验页面结构化数据此接口用于校验 JSON-LD 结构化数据与 Microdata。
- 网站技术使用此接口可获取某个域名所使用的技术列表。
- 网站技术列表此接口将提供全部可用技术列表,并按每项技术所属的技术组与类目组织。
- Whois 与站点指标此接口将提供 Whois 数据,并附带外链统计,以及来自自然与付费搜索结果的排名与流量信息。
这些端点可以调用,但不在目录的浏览面上。