跳到正文
返回首页

webmcpx 基准测试：Claude Haiku 5.5

排行榜

WebMCP 能省多少，逐个模型对比

一个智能体靠页面快照来读、点、填；另一个调用网站的 WebMCP 工具。选一个模型看看，节省最多的排在最前。

按使用 WebMCP 的成功率排序，相同时按每次运行成本排序。

精选案例：30 个问题中的 20 个，即 WebMCP 的 token 用量不超过一半的问题。全部结果均已公开，你也可以用 just bench 自己跑一遍。

Claude Haiku 5.5（Anthropic）

Cloudflare

“在 Cloudflare 的 Workers Free 套餐下，我的 Workers 每天最多能处理多少请求才会触发限制？”

developers.cloudflare.com （打开 Cloudflare）

18×

token 更少

49k → 2.7k token

Token（按问题统计，每次运行的 token 数）：越低越好。另附各组成功率。
问题不用 WebMCP：token用 WebMCP：token不用 WebMCP：解决情况用 WebMCP：解决情况
Cloudflare：在 Cloudflare 的 Workers Free 套餐下，我的 Workers 每天最多能处理多少请求才会触发限制？49k2.7k100%100%
Cloudflare：发送到 Cloudflare Queue 的消息最大能有多大？我需要单条消息的大小上限。25k2.6k100%100%
Cloudflare：我用的是 Workers Paid 套餐。单个 Cloudflare D1 数据库最大能有多大？23k2.7k100%100%
Cloudflare：Cloudflare Workers KV 中单个值最大是多少？21k2.5k100%100%
Cloudflare：Cloudflare Workers KV 的键最长可以是多少？我想知道键的最大长度。21k2.9k100%100%
耗时（按问题统计，每次运行的秒数）：越低越好。另附各组成功率。
问题不用 WebMCP：耗时用 WebMCP：耗时不用 WebMCP：解决情况用 WebMCP：解决情况
Cloudflare：在 Cloudflare 的 Workers Free 套餐下，我的 Workers 每天最多能处理多少请求才会触发限制？4.5s3.6s100%100%
Cloudflare：发送到 Cloudflare Queue 的消息最大能有多大？我需要单条消息的大小上限。3.5s3.5s100%100%
Cloudflare：我用的是 Workers Paid 套餐。单个 Cloudflare D1 数据库最大能有多大？2.9s3.2s100%100%
Cloudflare：Cloudflare Workers KV 中单个值最大是多少？2.9s2.8s100%100%
Cloudflare：Cloudflare Workers KV 的键最长可以是多少？我想知道键的最大长度。3.2s3.3s100%100%
步数（按问题统计，每次运行的模型轮次）：越低越好。另附各组成功率。
问题不用 WebMCP：步数用 WebMCP：步数不用 WebMCP：解决情况用 WebMCP：解决情况
Cloudflare：在 Cloudflare 的 Workers Free 套餐下，我的 Workers 每天最多能处理多少请求才会触发限制？3.72.0100%100%
Cloudflare：发送到 Cloudflare Queue 的消息最大能有多大？我需要单条消息的大小上限。3.32.0100%100%
Cloudflare：我用的是 Workers Paid 套餐。单个 Cloudflare D1 数据库最大能有多大？3.02.0100%100%
Cloudflare：Cloudflare Workers KV 中单个值最大是多少？3.02.0100%100%
Cloudflare：Cloudflare Workers KV 的键最长可以是多少？我想知道键的最大长度。3.02.0100%100%
成本（按问题统计，每个任务的美元数）：越低越好。另附各组成功率。
问题不用 WebMCP：成本用 WebMCP：成本不用 WebMCP：解决情况用 WebMCP：解决情况
Cloudflare：在 Cloudflare 的 Workers Free 套餐下，我的 Workers 每天最多能处理多少请求才会触发限制？$0.0034$0.00029100%100%
Cloudflare：发送到 Cloudflare Queue 的消息最大能有多大？我需要单条消息的大小上限。$0.0017$0.00031100%100%
Cloudflare：我用的是 Workers Paid 套餐。单个 Cloudflare D1 数据库最大能有多大？$0.0009$0.00029100%100%
Cloudflare：Cloudflare Workers KV 中单个值最大是多少？$0.0014$0.00024100%100%
Cloudflare：Cloudflare Workers KV 的键最长可以是多少？我想知道键的最大长度。$0.00099$0.00033100%100%

Cloudflare 注册的 2 个 WebMCP 工具

智能体当时看到的版本 · 2026-11-08

工具描述已调用
search

Full-text search across Cloudflare developer documentation. Returns matching pages with titles, URLs, and content snippets. Use this to find documentation on any Cloudflare product or feature.

search({"limit":5,"query":"Workers Free plan daily request limit"})

search({"limit":5,"query":"Cloudflare Queues maximum message size limit"})

search({"limit":5,"query":"D1 database maximum size limits Workers Paid"})

search({"limit":3,"query":"Workers KV maximum value size limit"})

search({"limit":5,"query":"Workers KV maximum key size limits"})

 已调用
list-directories

Returns a list of all Cloudflare products available in the developer documentation, including each product's name, docs URL, short description, and category group. Use this to discover what products exist before searching or navigating.

–未调用
  • claude-haiku-5-5，推理强度 medium，无头 Chrome。两组使用相同的提示词和步数上限；每个问题每组运行 3 次。
  • 不用 WebMCP：基于 DOM 快照的智能体，靠读、点、填完成操作。
  • 用 WebMCP：只能使用页面注册的工具（网站自带的，或在我们的测试站点上由 webmcpx 提供）。
  • 按答案中的事实和页面状态评分，不用 LLM 当评委。
  • 真实网站：自带 WebMCP 工具。
  • 6 个网站共 30 个问题，其中 27 个只读；最大的节省来自网站自带的搜索工具。
  • 每个问题每组运行 3 次：3/3 是证据，不是 100% 的证明。
  • 时间是页面加载后的智能体循环；成本是按有日期的标价计算的模型 API 用量，含缓存。
  • 每次失败的运行都在结果中注明原因（网站拦截、答案不来自页面、步数上限……）。
复现步骤 
git clone https://github.com/webmcpx/webmcpx
cd webmcpx && just setup
ANTHROPIC_API_KEY=... just bench --model claude-haiku-5-5 --reasoning-effort medium

Notion

“我在通过 API 往 Notion 页面写长段落。一次请求中，单个 rich text 对象的文本内容最多能有多少个字符？”

developers.notion.com （打开 Notion）

16×

token 更少

43k → 2.7k token

Token（按问题统计，每次运行的 token 数）：越低越好。另附各组成功率。
问题不用 WebMCP：token用 WebMCP：token不用 WebMCP：解决情况用 WebMCP：解决情况
Notion：我在通过 API 往 Notion 页面写长段落。一次请求中，单个 rich text 对象的文本内容最多能有多少个字符？43k2.7k100%100%
Notion：我在分页读取 Notion API 的结果。列表类接口每次调用最多能请求多大的 page_size？37k2.8k100%100%
Notion：在 Business 和 Enterprise 以外的套餐中，Notion API 每个连接每分钟允许多少个请求？17k2.6k100%100%
Notion：我的 Notion 集成发送请求过多时，API 会在响应体里返回哪个错误码字符串？17k5.9k100%100%
耗时（按问题统计，每次运行的秒数）：越低越好。另附各组成功率。
问题不用 WebMCP：耗时用 WebMCP：耗时不用 WebMCP：解决情况用 WebMCP：解决情况
Notion：我在通过 API 往 Notion 页面写长段落。一次请求中，单个 rich text 对象的文本内容最多能有多少个字符？5.7s3.0s100%100%
Notion：我在分页读取 Notion API 的结果。列表类接口每次调用最多能请求多大的 page_size？5.2s3.7s100%100%
Notion：在 Business 和 Enterprise 以外的套餐中，Notion API 每个连接每分钟允许多少个请求？3.5s2.0s100%100%
Notion：我的 Notion 集成发送请求过多时，API 会在响应体里返回哪个错误码字符串？5.3s5.5s100%100%
步数（按问题统计，每次运行的模型轮次）：越低越好。另附各组成功率。
问题不用 WebMCP：步数用 WebMCP：步数不用 WebMCP：解决情况用 WebMCP：解决情况
Notion：我在通过 API 往 Notion 页面写长段落。一次请求中，单个 rich text 对象的文本内容最多能有多少个字符？4.32.0100%100%
Notion：我在分页读取 Notion API 的结果。列表类接口每次调用最多能请求多大的 page_size？4.32.0100%100%
Notion：在 Business 和 Enterprise 以外的套餐中，Notion API 每个连接每分钟允许多少个请求？3.32.0100%100%
Notion：我的 Notion 集成发送请求过多时，API 会在响应体里返回哪个错误码字符串？3.72.7100%100%
成本（按问题统计，每个任务的美元数）：越低越好。另附各组成功率。
问题不用 WebMCP：成本用 WebMCP：成本不用 WebMCP：解决情况用 WebMCP：解决情况
Notion：我在通过 API 往 Notion 页面写长段落。一次请求中，单个 rich text 对象的文本内容最多能有多少个字符？$0.003$0.00026100%100%
Notion：我在分页读取 Notion API 的结果。列表类接口每次调用最多能请求多大的 page_size？$0.0022$0.00027100%100%
Notion：在 Business 和 Enterprise 以外的套餐中，Notion API 每个连接每分钟允许多少个请求？$0.0011$0.00015100%100%
Notion：我的 Notion 集成发送请求过多时，API 会在响应体里返回哪个错误码字符串？$0.0012$0.00056100%100%

Notion 注册的 5 个 WebMCP 工具

智能体当时看到的版本 · 2026-11-08

工具描述已调用
search_docs

Search the Notion Docs documentation for relevant pages and content.

search_docs({"query":"rich text maximum character length text content limit"})

search_docs({"query":"page_size pagination list endpoints maximum"})

search_docs({"query":"Notion API rate limits requests per minute plans"})

search_docs({"query":"rate limit error code response body"})

 已调用
get_site_overview

Get an outline of the Notion Docs documentation, grouped by section, with a short description of each page. May be truncated for large sites; use search_docs to find pages not listed.

–未调用
navigate_page

Navigate the current browser tab to a Notion Docs documentation page.

–未调用
read_page

Read the full content of a Notion Docs documentation page as markdown.

–未调用
read_skill

Read a Notion Docs agent skill document by name.

–未调用
  • claude-haiku-5-5，推理强度 medium，无头 Chrome。两组使用相同的提示词和步数上限；每个问题每组运行 3 次。
  • 不用 WebMCP：基于 DOM 快照的智能体，靠读、点、填完成操作。
  • 用 WebMCP：只能使用页面注册的工具（网站自带的，或在我们的测试站点上由 webmcpx 提供）。
  • 按答案中的事实和页面状态评分，不用 LLM 当评委。
  • 真实网站：自带 WebMCP 工具。
  • 6 个网站共 30 个问题，其中 27 个只读；最大的节省来自网站自带的搜索工具。
  • 每个问题每组运行 3 次：3/3 是证据，不是 100% 的证明。
  • 时间是页面加载后的智能体循环；成本是按有日期的标价计算的模型 API 用量，含缓存。
  • 每次失败的运行都在结果中注明原因（网站拦截、答案不来自页面、步数上限……）。
复现步骤 
git clone https://github.com/webmcpx/webmcpx
cd webmcpx && just setup
ANTHROPIC_API_KEY=... just bench --model claude-haiku-5-5 --reasoning-effort medium

specification.website

“按照这份规范，页面的 meta description 应该多长？”

specification.website （打开 specification.website）

4.2×

token 更少

32k → 7.6k token

Token（按问题统计，每次运行的 token 数）：越低越好。另附各组成功率。
问题不用 WebMCP：token用 WebMCP：token不用 WebMCP：解决情况用 WebMCP：解决情况
specification.website：按照这份规范，页面的 meta description 应该多长？32k7.6k100%100%
specification.website：按照这份规范，生产环境的 HSTS 响应头应该设置多大的 max-age？28k7.4k100%100%
specification.website：这个网站的规范要求正常字号的正文文本最低对比度是多少？23k7.7k100%100%
specification.website：这份规范把良好响应性的 INP 目标值定为多少？15k7.1k100%100%
耗时（按问题统计，每次运行的秒数）：越低越好。另附各组成功率。
问题不用 WebMCP：耗时用 WebMCP：耗时不用 WebMCP：解决情况用 WebMCP：解决情况
specification.website：按照这份规范，页面的 meta description 应该多长？5.0s2.8s100%100%
specification.website：按照这份规范，生产环境的 HSTS 响应头应该设置多大的 max-age？7.1s5.5s100%100%
specification.website：这个网站的规范要求正常字号的正文文本最低对比度是多少？3.6s2.7s100%100%
specification.website：这份规范把良好响应性的 INP 目标值定为多少？3.3s3.0s100%100%
步数（按问题统计，每次运行的模型轮次）：越低越好。另附各组成功率。
问题不用 WebMCP：步数用 WebMCP：步数不用 WebMCP：解决情况用 WebMCP：解决情况
specification.website：按照这份规范，页面的 meta description 应该多长？5.73.0100%100%
specification.website：按照这份规范，生产环境的 HSTS 响应头应该设置多大的 max-age？5.33.0100%100%
specification.website：这个网站的规范要求正常字号的正文文本最低对比度是多少？4.03.0100%100%
specification.website：这份规范把良好响应性的 INP 目标值定为多少？3.33.0100%100%
成本（按问题统计，每个任务的美元数）：越低越好。另附各组成功率。
问题不用 WebMCP：成本用 WebMCP：成本不用 WebMCP：解决情况用 WebMCP：解决情况
specification.website：按照这份规范，页面的 meta description 应该多长？$0.0015$0.00033100%100%
specification.website：按照这份规范，生产环境的 HSTS 响应头应该设置多大的 max-age？$0.0016$0.00049100%100%
specification.website：这个网站的规范要求正常字号的正文文本最低对比度是多少？$0.0014$0.00053100%100%
specification.website：这份规范把良好响应性的 INP 目标值定为多少？$0.0012$0.00053100%100%

specification.website 注册的 5 个 WebMCP 工具

智能体当时看到的版本 · 2026-11-08

工具描述已调用
search_spec

Search The Website Specification for matching topics. Returns ranked results with title, status, category, canonical URL, and a one-line summary. Use this when the user asks about a topic by keyword (e.g. "CSP", "alt text", "llms.txt").

search_spec({"limit":5,"query":"meta description length"})

search_spec({"limit":5,"query":"HSTS max-age"})

search_spec({"limit":5,"query":"contrast ratio body text"})

search_spec({"limit":5,"query":"INP Interaction to Next Paint responsiveness"})

search_spec({"limit":5,"query":"Core Web Vitals performance targets"})

 已调用
get_topic

Fetch the Markdown for one spec page by its slug, returned as lines you can page through. Use this after search_spec or list_topics to read the canonical guidance.

get_topic({"slug":"meta-description"})

get_topic({"limit":200,"slug":"hsts"})

get_topic({"slug":"color-contrast"})

 已调用
list_topics

List spec topics, optionally filtered by category and/or status. Returns title, status, category, summary, and URL per topic. Use this when the user wants the canonical list (e.g. "all required SEO topics"). Results are paged — follow page/page_size to walk the whole list.

–未调用
open_checklist

Navigate the user to the full spec checklist page. Optionally jumps to a category section via URL hash. UI action — does not return data.

–未调用
open_search

Open the on-page ⌘K search overlay so the user can search the spec interactively. Optionally pre-fills a query. UI action — does not return results; use search_spec for that.

–未调用
  • claude-haiku-5-5，推理强度 medium，无头 Chrome。两组使用相同的提示词和步数上限；每个问题每组运行 3 次。
  • 不用 WebMCP：基于 DOM 快照的智能体，靠读、点、填完成操作。
  • 用 WebMCP：只能使用页面注册的工具（网站自带的，或在我们的测试站点上由 webmcpx 提供）。
  • 按答案中的事实和页面状态评分，不用 LLM 当评委。
  • 真实网站：自带 WebMCP 工具。
  • 6 个网站共 30 个问题，其中 27 个只读；最大的节省来自网站自带的搜索工具。
  • 每个问题每组运行 3 次：3/3 是证据，不是 100% 的证明。
  • 时间是页面加载后的智能体循环；成本是按有日期的标价计算的模型 API 用量，含缓存。
  • 每次失败的运行都在结果中注明原因（网站拦截、答案不来自页面、步数上限……）。
复现步骤 
git clone https://github.com/webmcpx/webmcpx
cd webmcpx && just setup
ANTHROPIC_API_KEY=... just bench --model claude-haiku-5-5 --reasoning-effort medium

Kiln & Co 本地

“把一个 Stoneware Teapot 和一个 Speckled Bowl 加入我的购物车，然后告诉我购物车总价。”

3.5×

token 更少

22k → 6.2k token

Token（按问题统计，每次运行的 token 数）：越低越好。另附各组成功率。
问题不用 WebMCP：token用 WebMCP：token不用 WebMCP：解决情况用 WebMCP：解决情况
Kiln & Co（本地测试网站）：把一个 Stoneware Teapot 和一个 Speckled Bowl 加入我的购物车，然后告诉我购物车总价。22k6.2k100%100%
Kiln & Co（本地测试网站）：把最便宜的蓝色马克杯加两个到我的购物车。10k3.9k100%100%
Kiln & Co（本地测试网站）：把你们卖的最贵的茶壶加入我的购物车。8.7k3.7k100%100%
耗时（按问题统计，每次运行的秒数）：越低越好。另附各组成功率。
问题不用 WebMCP：耗时用 WebMCP：耗时不用 WebMCP：解决情况用 WebMCP：解决情况
Kiln & Co（本地测试网站）：把一个 Stoneware Teapot 和一个 Speckled Bowl 加入我的购物车，然后告诉我购物车总价。4.7s3.4s100%100%
Kiln & Co（本地测试网站）：把最便宜的蓝色马克杯加两个到我的购物车。4.3s2.5s100%100%
Kiln & Co（本地测试网站）：把你们卖的最贵的茶壶加入我的购物车。2.7s2.2s100%100%
步数（按问题统计，每次运行的模型轮次）：越低越好。另附各组成功率。
问题不用 WebMCP：步数用 WebMCP：步数不用 WebMCP：解决情况用 WebMCP：解决情况
Kiln & Co（本地测试网站）：把一个 Stoneware Teapot 和一个 Speckled Bowl 加入我的购物车，然后告诉我购物车总价。5.74.0100%100%
Kiln & Co（本地测试网站）：把最便宜的蓝色马克杯加两个到我的购物车。3.33.0100%100%
Kiln & Co（本地测试网站）：把你们卖的最贵的茶壶加入我的购物车。3.03.0100%100%
成本（按问题统计，每个任务的美元数）：越低越好。另附各组成功率。
问题不用 WebMCP：成本用 WebMCP：成本不用 WebMCP：解决情况用 WebMCP：解决情况
Kiln & Co（本地测试网站）：把一个 Stoneware Teapot 和一个 Speckled Bowl 加入我的购物车，然后告诉我购物车总价。$0.00088$0.00032100%100%
Kiln & Co（本地测试网站）：把最便宜的蓝色马克杯加两个到我的购物车。$0.00083$0.00022100%100%
Kiln & Co（本地测试网站）：把你们卖的最贵的茶壶加入我的购物车。$0.00049$0.00018100%100%

Kiln & Co 注册的 4 个 WebMCP 工具

智能体当时看到的版本 · 2026-11-08

工具描述已调用
search_products

Search the catalog. Every filter is optional; with none, returns every product. Prices are USD.

search_products({"query":"Stoneware Teapot"})

search_products({"query":"Speckled Bowl"})

search_products({"category":"mug","color":"blue","sort":"price_asc"})

search_products({"category":"teapot","sort":"price_desc"})

 已调用
add_to_cart

Add a product to the cart by sku. Adding a sku already in the cart increases its quantity.

add_to_cart({"sku":"TPT-01"})

add_to_cart({"sku":"BWL-01"})

add_to_cart({"quantity":2,"sku":"MUG-03"})

add_to_cart({"sku":"TPT-02"})

 已调用
get_cart

Return the cart: items with quantity and the total in USD.

get_cart({})

 已调用
get_page_context

Describe the page the user is on: title, URL, language, meta description, heading outline and the text the user has selected. Use it for the page's structure or the user's selection; to find a fact on the page, call search_page instead.

–未调用
  • claude-haiku-5-5，推理强度 medium，无头 Chrome。两组使用相同的提示词和步数上限；每个问题每组运行 3 次。
  • 不用 WebMCP：基于 DOM 快照的智能体，靠读、点、填完成操作。
  • 用 WebMCP：只能使用页面注册的工具（网站自带的，或在我们的测试站点上由 webmcpx 提供）。
  • 按答案中的事实和页面状态评分，不用 LLM 当评委。
  • 本地测试网站：工具由 webmcpx 提供。
  • 6 个网站共 30 个问题，其中 27 个只读；最大的节省来自网站自带的搜索工具。
  • 每个问题每组运行 3 次：3/3 是证据，不是 100% 的证明。
  • 时间是页面加载后的智能体循环；成本是按有日期的标价计算的模型 API 用量，含缓存。
  • 每次失败的运行都在结果中注明原因（网站拦截、答案不来自页面、步数上限……）。
复现步骤 
git clone https://github.com/webmcpx/webmcpx
cd webmcpx && just setup
ANTHROPIC_API_KEY=... just bench --model claude-haiku-5-5 --reasoning-effort medium

Orbit docs 本地

“默认情况下，Orbit 会保留多少个历史版本用于回滚？”

2.2×

token 更少

5.4k → 2.4k token

Token（按问题统计，每次运行的 token 数）：越低越好。另附各组成功率。
问题不用 WebMCP：token用 WebMCP：token不用 WebMCP：解决情况用 WebMCP：解决情况
Orbit docs（本地测试网站）：默认情况下，Orbit 会保留多少个历史版本用于回滚？5.4k2.4k100%100%
Orbit docs（本地测试网站）：哪个环境变量能让 Orbit 从其他路径读取配置文件？5.4k2.4k100%100%
Orbit docs（本地测试网站）：我的 CI 步骤失败了，orbit 退出码是 4。这是什么意思？5.5k2.4k100%100%
Orbit docs（本地测试网站）：运行 orbit deploy 时，可以选择哪些发布策略？5.5k2.5k100%100%
耗时（按问题统计，每次运行的秒数）：越低越好。另附各组成功率。
问题不用 WebMCP：耗时用 WebMCP：耗时不用 WebMCP：解决情况用 WebMCP：解决情况
Orbit docs（本地测试网站）：默认情况下，Orbit 会保留多少个历史版本用于回滚？2.1s2.5s100%100%
Orbit docs（本地测试网站）：哪个环境变量能让 Orbit 从其他路径读取配置文件？1.6s1.7s100%100%
Orbit docs（本地测试网站）：我的 CI 步骤失败了，orbit 退出码是 4。这是什么意思？1.7s3.7s100%100%
Orbit docs（本地测试网站）：运行 orbit deploy 时，可以选择哪些发布策略？2.3s2.1s100%100%
步数（按问题统计，每次运行的模型轮次）：越低越好。另附各组成功率。
问题不用 WebMCP：步数用 WebMCP：步数不用 WebMCP：解决情况用 WebMCP：解决情况
Orbit docs（本地测试网站）：默认情况下，Orbit 会保留多少个历史版本用于回滚？2.02.0100%100%
Orbit docs（本地测试网站）：哪个环境变量能让 Orbit 从其他路径读取配置文件？2.02.0100%100%
Orbit docs（本地测试网站）：我的 CI 步骤失败了，orbit 退出码是 4。这是什么意思？2.02.0100%100%
Orbit docs（本地测试网站）：运行 orbit deploy 时，可以选择哪些发布策略？2.02.0100%100%
成本（按问题统计，每个任务的美元数）：越低越好。另附各组成功率。
问题不用 WebMCP：成本用 WebMCP：成本不用 WebMCP：解决情况用 WebMCP：解决情况
Orbit docs（本地测试网站）：默认情况下，Orbit 会保留多少个历史版本用于回滚？$0.00031$0.00019100%100%
Orbit docs（本地测试网站）：哪个环境变量能让 Orbit 从其他路径读取配置文件？$0.0006$0.00015100%100%
Orbit docs（本地测试网站）：我的 CI 步骤失败了，orbit 退出码是 4。这是什么意思？$0.0003$0.00017100%100%
Orbit docs（本地测试网站）：运行 orbit deploy 时，可以选择哪些发布策略？$0.00047$0.00019100%100%

Orbit docs 注册的 3 个 WebMCP 工具

智能体当时看到的版本 · 2026-11-08

工具描述已调用
search_page

Find passages on the current page that match a query. Returns up to `limit` passages ranked by relevance, each with its section heading and a link to it. Prefer it to reading the whole page when looking for something specific.

search_page({"limit":5,"query":"past releases rollback default keep"})

search_page({"limit":5,"query":"environment variable config file path"})

search_page({"limit":5,"query":"exit code 4"})

search_page({"limit":5,"query":"orbit deploy rollout strategy"})

 已调用
fetch_as_markdown

Return the main content of the current page as Markdown. Long pages come in parts: when `truncated` is true, call again with `cursor` set to `next_cursor`.

–未调用
get_page_context

Describe the page the user is on: title, URL, language, meta description, heading outline and the text the user has selected. Use it for the page's structure or the user's selection; to find a fact on the page, call search_page instead.

–未调用
  • claude-haiku-5-5，推理强度 medium，无头 Chrome。两组使用相同的提示词和步数上限；每个问题每组运行 3 次。
  • 不用 WebMCP：基于 DOM 快照的智能体，靠读、点、填完成操作。
  • 用 WebMCP：只能使用页面注册的工具（网站自带的，或在我们的测试站点上由 webmcpx 提供）。
  • 按答案中的事实和页面状态评分，不用 LLM 当评委。
  • 本地测试网站：工具由 webmcpx 提供。
  • 6 个网站共 30 个问题，其中 27 个只读；最大的节省来自网站自带的搜索工具。
  • 每个问题每组运行 3 次：3/3 是证据，不是 100% 的证明。
  • 时间是页面加载后的智能体循环；成本是按有日期的标价计算的模型 API 用量，含缓存。
  • 每次失败的运行都在结果中注明原因（网站拦截、答案不来自页面、步数上限……）。
复现步骤 
git clone https://github.com/webmcpx/webmcpx
cd webmcpx && just setup
ANTHROPIC_API_KEY=... just bench --model claude-haiku-5-5 --reasoning-effort medium