闲社服务运行正常AI智能体自动化平台
w

网页内容获取

技能标识:web-content-fetcher

网页内容获取工具 | 当常规爬虫被过滤时,使用替代服务获取网页内容。支持:1) r.jina.ai - 最稳定 2) markdown.new - Cloudflare 专用 3) defuddle.md - 备用方案。触发词:获取网页内容、网页转markdown、内容抓取、fetch webpage、bypass cloudflare

作者:admin | 来源记录:ClawHub
登记来源
ClawHub
版本
V 1.0.1
检测标记
后台标记通过
免费
免费获取
17
收藏
来源与检测标记为平台登记信息,并不代表已展示可复核的检测报告。使用前请核对版本、依赖和所需权限,建议先在隔离环境中运行。
概述
安装方式
版本历史

网页内容获取

网页内容获取工具

当常规 webfetch/websearch 无法获取内容时,使用替代服务获取网页 Markdown 格式内容。

支持的服务

优先级服务用法适用场景
1r.jina.aihttps://r.jina.ai/{url}最稳定,通用性强
2
markdown.new | https://markdown.new/{url} | Cloudflare 保护网站 | | 3 | defuddle.md | https://defuddle.md/{url} | 备用方案 |

使用方法

直接调用

当需要获取网页内容时,按顺序尝试:

  1. 1. 首先用 web_fetch 尝试获取
  2. 如果失败或被过滤,调用本工具

bash

使用 jina.ai (首选)


curl -s https://r.jina.ai/https://example.com

使用 markdown.new (Cloudflare)

curl -s https://markdown.new/https://example.com

使用 defuddle.md (备用)

curl -s https://defuddle.md/https://example.com

API 格式

bash

简单获取


fetch_webpage

指定方法

fetch_webpage --method jina|markdown|defuddle

示例

用户: 帮我获取 https://news.example.com/article/123 的内容
助手: (使用 r.jina.ai 获取)

工具脚本

本目录包含 fetch.sh 脚本,可直接调用:

bash
./fetch.sh https://example.com
./fetch.sh https://example.com jina



让网页内容获取不再受限 🌐

标签

skill ai

通过对话安装

以下为平台配置的接入选项,并非逐项实测通过。能否安装取决于客户端支持、技能来源和运行环境:

OpenClaw WorkBuddy QClaw Kimi Claude

方式一:安装 SkillHub 和技能

帮我安装 SkillHub 和 web-content-fetcher-1776202887 技能

方式二:设置 SkillHub 为优先技能安装源

设置 SkillHub 为我的优先技能安装源,然后帮我安装 web-content-fetcher-1776202887 技能

通过命令行安装

skillhub install web-content-fetcher-1776202887

下载

⬇ 下载 web-content-fetcher v1.0.1(免费)

文件大小: 3.57 KB | 发布时间: 2026-4-15 11:42

v1.0.1 最新 2026-4-15 11:42
Version 1.0.1 of web-content-fetcher

- No file changes detected in this release.
- No updates to features, documentation, or scripts.
- Version bump only; functionality remains unchanged.
返回顶部