返回顶部
n

novel-scraper-spa小说抓取器

支持 JavaScript 加载的小说抓取工具,使用 Playwright 渲染 SPA 网站。自动检测网站类型,静态网站使用 curl,SPA 网站使用浏览器渲染。

作者: admin | 来源: ClawHub
源自
ClawHub
版本
V 1.0.0
安全检测
已通过
81
下载量
免费
免费
0
收藏
概述
安装方式
版本历史

novel-scraper-spa

Novel Scraper SPA

功能

支持抓取 JavaScript 加载的小说网站(SPA 架构),使用 Playwright 浏览器渲染。

使用场景

  • - 抓取笔趣阁等 SPA 架构小说网站
  • 需要 JavaScript 渲染才能获取内容的网站
  • 普通静态网站(自动使用 curl,更快速)

命令

bash
python3 scripts/scraper.py --url --book <书名> --chapter <章节号>

参数

  • - --url: 目标 URL
  • --book: 书名(用于输出文件名)
  • --chapter: 章节号
  • --force-spa: 强制使用浏览器渲染
  • -v: 详细日志

输出

保存到 ~/.openclaw/workspace/novels/ 目录

2. 基于任务(最适合工具集合)

  • - 当技能提供不同操作/能力时效果最佳
  • 示例:PDF 技能包含快速入门→合并 PDF→拆分 PDF→提取文本
  • 结构:## 概述 → ## 快速入门 → ## 任务类别 1 → ## 任务类别 2...

3. 参考/指南(最适合标准或规范)

  • - 适用于品牌指南、编码标准或需求文档
  • 示例:品牌样式包含品牌指南→颜色→排版→功能
  • 结构:## 概述 → ## 指南 → ## 规范 → ## 使用...

4. 基于能力(最适合集成系统)

  • - 当技能提供多个相互关联的功能时效果最佳
  • 示例:产品管理包含核心能力→ 编号能力列表
  • 结构:## 概述 → ## 核心能力 → ### 1. 功能 → ### 2. 功能...

模式可以根据需要混合搭配。大多数技能会组合多种模式(例如,从基于任务开始,为复杂操作添加工作流)。

完成后删除此结构化此技能部分——这仅作为指导。

[TODO:根据所选结构替换为第一个主要部分]

[TODO:在此添加内容。请参考现有技能中的示例:

  • - 技术技能的代码示例
  • 复杂工作流的决策树
  • 包含真实用户请求的具体示例
  • 根据需要引用脚本/模板/参考]

资源

本技能包含示例资源目录,演示如何组织不同类型的捆绑资源:

scripts/

可直接运行以执行特定操作的可执行代码(Python/Bash 等)。

其他技能中的示例:

  • - PDF 技能:fillfillablefields.py、extractformfield_info.py——PDF 操作工具
  • DOCX 技能:document.py、utilities.py——文档处理的 Python 模块

适用于: Python 脚本、Shell 脚本或任何执行自动化、数据处理或特定操作的可执行代码。

注意: 脚本可能在不加载到上下文的情况下执行,但 Claude 仍可读取以进行修补或环境调整。

references/

旨在加载到上下文中的文档和参考资料,用于指导 Claude 的流程和思考。

其他技能中的示例:

  • - 产品管理:communication.md、context_building.md——详细工作流指南
  • BigQuery:API 参考文档和查询示例
  • 财务:模式文档、公司政策

适用于: 深入文档、API 参考、数据库模式、综合指南或任何 Claude 在工作时应参考的详细信息。

assets/

不打算加载到上下文中,而是在 Claude 生成的输出中使用的文件。

其他技能中的示例:

  • - 品牌样式:PowerPoint 模板文件(.pptx)、Logo 文件
  • 前端构建器:HTML/React 样板项目目录
  • 排版:字体文件(.ttf、.woff2)

适用于: 模板、样板代码、文档模板、图片、图标、字体或任何旨在复制或用于最终输出的文件。



任何不需要的目录都可以删除。 并非每个技能都需要所有三种类型的资源。

标签

skill ai

通过对话安装

该技能支持在以下平台通过对话安装:

OpenClaw WorkBuddy QClaw Kimi Claude

方式一:安装 SkillHub 和技能

帮我安装 SkillHub 和 novel-scraper-spa-1775885583 技能

方式二:设置 SkillHub 为优先技能安装源

设置 SkillHub 为我的优先技能安装源,然后帮我安装 novel-scraper-spa-1775885583 技能

通过命令行安装

skillhub install novel-scraper-spa-1775885583

下载

⬇ 下载 novel-scraper-spa v1.0.0(免费)

文件大小: 6.09 KB | 发布时间: 2026-4-12 10:44

v1.0.0 最新 2026-4-12 10:44
初始版本

Archiver·手机版·闲社网·闲社论坛·羊毛社区· 多链控股集团有限公司 · 苏ICP备2025199260号-1

Powered by Discuz! X5.0   © 2024-2025 闲社网·线报更新论坛·羊毛分享社区·http://xianshe.com

p2p_official_large
返回顶部