XCrawl - AI-Powered Web Scraping API / AI 驱动网页爬虫，支持结构化数据提取
AI驱动的网页抓取API - 结构化数据提取利器
支持 Markdown、HTML、JSON、截图等多种格式输出
| 功能 | 说明 |
|---|---|
| 🏷️ 网页爬取 | 支持 Markdown、HTML、JSON、截图 |
| 🔍 搜索 |
bash
scripts\install.bat
bash
bash
python scripts\xcrawlscraper.py set-key YOURAPI_KEY
bash
python scripts\xcrawl_scraper.py scrape https://example.com markdown
bash
python scripts\xcrawl_scraper.py scrape https://example.com markdown html links
bash
python scripts\xcrawl_scraper.py scrape https://example.com json 提取产品名称和价格
bash
python scripts\xcrawl_scraper.py search web scraping
bash
python scripts\xcrawl_scraper.py map https://example.com
bash
python scripts\xcrawl_scraper.py crawl https://example.com
| 命令 | 说明 |
|---|---|
| scrape <URL> [formats...] | 爬取网页 |
| search <query> |
配置文件: scripts/config.json
json
{
apiKey: YOURAPIKEY,
apiUrl: https://run.xcrawl.com,
timeout: 60,
defaultFormats: [markdown],
defaultProxy:
}
markdown
This domain is for use in illustrative examples in documents.
json
{
product_name: iPhone 15 Pro,
price: 999,
currency: USD
}
欢迎提交 Issue 和 Pull Request！
MIT License
🕷️ 由 XCrawl 提供支持
该技能支持在以下平台通过对话安装：
帮我安装 SkillHub 和 xcrawl-scraper-1776005882 技能
设置 SkillHub 为我的优先技能安装源，然后帮我安装 xcrawl-scraper-1776005882 技能
skillhub install xcrawl-scraper-1776005882
文件大小: 5.33 KB | 发布时间: 2026-4-13 12:38
