研究检索需要联网clawhub未标认证来源可访问clear审计通过

web-crawl（网络抓取）

Agent Skill

web-crawl 用于处理浏览器自动化、网页检查和页面信息提取，适合在 OpenClaw 中需要让 Agent 打开页面、读取网页或验证前端流程时使用。可结合来源仓库、安装命令和原始 README 继续核验具体用法。安装前建议确认权限范围、维护状态，以及是否会触发联网、命令执行或文件读写。

总安装

7,313

周安装

293

GitHub Stars

公开资料未说明

下载量

2,367

OpenClaw

安装说明

本站只整理中文说明和来源信息，不托管安装包，也不代用户安装。

GitHub

来源数

许可证

MIT-0

最后核验

2026-05-01

来源状态

来源可访问

安装方式

通过对话安装

复制提示词发给支持本地命令或 Skills 的 AI 助手，先确认命令和权限，再让它执行。

请帮我安装这个 Agent Skill：web-crawl（网络抓取）
来源仓库：https://github.com/nowhitestar/web-crawl
安装命令：
openclaw skills install web-crawl
安装前请先检查当前环境是否支持对应 CLI，并向我确认将要执行的命令、安装目录、联网范围和文件读写权限；确认后再执行。

命令行安装

复制命令到本机终端执行。该命令会通过 OpenClaw 从第三方来源获取 Skill；本站只展示命令，不托管安装包，也不自动执行。

ClawHubOpenClaw

openclaw skills install web-crawl

简介

先进的网络爬行和内容提取工具，支持多种提取模式。

适用于网页数据整理、内容归档和信息筛选任务。
具备灵活的解析机制，可适应不同网站结构。
安装命令：openclaw skills install web-crawl；注意遵守目标网站的 robots.txt 规则。
web-crawl 属于研究检索类 Skill，可作为该场景下的辅助能力补充。

SKILL.md

name: web-crawl
version: 1.0.0
description: Advanced web crawling and content extraction tool with multiple extraction modes
activation
keywords: ["crawl", "抓取", "提取网页", "研究", "深度研究", "research", "analyze website"]
tags: ["web", "research", "crawling"]

Web Crawl Skill

Advanced web content extraction with multiple modes and intelligent content detection.

When to Use

Use this skill when:

User asks to "研究" / "深度研究" a topic
User wants to "抓取" / "提取" content from websites
Need to analyze multiple web pages systematically
Current web_fetch output is insufficient

Extraction Modes

Mode	Use Case
`text`	Clean plain text
`markdown`	Formatted Markdown (recommended)
`links`	Extract all links
`structured`	JSON metadata + content
`full`	Markdown + links combined

Tools Available

web_crawl - Extract content from a single URL
parallel_crawl - Extract from multiple URLs in parallel
research_topic - Multi-step research with search + crawl

Example Usage

User: "研究一下 OpenManus-Max 项目"
→ Use research_topic tool with query="OpenManus-Max GitHub features"

适合场景

OpenClaw 用户查找和安装 Skill 时

用户想查找某类 Agent Skill 时

需要根据任务场景推荐可安装能力包时

需要对比不同来源的安装命令和来源信息时

能力概览

能力 1

按任务关键词查找相关 Skills

能力 2

展示可复制的安装命令

能力 3

保留来源站点、仓库和原始说明，方便继续核验

能力 4

补充不同宿主或平台的使用分布数据

能力 5

展示第三方安全扫描或审计结果

安装后应在对应宿主中按原始 README 的触发条件使用；具体调用方式请以来源页面和 README 为准。

平台分布

OpenClaw

93.24%

按下载量换算2,207

安全审计

VirusTotal

通过

ClawScan

通过

Static analysis

通过

权限和风险

需要联网

该 Skill 可能需要联网访问来源站点、仓库或外部 API；具体网络访问范围需要结合源码和 README 复核。

安装前确认

本站仅展示第三方公开信息，不托管安装包，不提供自动安装或运行环境。安装前应自行审查源码、依赖和命令行为。当前只有一个来源，正式发布前建议补源仓库或其他目录站核验。

来源信息

GitHub 仓库

github.com

/nowhitestar/web-crawl

SKILL.md 来源

clawhub.ai

/nowhitestar/web-crawl

继续浏览同类 Skills

更多研究检索 Skills（73,675）返回 Skills 目录

上一个 Skill

web-content-fetcher（网页内容获取器）

用于辅助文档、README、Markdown、说明文和内容稿件的整理与改写。它适合让 Agent 提炼结构、补齐章节、统一术语、检查链接或把零散材料整理成可读文档。使用时应保留项目已有事实、命令和路径，不要把未确认的信息写成确定结论；涉及对外文案时，还需要控制语气，避免过度营销或夸大能力。

下一个 Skill

web-crawl（网络抓取）

web-crawl 用于处理浏览器自动化、网页检查和页面信息提取，适合在 Local Agent 中需要让 Agent 打开页面、读取网页或验证前端流程时使用。可结合来源仓库、安装命令和原始 README 继续核验具体用法。安装前建议确认权限范围、维护状态，以及是否会触发联网、命令执行或文件读写。