搜索与增长

Firecrawl 全站抓取

从起始链接向外爬取,批量获取站点页面内容。

分类
搜索与增长
来源仓库
Firecrawl
标签
3
  • firecrawl
  • crawl
  • site-map

快速信息

分类

搜索与增长

适合处理

站点级抓取、链接扩展和内容采集

来源仓库

Firecrawl

标签

firecrawl, crawl, site-map

为什么会用到它

Firecrawl 全站抓取适合处理站点级抓取、链接扩展和内容采集。从起始链接向外爬取,批量获取站点页面内容。

真正会用到它的场景,是你已经确定要做这类任务,但不想再从零组装流程、提示词或工具调用。这类 skill 的价值,就是直接给你一个已经整理过的执行框架,降低试错成本。

判断它是不是适合你,主要看三件事:任务类型是否对口,输出形式是否匹配,以及你现在的工具链是否能接上 Firecrawl 里的实现。这三点对上了,再点进源目录看细节。

来源链接

这些按钮会直接打开已经核实存在的 GitHub skill 目录。

GitHub

Firecrawl

直达 Firecrawl 中的 firecrawl-crawl skill 目录。

firecrawl-crawl

官方

打开 GitHub