在 Flowise 工作流中同步网页数据

使用 Firecrawl 封禁进行爬取
- 登录你的 Firecrawl 账户获取 API 密钥,然后将其作为 FireCrawl API 凭据添加到该封禁中。
- (可选) 连接文本分割器。
- 将 Type 设置为 Crawl,以抓取目标 URL 下的页面。
- 输入要爬取的目标 URL。使用 Limit、Include Paths 和 Exclude Paths 控制爬取规模。
- 在你的工作流中使用生成的文档。
使用 Firecrawl 封禁进行抓取
- 登录您的 Firecrawl 账户并获取 API 密钥,然后将其作为 FireCrawl API 凭据添加到封禁中。
- (可选) 连接文本分割器。
- 将 Type 设置为 Scrape 以抓取单个页面。
- 输入要抓取的目标 URL。
- 在您的工作流中使用生成的文档。

