Flowise のワークフローで Web データを同期する

Firecrawl ブロックでのクロール
- Firecrawl アカウントにログインして API キーを取得し、FireCrawl API 認証情報としてブロックに追加します。
- (任意) Text Splitter を接続します。
- Type を Crawl に設定し、対象 URL 配下のページを取得します。
- クロール対象の URL を入力します。Limit、Include Paths、Exclude Paths を使用して、クロールの範囲を小さく抑えます。
- 生成されたドキュメントをワークフローで利用します。
Firecrawl ブロックでのスクレイピング
- Firecrawl アカウントにログインして API キーを取得し、FireCrawl API 認証情報としてブロックに追加します。
- (任意) Text Splitter を接続します。
- 単一ページを取得するには、Type を スクレイピング に設定します。
- スクレイピング対象のURLを入力します。
- 取得したドキュメントをワークフローで使用します。

