Langflow のワークフローでウェブデータを同期する
Firecrawl ブロックでのスクレイピング
- Firecrawl アカウントにログインして API キーを取得し、ブロックに入力するか、ワークフローの別の箇所から渡します。
- (任意) Text Splitter を接続します。
- 単一ページを取得するためのスクレイピングモードを選択します。
- スクレイピング対象の URL を入力するか、ワークフローの別の箇所から渡します。
- 取得したい Web サイトやデータに応じて、出力フォーマットやメインコンテンツのみを返すかどうかなどのスクレイピングのオプションを設定します。これらはワークフローの別の箇所から渡すこともできます。
- データをワークフローで活用します。