Webサイトクローリングエージェント

開発概要

指定Webサイトを巡回し、必要情報を抽出・構造化して蓄積するクローリングエージェントを開発しました。

開発背景

競合/市場情報の収集を人手で行っており、更新の見落としや収集工数が課題でした。定点観測を自動化し、意思決定速度を向上させる目的で開発しました。

開発期間

２週間

ポイント

• Dify設計（情報収集AI／自動巡回ワークフロー）
• Webクローリング／スクレイピング（定点観測・更新検知）
• 情報抽出・要約（記事収集／比較／タグ付け）
• データ蓄積（スプレッドシート／DB／Notion連携）