Squadbase logo

スクレイピング・Webデータ収集

Web上の公開情報を収集してSquadbase AIでダッシュボードを作成する

スクレイピング・Webデータ収集は、公開されているWebサイトのデータを取り込んでダッシュボード化する機能です。APIや認証情報は不要です。何を集めたいかをSquadbase AIに伝えると、Web検索でデータを収集しながらダッシュボード構築まで一緒に進めます。


接続方法

データソース一覧から スクレイピング・Webデータ収集 を選択し、続ける をクリックします。Squadbase AIが何のデータを集めたいかをヒアリングします。

Squadbase AIのチャット画面

実現したい内容を自由に入力してください。特定のサイトやURLがあれば合わせて伝えると、より正確にデータを取得できます。


プロンプト例

以下は実際に使いやすい指示の例です。基本的な考え方として、Web上に公開されていて検索で辿り着けるデータであれば、AIも収集できます。一方、ログインが必要なページや社内データなど、Web上に存在しない情報をリクエストすると、AIは見つからなくても検索を続けてしまいます。指示する前に、対象のデータが実際に公開されているか確認してください。

また、スコープを絞るほど精度が上がります。「テックニュース全般」のような広い指示より、サイト名・URL・期間・取得する指標を具体的に指定した方が、意図したデータを取得しやすくなります。

競合の価格モニタリング

「[競合のURL]の料金ページに掲載されているプラン名と月額料金を取得して、変化をモニタリングしたい」

業界ニュースの動向

「TechCrunchとThe Vergeの最新の記事見出しを収集して、どのトピックが最も多く取り上げられているか可視化したい」

求人情報の一覧

「Indeed Japanのデータエンジニア求人一覧(社名・勤務地・給与レンジ)を取得して一覧化したい」

暗号資産の一覧

「CoinMarketCapで時価総額上位の暗号資産のシンボル・現在価格・時価総額を取得して一覧にしたい」