スクレイピング
代行サービス

ABOUT

スクレイピング代行サービスとは?

スクレイピング代行サービスは、ツールでは取得しきれなかったサイトやSNSなど
大量のデータ収集を代行するサービスです。
Webサイト上にあるテキストデータだけでなく、画像やPDFの収集も可能です。

スクレイピング代行とは
FEATURE

サービスの特徴

  • スピード・低価格

    お急ぎのデータ収集でも早急に対応致します。 最低料金は5万円から。ご予算に合わせて取得するデータが決まってから、 最短1営業日での納品可能です。

  • 法律面も安心

    スクレイピングを実装するには「偽計業務妨害罪」「著作権法」などを考慮する必要があります。 PigDataスクレイピング代行はIT弁護士による監修を受けており、スクレイピングに関する法律に遵守したスクレイピングを行っており、外注しても法律的に問題となることはありません。

  • 提案力

    企業に合わせたデータ活用の方向性を、弊社のデータサイエンティストがヒアリング、ご提案致します。お客様は、サイトURLやSNS、取得したい情報をお伝えいただくだけになります。

  • 既存システムとの親和性

    現在何かシステムを運用している企業様でも、既存システムとの親和性を考慮し、データ収集基盤を構築することも可能です。データ収集時のアラート通知やサイト更新など、ご要望に合わせた機能も構築します。

REASON

PigDataが選ばれる理由

  • 導入件数500件突破

    業種・業界問わず多数のスクレイピング実績があるため、お客様のご要望に合わせてご提案いたします。

  • 口コミ評価4.5!

    ITreviewの口コミ平均4.5の評価を頂きました。精度の高いスクレイピングの技術力や対応の速さで高い満足度を得られています。

  • IT弁護士監修

    IT弁護士の意見を参考に法律を遵守しながらスクレイピング代行サービスを行っているため、安心してご利用いただけます。

ADVANTAGE

スクレイピング代行でできること

  • あらゆるサイトに対応

    ログインが必要なページやSNS等も含め、Web上の全てのサイトに対応し、収集します。

  • ヒューマンアクション設定

    人間が行う検索、スクロール、チェックボックス選択などのヒューマンアクション設定も行うことができます。

  • 24時間監視
    +アラート機能

    対象のWebページを24時間監視。また、特定キーワードや特定の値を超えたときは、お使いのグループウエアやメールで直ぐに通知します。

  • 様々なデータタイプで提供可能

    収集したデータを、csv・excel・Json・XML等貴社指定フォーマットに整形し、すぐに使える形にしてご提供が可能です。

  • 自動運用

    必要なデータ収集設定はすべて弊社で行い、弊社のクラウドで自動運用いたします。

DETAIL

詳細機能について

  • 特殊なWebサイトも収集可能

    JavaScriptレンダリング、動的Webサイトスクレイピング、ソーシャルメディアサイト、英語・中国語等の多言語サイト、ログイン必要サイト 、PC専用サイト、スマホ専用サイトの収集が可能です。

  • 自動IPローテーション

    さまざまなIPを転換することでターゲットWebサイトで追跡およびブロックされる可能性を最小限に抑えながら、スクレイピングが実行できます。弊社ではネットワークの安全性と倫理性を確保し行っています。

  • スマートフォンアプリスクレイピング

    これまでのWebクローラーでは収集することができなかったスマホアプリ特有のコンテンツ収集ニーズに対応することが可能です。

  • BERT

    自然言語処理において最先端の手法の一つであるBEAT(Bridging Embeddings for Attributed Text)により、少ない教師データ量で高品質な機械学習モデルを大量に作成できます。またファインチューニングによってお客様の要望に応じた形に近づけることが可能です。

  • 画像収集・OCR・データラベリング

    サイト内の個々の画像やページ全体のスクショ画像を取得することができます。また、収集した画像内の文字のテキストデータ化・スクレイピングしながら画像に対してラベル付けすることも可能です。

  • 非定型の情報のスクレイピング

    従来のスクレイピングは、特定の構造を持つデータ、例えばテーブルやリストのような形式であることが前提となっていましたが、PigDataでは自動的に非定型のデータを識別し、適切な方法で抽出することが可能です。

  • データビジュアライゼーション

    収集したデータはその後活用しやすいよう、お客様の業務に合わせた形で可視化することも可能です。

  • 探索型クローリング

    この機能により、収集対象のWebサイトだけでなく、サイト内のリンクを自動的に辿って情報を収集することができます。また、検索エンジンの検索結果(例えばGoogleなど)を対象として収集することも可能です。

  • 柔軟な検索条件設定

    この機能により、WebサイトやWebページから収集した膨大なデータから、特定のキーワードに一致する情報のみを抽出することができます。そのため、お客様が望む情報だけをスクレイピングして、すぐに利用することができます。

  • スケジューリング

    月、週、曜日、日付、時間単位等お客様のニーズに合わせて柔軟に設定が可能です。

COMPARISON

スクレイピングサービス比較

PigData A社 B社
価格 5万円〜 5万円〜 20万円〜
既存システムとの親和性
安全性
画像
対応出力データ csv・excel・Json・XML等 csv・json・txtのみ
納品 最短1営業日 最短3営業日 最短1営業日
提案 ヒアリング、相談ベースでの提案 決まったサービスから提案 決まったサービスから提案
PRICE

料金

単発:10万円

継続:5万円/月

※補助金の活用について:ものづくり補助金などの補助金を活用可能な場合がございます。予算負担を減らす有効な手段としてご検討ください。

CASE

スクレイピング代行サービスの導入事例

  • 事例1新規顧客開拓の営業リストを作成

    お客様の抱える課題
    • 営業リストの作成を自動で行いたい。
    • 作成した営業リストの情報が古く、商談につながらない。
    実施事項
    • 最近オープンした店舗情報をリスト化
    • 東京都にある不動産業界の最新企業情報をリスト化

    取得したい企業情報が一覧できるWebサイトから営業リストに必要な情報を自動で取得できました。

    社名や電話番号だけではなく、従業員数や資本金、取引先企業など営業判断材料となるデータを取得し営業活動にスムーズにつなげることができました。

  • 事例2競合や自社のサイト情報を監視

    お客様の抱える課題
    • 自社のマーケティング部門を強めたい。
    • Webフォームの不具合等サイトの不具合が原因の売り上げ低下を防ぎたい。
    実施事項
    • 競合のニュースリリースを収集
    • 競合のキャンペーン情報を収集し即時通知

    新たなマーケティング施策の打ち出しや競合の調査に割いていた時間が短縮されました。

    • 自社サイトでエラーが起きた際にアラート送信

    常に監視していなくとも、エラー時に即対応ができるようになり、その他の業務に安心して取り組むことができました。

  • 事例3新規事業の立ち上げ・プロダクト開発

    お客様の抱える課題
    • Web上のデータを活用した新規事業を立ち上げたい
    • 既存サービスに付加価値を加える手段としてWebデータを活用したい
    実施事項
    • 例1) 旅行予約サイト上に対象観光地の関連ニュースセクションを追加
    • 例2) 口コミ管理プラットフォームの立ち上げに際したポータルサイトからのデータ収集

CLIENTS主要取引先企業一覧

FLOW

導入フロー

  1. URLのご送付

  2. ヒアリング

  3. サイトの調査

  4. 作業開始

  5. 納品

FAQ

よくある質問

  • 初期費用がかかるのでは?

    サーバ構築やサイトの調査費用が掛かる場合がございます。

  • データを取得できないWebサイトもあるのでは?

    Webサイト自体の構造に問題がなければ、ほとんどの場合取得が可能です。
    まずは指定のWebサイトから、スクレイピング(クローリング)できるかどうか調査させて頂き、可能な限りご対応致します。

  • 海外のサイトは収集可能ですか?

    海外のサイトは収集可能です。また弊社には英語対応可能なエンジニアもおりますので、英語でのお打ち合わせや業務依頼も対応可能です。

  • 個人情報がデータ収集するサイトに含まれている場合、どのように対処しますか?

    明示的に個人情報となるものの収集は行いません。 仮に個人情報と判断されるデータが収集された場合でも、弊社スクレイピングポリシーによって、それらが個人情報とみなされるかたちでデータベースに保管しないため、収集されたデータを個人情報として利用されることはありません。

  • 納品はどんな形でされますか?

    csv・excel・Json・XML等貴社指定フォーマットに整形し、すぐに使える形にしてご提供が可能です。 受け渡し方法は、メール、ダッシュボード形式、ダウンロードリンクを準備する等状況に合わせて行えます。参考:【状況別】スクレイピングしたデータの納品方法を大公開

  • スクレイピングの機能を社内システムやサービスに組み込みたいので、必要なコードだけほしいのですが・・・

    基本的にコードだけの納品は行っておりません。サービスに組み込みたい場合は、APIでのサービス提供することが可能です。

  • 企業実績はどのくらいありますか?

    2015年よりSMSデータテックの一部署としてスクレイピング事業を行っており、2019年に株式会社インディゴデータとして分社化しました。まだ企業としての歴史は浅いものの、スクレイピングによるWebデータの収集・分析の案件数は累計で500件を超えております。(2023年4月)

CONTACT

お問い合わせ

DOWNLOAD

お役立ち資料ダウンロード

  • 【導入事例付き】
    スクレイピング代行サービス資料

    PigDataのスクレイピング代行サービスについて詳しく分かる資料です。サービスの概要から料金、実際の事例などを分かりやすくまとめてご紹介します。

    資料ダウンロード
  • 【業界別で分かる】
    WEBスクレイピング事例100選

    スクレイピングはどのようなことに活用されているのか、具体的な事例を分かりやすくまとめた資料です。実際に活用している業界やその目的をご紹介します。

    資料ダウンロード
  • 【IT専門弁護士監修】
    スクレイピングの法律ガイド

    スクレイピングは違法なのか?安全にスクレイピングをする実施例は?今スクレイピングをしている企業様、これから始めたい企業様必見です。

    資料ダウンロード