お客様はWebコンサルティング会社様です。複数のクライアントのWebサイトを分析管理されています。各社のアクセスログに記載されるURL情報から、どのページを巡回して流入しているか手作業で照合されていました。

しかし調査するWebサイトが急増し、限られたマンパワーではとても処理しきれない件数となっていました。

弊社では、対象となるWebサイトの「ページタイトル」はもちろんのこと、「コンテンツ見出し」も高速クローリング可能なシステムを構築しました。

この高速化にあたっては、複数のクローリングを同時実行する、多重化クローリング技術を採用しています。

しかし、サイトによってはアクセスが過度に集中すると、アタック行為とみなされ、アクセス制御されることがあります。

こうした迷惑行為とならないよう、特定のサイトには一定の時間を開けてクローリングするスケジュール機能を備えました。

本ツールの導入で、マンパワーに依存していたURLとページタイトルの照合作業が大幅に短縮され、業務の効率化・省力化に成功されています。

また、コンテンツの見出しも取得できることで、さらに詳細なアクセスログ分析が可能となったことも評価をいただいています。

お客様との機密保持契約に基づき非公開（東京都）

Webコンサルティング会社

初期構築 約1ヶ月　システム保守・運用も継続中

Java・多重化Webクローリング