業務内容

　WEBスクレイピングって何？？っていう方はこちら＞＞
https://ja.wikipedia.org/wiki/%E3%82%A6%E3%82%A7%E3%83%96%E3%82%B9%E3%82%AF%E3%83%AC%E3%82%A4%E3%83%94%E3%83%B3%E3%82%B0

　　【　WEBスクレイピングの使い方は？？　】
　現在どのような使われ方をしているのかというと、主にECサイト（インターネットビジネス）での使用が多いのではないでしょうか。このシステムを使用すると、何がどのくらい売れているのかということ、その原因を探ることもできます。また、出品したい商品を取得してくることも、他店との競合調査も可能です。よりサービスの向上にも繋げていこうと考えている人も多くいます。
　え？？
　じゃあ、釣りの情報や住宅情報なども自分の好きなように取得してこれる？？はい。できます。
　　【　注意も必要　】
　結構便利なWEBスクレイピングですが、注意も必要です。僕も経験がありますが、コピーサイトをいとも簡単に作られます。他人の知的財産権には配慮してください。
　僕のほうでは、
・　Robot.textにWarningやCautionなどの記載があるとそのサイトは対象から除外する。
・　APIが公開されているときはそっちを使用する。
・　サーバーへ負担を生じさせるようなことはしない
・　濫用しない
　といった点に気を付けています。

【で、結局この商品は？】
こちらのシステムは、実行ファイルを自分のPCへダウンロードしてお使いいただきます。いずれも、動作設定は別途動画を準備しておりますので、そちらをご覧ください。
　なお、こちらの商品はスクレイピングを行う機能しか実装しておりません。取得したデーターから必要な情報だけをデーターベースやCSVへ出力させるためにはこちらの機能を拡張していく必要があります。また、特定のサイトを巡回させるようなクローラーを設定する場合も同じです。
その点だけ、ご注意下さい。