サイトのクロール（スクレイピング）のコンサルティング・相談・アドバイスの仕事 [自動車・バイク]
サイトのクロール（スクレイピング）のコンサルティング・相談・アドバイスに関する仕事・募集案件ページです。クラウドソーシングのランサーズで、Web・ITコンサルティングに関する最適な外注/発注先をお探しの方、副業案件・求人をお探しのフリーランスの方はまず会員登録がおすすめです。
Web・ITコンサルティングに関連した他の仕事を探す
見積もり募集の結果
募集期間
5日間
提案数
1件
当選人数
1 件
(募集人数1人)
実際の発注内容
本人確認
- 希望時間単価 2,000円~
- 実績 1
- 評価満足率 100 %
- プロジェクト完了率 100%
- 機密保持
- 本人確認
- 電話
はじめまして。Masudaと申します。 ▼スキルセット: - スクレイピングによるオープンデータ収集 - データ成形処理 - ブラウザ自動操縦によるRPA - Railsを用いたWebアプリ開発 ▼経験と能力: - ウェブ上の情報を収集し、必要なデータを効率的に抽出するスクレイピングの経験を持っています。 - 収集したデータを整形し、分析や可視化に適した形式に加工する... 続きを読む
- スキル
- Ruby
- MariaDB
- RubyOnRails
- ... もっと見る
見積もり募集の内容
- 依頼主の業種
- 自動車・バイク
- 提示した予算
- 5,000 円 ~ 10,000 円
- 依頼概要
-
【依頼内容】
リスク管理・セキュリティ対策
【希望サポート方法】
チャット相談
ビデオ通話相談
【依頼期間】
1週間
【依頼の継続性】
わからないので相談したい
【依頼の目的】
クロール（スクレイピング）をするにあたり、コンサルティングをお願い致します。
クロールをしましたら、IPアドレスのブロックを経験しました。
Torやスクレイピング用のプロキシサーバーを利用し、外部のIPアドレスからアクセスしようと思いましたが、クロールサイトを見ると９０％が国内ユーザーのサイトが多いです。
海外IPからアクセスして良いものなのか、今後ブロックされる可能性はどれくらいあるのか、海外IPを全てブロックされた場合はクロールできないのか、他に懸念すべき点、等々についてコンサルティングをお願いしたいです。
【重視する点】
クオリティ
実績評価
業務経験・知識
【補足】
コンサルして頂きたい内容
・国外からアクセスしても良いものなのか
・IPブロックは通常どの条件下で行われるのか（WEBサーバー側の処理によるもの、アナリティクスで見た時のサイト担当者側から見た時に考えられるもの、その他）
・IPブロック以外に懸念するべき点
・クロールに関するノウハウ全般
応募条件
・今までクロールした実績を出せる方（クロールしたサイトの数、クロールしたサイト）
スクレイピングの規模
・1日5000ページ位
・サイト数：100以上
・クロール頻度：毎日
その他
・3～4名の方に依頼予定です。
・当方の使用言語：Python
・1回のコンサルティングで終了となります。1時間程度、ZOOM等にてお願いしたいです。
質問などありましたら、メッセージ頂きたいです。
ご検討の程よろしくお願いいたします。
この仕事に似たWeb・ITコンサルティングの他の仕事を探す
- エリア
- 埼玉県