PythonによるWebスクレイピング（商品データ取得） の仕事 [卸売・小売]
PythonによるWebスクレイピング（商品データ取得） に関する仕事・募集案件ページです。クラウドソーシングのランサーズで、Webシステム開発・プログラミングに関する最適な外注/発注先をお探しの方、副業案件・求人をお探しのフリーランスの方はまず会員登録がおすすめです。
Webシステム開発・プログラミングに関連した他の仕事を探す
見積もり募集の結果
募集期間
7日間
提案数
15件
当選人数
1 件
(募集人数1人)
実際の発注内容
スクレイピングや自動化ツール作成が得意です/依頼者様からのご質問・ご連絡には迅速に対応いたします!!
- 希望時間単価 1,500円~
- 実績 36
- 評価満足率 100 %
- プロジェクト完了率 90%
- 機密保持
- 本人確認
- 電話
プロフィールをご覧いただき、ありがとうございます。 以下に経歴などを記載しておりますので、ご覧いただければ幸いです。 【経歴】 東京工業大学大学院を修了後、自動車関連メーカーでEV関係の設計開発に従事し、 現在はフリーランスでお仕事させていただいております。 【可能な業務内容と実績】 Pythonを用いた自動化ツール作成が得意であり、主な業務内容と実績は以下となります。 ... 続きを読む
見積もり募集の内容
- 依頼主の業種
- 卸売・小売
- 依頼の目的・背景
-
御覧いただきありがとうございます。
弊社はAMAZONや楽天等、ネット通販を主とした会社となります。
今回は、仕入れ先問屋様の各ウェブサイトのスクレイピングをしていただける方を募集いたします。
■業務内容---------------------------------------------------
指定問屋のWebサイトからX-Server上でPythonを定期実行し、
1問屋あたり3,000商品から50,000商品のデータを収集して
CSVもしくはエクセル形式で出力、最終的にはDropboxに自動アップロード
ご依頼したい部分は ○○.py を実行すると
商品名、商品画像URL、定価、卸値、在庫数、発注単位など必要な情報を収集し、
CSVもしくはエクセルにて出力するまでとなります。
（サーバーへのセットアップは弊社にて行いますので、実行に必要なプログラム群を納品頂きます。）
【件数】
・1問屋あたり3,000商品から50,000商品
・現在の問屋数は約40社。月4～5件ペースで追加中
＊サイトにもよりますが2日でプログラム作成、
1日で修正、完了を目安目標にしていただいております。
現在複数名のランサー様が活動中でして、
専用のチャットワークグループも設置しておりますので
チーム内で質問等のやり取りがスムーズに行える環境となっております。
将来的に長期継続してご依頼出来る方を探しております。
■勤務時間などの詳細---------------------------------------------
まずは難易度の低いサイト1件のスクレイピングをテストとしてお願いさせて頂く予定です。
その後継続可否を判断させていただきます。
※継続不可となった場合も報酬はお支払いいたします。
・勤務時間
特に指定はありませんが、終日勤務出来る方を優遇します。
応募時に勤務可能日数ならびに時間をご提示ください。
・単価
弊社の業務形態は1サイトあたりの単価でなく、時給で作業して頂いております。
時間単価目安：1,200円～1,500円
※応募時に希望時間単価をご提示ください。
※勤務中は時間確認ソフトにて勤務時間の計測をしていただきます。
■応募条件---------------------------------------------
・目標とスピード感を持ち、まずは自身で問題解決に努められる方
・作業効率を優先している方（複数PCもしくは複数モニターやビッグモニターをお持ちの方）
応募内容を拝見し、面談に進めさせて頂く場合のみメッセージをお送りさせて頂きます。
スクレイピングの実行環境についての詳細は下記をご参照ください。
＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝
■スクレイピングの実行環境について■
・Python 3.9
・ライブラリは主に Selenium (Version 3.141.0)
・ブラウザ 作成・テスト環境はGoogle Chrome、サーバー上はPhantomJSで実行中
・requirements.txtの添付
・可能な限り3時間以内（プログラム実行時間）で処理が終わるように。
・状況に応じてデータベース（SQLite, MySQLなど）使用
・適所に logging.info() を実行し、実行後にログファイルの出力もお願いします。例えば、個別商品URLやエラー発生時のlog収集として。
・要素表示、要素クリックまでの待機は、 基本的にtime.sleep(2)ではなく、WebDriverWait()でお願いします。（Seleniumの場合）
・HTML要素の指定は、なるべく XPath ではなく、 ID や Name, Class などサイト改修時も適応しやすいよう配慮お願いします。
・作成したプログラムは、当方に提出頂きます。
・当方にてサーバー環境で実行し、問題なく出力されているか確認します。
＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝＝
以上、ご応募お待ちしております。
- サイトの種類
- ECサイト
- 作業範囲
- ランサーに相談して決めたい
- 用意してあるもの
-
- サーバー
- ドメイン
- 参考URL
- 設定なし
- 希望開発言語
- ランサーに相談して決めたい
- フレームワーク
- ランサーに相談して決めたい
- 開発の継続性
- ランサーに相談して決めたい
- 補足説明
- 設定なし