ヤフオクの出品データのスクレイピング・データ収集の仕事・依頼・料金 | Webシステム開発・プログラミングの仕事 【クラウドソーシング ランサーズ】[ID:2424310]

サイトマップ
For 発注者
テレビCM放映中! テレビCM放映中!
この募集は終了しました。

ヤフオクの出品データのスクレイピング・データ収集の仕事

見積もり募集の結果

募集期間

7日間

提案数

16件

閲覧数

256回

実際の発注内容

依頼の予算
20,000 円 ~ 50,000
実際の支払金額
70,000 円 ~ 80,000
製作期間
8
実際の受注者
katsuyads
katsuyads

ブロンズ 認証済み、受注実績のあるランサーです rubyでのスクレイピング、ブラウザ自動操作でできないことはありません

  • 希望時間単価 ---
  • 実績 26
  • 評価 5.0
  • プロジェクト完了率 83%
  • 機密保持
  • 本人確認
  • 電話

ウェブサービスのテスト・QAエンジニア歴8年。 品質保証の資格であるJSTQBなど資格保有。 テスト仕様書作成、テストマネジメント、E2Eテストによるテスト自動化実装も現役で実施しています。 関わったサービスはB2BのSNSサービスやC2Cサービス、マーケティングサイトの品質評価などになります。 経験したプログラミング言語は主にrubyになります。google apps script... 続きを読む

発注者の声

見積もり募集の内容

依頼の目的・背景
ヤフオクの検索結果から、入札が1以上、かつ残り時間が24時間以内のオークションのみ抽出し、指定のHTML形式にて保存するツールをお願いしたいと考えております。


■出力のHTMLの構成希望案
添付画像の通り、
商品画像、商品名(リンク付き)、残り時間、現在価格、出品者ID(リンク付き)
が表示されるようにしていただけたらと思います。
※商品画像の間のスペースをなるべく少なくしていただき、表示できる商品数を増やせたらと思います。
※該当するオークション商品情報が全表示されるイメージです。最大でもだいたい2000商品ほどを想定しています。
※可能であればですが、添付画像の通り2列になるようにできれば、ありがたいです。難しければ、大丈夫です。

■検索条件
現在は、下記条件の指定を行っております。
下記条件の他に、「オークション残り時間が24時間以内」かつ「入札件数が1以上」のオークションのみに絞り込みしたいと考えています。
※一点懸念点があり、YahooAPIでは「24時間以内のオークションのみ」や「入札件数が1以上のオークションのみ」に検索表示させることができません。技術的に可能かが定かではないため、あらかじめ確認いただけますと幸いです。


「すべて含む」にキーワード入力
・「少なくとも一つを含む」にキーワード入力
・「含めない」にキーワード入力
・「タイトルと商品説明」を指定
・購入方法は「すべて」のまま
・カテゴリは「ファッション > ブランド別」など選択。カテゴリID(auccat=23172)を入力。
・商品の色は設定なし
・現在価格を設定
・即決価格は設定なし
・出品者を設定
・商品の状態を設定
・オプションは設定なし
・目立ちアイコンは設定なし
・みんなのチャリティーは設定なし

設定例URL
<カテゴリ内検索>
https://auctions.yahoo.co.jp/search/search?va=%E3%83%90%E3%83%83%E3%82%B0&vo=%E3%83%AC%E3%82%B6%E3%83%BC+%E3%82%AD%E3%83%A3%E3%83%B3%E3%83%90%E3%82%B9&ve=%E3%83%88%E3%83%BC%E3%83%88+%E3%82%B7%E3%83%A7%E3%83%AB%E3%83%80%E3%83%BC&ngrm=2&fixed=0&auccat=23172&aucminprice=1&aucmaxprice=9999&aucmin_bidorbuy_price=&aucmax_bidorbuy_price=&l0=0&abatch=2&istatus=2&gift_icon=0&charity=&slider=0&ei=UTF-8&f_adv=1&fr=auc_adv&f=0x4


<ストア指定の場合>
https://auctions.yahoo.co.jp/seller//hiro_busousensen?va=%E5%95%86%E5%93%81%E7%8A%B6%E6%85%8B&vo=%E3%83%90%E3%83%83%E3%82%B0&ve=%E3%82%B8%E3%83%A3%E3%82%B1%E3%83%83%E3%83%88&ngrm=2&fixed=0&auccat=23000&aucminprice=1&aucmaxprice=30000&aucmin_bidorbuy_price=&aucmax_bidorbuy_price=&istatus=2&slider=0&sid=hiro_busousensen&ei=UTF-8&f_adv=1&fr=auc_adv&f=0x4#localnavi

■ソート条件
基本的には、残り時間順を希望します。

似たようなツール例があったので載せておきます。
https://www.youtube.com/watch?v=gCZA5uJuqnc

私が使用している環境はmacで、主に使用するブラウザはChromeになります。
またEXCELはインストールしておらずopenofficeを使用しております。

スクレイピングに関する知識はありませんので、どういう方法でできるかが分かりませんので、ご教授いただけましたら幸いです。
ジャンル
ECサイト
作業範囲
分からないので、相談して決めさせていただければと思います。
用意してあるもの
設定なし
参考URL
https://www.youtube.com/watch?v=gCZA5uJuqnc
希望開発言語
分からないので、相談して決めさせていただければと思います。
フレームワーク
分からないので、相談して決めさせていただければと思います。
開発の継続性
この開発の後も、継続的に依頼したいと思っております。
補足説明
私が使用している環境はmacで、主に使用するブラウザはChromeになります。補足が遅くなり申し訳ございません。