この募集は2020年09月24日に終了しました。
curlを用いた並列スクレイピング開発の仕事 [IT・通信・インターネット]
curlを用いた並列スクレイピング開発に関する仕事・募集案件ページです。クラウドソーシングのランサーズで、Webシステム開発・プログラミングに関する最適な外注/発注先をお探しの方、副業案件・求人をお探しのフリーランスの方はまず会員登録がおすすめです。
Webシステム開発・プログラミングに関連した他の仕事を探す
見積もり募集の結果
募集期間
5日間
提案数
3件
当選人数
1 件
(募集人数1人)
実際の発注内容
依頼の予算
10,000 円 ~
20,000 円
実際の支払い金額
10,000 円 ~
20,000 円
製作期間
5日
発注者の声
この度は迅速な対応有難うございました
またよろしくお願いします。
見積もり募集の内容
- 依頼主の業種
- IT・通信・インターネット
- 依頼の目的・背景
-
表題の件ですが、curlを用いた並列スクレイピング開発です。
言語はPHPでお願いします。
◆やりたいこと
1.取得項目は、ページタイトルとステータスコードです。（200、404、503等）
2.対象サイトは1サイトで、何万ページかあるのですが、1ページ目から50ページ目位を取得したいです。
3.2で50ページと記載しましたが、減る可能性も増える可能性もあるのでファイル内でこちらが指定できるようにお願いします。御提案いただけると幸いです。
4.並列と書きましたが、1URL毎に1秒sleepをしたいです。
1ページの取得に10から30秒ぐらいかかる場合がありますが1秒たった時点で、次のページを取得しにいきたいです。
対象サイトのURLは個別にお送り致します。
- サイトの種類
- その他
- 作業範囲
-
- バックエンド開発
- 用意してあるもの
-
- 参考URL
- 設定なし
- 希望開発言語
- ランサーに相談して決めたい
- フレームワーク
- ランサーに相談して決めたい
- 開発の継続性
- この開発の後も、継続的に依頼したいと思っております。
- 補足説明
- 設定なし