「最適クローラーの仕組み構築」の仕事

見積もり募集の結果

見積もり募集の内容

依頼の目的・背景

【目的】
今回の募集は「最適クローラーの仕組み構築」です。

　こちらが以前検討して実現困難だったのがサーバーレスネットワークの利用です。サーバーレスの仕組みとして考えていた「AWS lamdba」ベースで検証したところアクセス不安定・拒否される事象が起きた為、今回サーバーレスにこだわらず広く「ウェブサイトへ最少の負担で情報を収集・利用する仕組み」を作るためすべての仕組みを募集致します。
＊無論サーバーレスであっても問題なく情報収集できるのであれば可です。

まずその仕組み概念をプレゼンいただき、一次審査とします。
二次審査の段階で、必要機能の詳細(＊出来るだけ細かくお伝え致します)
を提示致しますので見積り・製作・検査工程図をご提出願います。

＜今回の主な依頼内容の概要＞
・クローラーをつかって情報収集したい
・収集対象となるウェブサイトは現時点で約30サイト
・ウェブ API も情報の収集対象としたい
・収集対象となるウェブサイトは継続的に増加していく予定
・収集対象となる情報は百万、千万のオーダーになる
・情報の収集は継続的に繰り返いたい
・複数台のクローラーを並行して動かしたい
・任意のクローラーがアクセス禁止を食らってしまったら、
　そのクローラーはしばらくの間そのサイトを訪れないようにして
　別のクローラーに切り替わるようにする
・ランニングコストはできるだけ下げたい
・どのクローラーがどのウェブサイトのどの情報を収集しているのかなどのモニタリングも出来るようにしたい
・収集したデータを閲覧するための管理画面がほしい
・クローラーの数や収集頻度などは管理画面上で設定したい。

【今後の展開】
　派生システムを別料金で手配致します。
　メンテナンス・能力増強も含む。ボリュームを今後増やしますがそこは
　お互いの都合に合わせて応相談。
【費用】
　初期は資金がない為、利益という面では今後派生プログラムの依頼を
　出しますので長い目で見てください。
【募集期間】
　当方要望に適う方が現れるまで長く募集致します。
製作期間も出来るだけ考慮します。
【重視する点】
1.　操作が簡単であること。
2.　当方に知識が無い点をご理解頂き、その上でご報告等を行える方。
3.　ソフトバージョンアップ等、様々な変化があった際に対応して頂ける方。 　　　
4. バグ等無く安心して使えることが最重要です（＊金額設定をするため）
　　＊バグ・不具合等の対応は、納品後１年は無償で修正をお願いします。
5.　本依頼に関するすべての知的財産権を譲渡出来る方

開発の進捗状況

ランサーに相談して決めたい

開発の継続性

この開発の後も、継続的に依頼したいと思っております。

重視する点

予算、クオリティ、柔軟な対応、こまめな連絡、業務経験・知識

希望開発言語

ランサーに相談して決めたい

フレームワーク

ランサーに相談して決めたい

補足説明

設定なし

キャンセル理由：依頼内容を修正するため

提案者からの意見を聞き再度依頼をやり直すため