業務内容
【サービス内容】
AWS Lambdaを活用したスクレイピングシステムの開発を提供いたします。Lambdaは「サーバレス」サービスと称され、これによりサーバの管理を必要とせずにスクレイピングを定期的に実行できます。このシステムの導入により、スクレイピングのためにパソコンを常時稼働させる必要がなくなり、また、サーバの故障によるスクレイピング不能といった状況も回避できます。このシステムで利用するサービスは、毎月の無料枠が大きいため、一般的な利用ケースではAWSの利用料金は無料となります。サービスの購入時に、スクレイピングを行うWebページのURLと収集対象データの詳細をお知らせください。また、出力や通知の形式はお客様のニーズに応じて柔軟に対応します。通知は、Line、Eメール、Slack、Discordなどが選択可能です。
開発言語はTypescriptです。
要望がございましたら詳細なコメントをソースコード中に記載致しますので、プログラミング言語の学習にもお役立て頂けます。
※ Webページによってはスクレイピングが禁止されている場合があります。利用規約をお客様自身でご確認いただき、システムの利用はお客様の責任で行ってください。
【お客様の役割】
まずは、お客様にAWSアカウントの作成と、「Administrator Access」権限を持つIAMユーザの作成をお願いいたします。その後、ユーザーの情報を我々と共有していただきます。スクレイピング環境のお引き渡し後は、セキュリティ上の理由から該当ユーザーを削除してください。
【AWS月額料金の目安】
無料
LambdaやEventBridgeなど、このシステムで使用するサービスは毎月大きな無料枠があり、一般的な利用ケースでは無料となります。
【使用サービス】
AWS Lambda(スクレイピングの実行)
Amazon EventBridge(Lambdaを定期実行)
Amazon DynamoDB(ログの保存等)
基本料金
実績・評価
10 件
満足
0
残念
出品者
30日前以上
AWS上でのシステム開発はプロフェッショナルにおまかせください
-
10 件 満足0 残念
- 本人確認
- 法人
- 東京都
【自社サービスや業務内容】
プロフィールを閲覧頂きありがとうございます。
当社ではAWSを使った開発を専門に行っております。
弊社には、AWS Professional資格(Solution Architect ProfessionalおよびDevOps Engineer professional)を持つメンバーが複数在籍しておりますので、確かなAWSスキルでの開発が可能です。
常にAWSの設定をテンプレート化するツール(AWS CDK/CloudFormation)を使って開発を行っているため、一度作成したことのあるシステムは素早く開発してお引き渡しをすることができます。
より詳しい情報は「ブルームブロック合同会社」で検索頂き、弊社ホームページで確認頂けますので、ご興味がありましたら是非覗いてみてください。
【お客様へのお願い】
副業として参加しているエンジニアもいるため、コミュニケーション方法はランサーズのメッセージを利用して行うことを基本とさせてください。
電話会議が必須の場合も、追加費用を頂くことで対応いたしますので、見積もりの際にその旨を申し付けください。
【開発実績】
代表的な開発実績を紹介いたします。
1. 月額0円から利用できるスクレイピングシステム
2. Microsoft Sharepoint/Teams/Outlookの情報を使って回答を行うAIチャットボット(GPT-3.5利用)
3. CloudFront + WAFを導入した高速でセキュリティの高いコーポレートサイト(WordPress利用)
4. ブロックチェーン(Ethereum)上の情報を取得し、ダッシュボード化するシステム
注文時のお願い
通知が必要であれば通知先に合わせて必要な情報(例えば、Lineの場合アクセストークン)もお伝えください。
