suga

ブロンズランク

suga

  • Webエンジニア
  • 個人

他社で断られるような高度なサイト構造&セキュリティへのwebクローリング・スクレイピングはご相談ください

  • 希望時間単価 未入力
  • 実績 5
  • 評価 4.8
  • 完了率 100 %

もっと読む

はじめまして。菅原と申します。
上場IT企業の部長職を経てフリーランスになりました。
ランサーズは始めたばかりですが宜しくお願いします。
※クラウドワークスでは2018年7月のエンジニア部門で契約ランキング7位に選ばれました。

得意なことは下記です。

------------------------------------------------------

面倒な作業はすべて自動化しませんか?

他社で断られるような高度なサイト構造&セキュリティへのクローリング・スクレイピング・監視・自動操作代行が得意です。よくある障壁であるIP分散、 js・iframe生成、 画像認証、reCaptha、座標操作、OCR等を同時に対策するパターンも対応可能です。

【費用】

お見積もり方法は対象サイトの構造、セキュリティ具合から判断し、大まかに下記の3分類です。

・通常のサイト構造の場合
※クローラーが走る経路にjavascriptによるコンテンツ生成が行われていない

・ヘッドレスブラウザでしか対処できないサイトの場合
※取得項目がajaxで生成される、SPA(シングルページアプリケーション)等

・ヘッドレスブラウザでも対処できないサイトの場合
※画像または文字認証先のスクレイピング等


【納品データの形式】

CSV出力、DBへ記録等、指定の形式をお申し付けください。

【開発環境について】

Linuxを中心にOSからアプリケーション、データベースまでOSSの技術を使うので多くの要件を満たすシステムを低コストで構築できます。

・OS
Linux(RedHat、CentOS等)

・ミドルウェア
VMware、Apache、Nginx、Hadoop等

・データベース
MySQL、PostgerSQL、Realtime Database、Firestore

・プログラミング言語
Go、PHP、 Ruby、Javascript、 HTML,、CSS、 SQL、 SPARQL、 Android/Java、 iOS/Swift等

・フレームワーク
Codeigniter、Laravel、CakePHP、Ruby on Rails、Vue、React等

・その他
WordPress、Git、JSON、Web API、Facebook API等


【納品後のサポートについて】

納品後に起こるサイトの構造変更に伴う調整もサポート致します。
※バグでない場合は別途料金がかかります。


以上です。

「このサイトは自動操作ができるのか?」「スクレイピングできる?」等のご相談から技術的なご質問までどんな内容でも構いません。

お気軽にメッセージを頂ければ幸いです。

実績・評価

もっと見る

経歴・資格

(株)BANDAI ハイパーヨーヨーのイメージキャラクター
Webクローラーの開発・運用を行なっています。独自開発したWEBブラウザ自動操作エンジンにより、javascriptによるコンテンツ生成、画像認証先でもクロールし続けるWEBクローラを開発しています。IP制御も対応できます。もしも他社で断られてしまった高度なサイト構造&セキュリティへのwebクローリング・スクレイピング・監視・自動操作のご要望がございましたらご相談ください。
2010年 4月~2012年 4月

ランサーズチェック

作業をするパソコンはウイルス対策が行われていますか?
はい
作業をするパソコンは共有ではないか、パスワードが設定されていますか?
はい
メールの確認頻度は?
毎日
一日に作業ができる時間(1週間平均)はどれくらいありますか?
6~8時間
著作権などの知的財産権について理解し、提案や仕事内容に権利侵犯がないか注意していますか?
はい
個人情報保護について理解していますか?
はい
業務委託契約や秘密保持契約などの契約を結ぶことができますか?
はい
プロジェクト開始後など、必要であれば情報を交換し、電話などでも連絡できますか?
できる
見積書や請求書などが必要であれば、作成できますか?
はい
ランサーズの利用規約や各種ルールを理解していますか?
はい

30代前半男性 埼玉県

最終ログイン 2019年4月2日

本人確認
機密保持確認
電話確認
希望時間単価
未入力
状況
案件によります
詳細情報

実績サマリー

報酬額
非公開
受注数
5
作業数
0
プロジェクト完了率
100%
タスク承認率
---%

ユーザー情報

登録日
2014年 8月 24日
ユーザー名
SugawaraMisaki

このランサーに似た他のランサーを探す

このランサーに関連した他の仕事を探す