データクレンジングの依頼・発注・代行

ある業界の会社の情報をリスト化したい、我が社の商品の口コミを一覧化しマーケティングに役立てたい、このサイトの文献情報は研究に役立つのでリスト化したいなど、Web上にあるリストをデータ化したい要望にお応えします。

詳細ページを開きデータ化していく、確実な方法です。しかし、相応の工数が必要となります。既存のツール(Webクローラー、スクレイピングツール等)を活用して、賢くデータを収集できないだろうか？そんな悩みに、お答えいたします。どうぞ、この機会にご検討下さい！！

■具体的な要望
・他社情報の取得・調査
・会社情報・施設情報の抽出
・商品リスト・口コミ情報などをリスト化
・新着情報・ニュース等のDB化
・セールがついているデータのみをリスト化したい

■収集の基本条件
・対象URL：1件
・出力フォーマット：Excel(*.xlsx)ファイル、ACCESSデータベース形式、その他相談可
・画像収集：オプションとなります

▶ベーシック
・収集項目：10件まで
・収集件数：1000件程度

▶スタンダード
・収集項目：20件まで
・収集件数：5000件程度

▶プレミアム
・収集項目：40件まで
・収集件数：10000件程度

■収集できないサイト
スクレイピングツールを使って情報を収集します。Webサイトによっては、データ抽出が許可されていサイトもございます。また、その他技術的な問題のため、抽出ができない可能性もございます。依頼時に、確認させていただけますと幸いです。

・ログイン認証が必要
・スクレイピング技術を禁止している
・HTML構造に明確なルールがない
・HTML構造に不備がある

■その他
複雑な条件の場合など、別途メッセージ等でご相談ください。無料でお見積りいたします。

データの整理や分析に工数がかかっていませんか？
膨大で煩雑なデータの整理をお手伝いします。
また、データを分析し、目的に合致したグラフを作成いたします。

分析対象例：
・分析化学機器や免疫測定の実験データの集計や示唆出し
・健康診断やレセプトデータの集計
・アンケート結果の集計

＜納品までの流れ＞

1. ご相談
   まずは、次の項目を教えてください。
   ・データの概要
   　全体を見せていただくことが望ましいですが、代表的な部分を一部でもお見せください。ご相談のみの場合でも、秘密は厳守いたします。
   ・データから知りたいこと
   　どのような分析を行ってほしいか教えてください。不明瞭な場合でも、こちらからご提案可能です。
   ・納品のイメージ
   　どのようなグラフがほしいか、報告がほしいのか教えてください。不明瞭な場合でも、こちらからご提案可能です。

2. 無料調査
   このパッケージで対応可能かどうか、対応可能な場合の費用はいくらになるか、無料で調査し、ご報告いたします。

3. お見積り
   このパッケージで可能な場合は、必要な作業量から、工数と料金を算出いたします。
   お見積りの段階では、必要となる時間数と単価をお示します。基本単価は3,000円／時間です。
   ※ 途中、想定を超えた作業量が発生する場合は事前にご説明・ご相談の上、工数の修正をお願いいたします。

4. 発注
   お見積り内容・条件を承諾・発注していただいた後、作業を実施します。

5. 成果品
   作成したTableauダッシュボードまたはpdfをお納めします。

6. 納品完了
   成果品の内容をご確認していただき、最終納品完了となります。

データの整理や分析に工数がかかっていませんか？
膨大で煩雑なデータの整理をお手伝いします。
また、データを分析し、目的に合致したグラフを作成いたします。

分析対象例：
・分析化学機器や免疫測定の実験データの集計や示唆出し
・健康診断やレセプトデータの集計
・アンケート結果の集計

＜納品までの流れ＞

1. ご相談
   まずは、次の項目を教えてください。
   ・データの概要
   　全体を見せていただくことが望ましいですが、代表的な部分を一部でもお見せください。ご相談のみの場合でも、秘密は厳守いたします。
   ・データから知りたいこと
   　どのような分析を行ってほしいか教えてください。不明瞭な場合でも、こちらからご提案可能です。
   ・納品のイメージ
   　どのようなグラフがほしいか、報告がほしいのか教えてください。不明瞭な場合でも、こちらからご提案可能です。

2. 無料調査
   このパッケージで対応可能かどうか、対応可能な場合の費用はいくらになるか、無料で調査し、ご報告いたします。

3. お見積り
   このパッケージで可能な場合は、必要な作業量から、工数と料金を算出いたします。
   お見積りの段階では、必要となる時間数と単価をお示します。基本単価は3,000円／時間です。
   ※ 途中、想定を超えた作業量が発生する場合は事前にご説明・ご相談の上、工数の修正をお願いいたします。

4. 発注
   お見積り内容・条件を承諾・発注していただいた後、作業を実施します。

5. 成果品
   集計したデータセットやグラフを、エクセルやGoogle Spreadsheetなどの形式でお納めします。

6. 納品完了
   成果品の内容をご確認していただき、最終納品完了となります。

WEBスクレイピング技術を使ってのデータ収集、データ取得後のデータのクレンジング（クリーニング）まで行います。

データの出力はエクセル形式、Googleスプレッド形式、CSV形式に対応します。

企画営業の経験と簿記の知識を生かして、経営判断に必要な情報を取りまとめるお手伝いをします。

漠然としたイメージをご共有いただけますと、具体的なご提案をいたします。

英語での打ち合わせ、英文での仕様書にも対応可能です。まずはお問い合わせいただければと思います。

納期についてはできるだけご要望に沿えるよう配慮します。

I collect data using web scraping technology and even perform data cleansing (cleaning) after data acquisition.

Data output is available in Excel, Google Spreadsheets and CSV formats.

I will assist you in compiling the information necessary for business decisions based on my experience in planning and sales and my knowledge of bookkeeping.

If you share a vague image with me, I can make a concrete proposal.

I can also handle meetings in English and specifications in English. Please contact me for more information.

I will do my best to meet your requests for delivery date.

Thank you

【顧客データがもっと見やすくなれば、売り上げ予測できるかもしれないのに…】

あなたのお仕事において、欠損値や半角/全角スペース、日付の表記法などが入力者によってバラバラで、分析に使えそうにないと判断されているようなデータはありませんか？

使えないと一蹴して削除する前に、そのデータ、私に綺麗にさせてくれませんか？

機械学習全盛のこの時代、Excelやcsvのデータは顧客の購買予測などに応用できる、いわば宝の山です。そのデータがもし見やすく、またPCによる分析のしやすい形となれば、未開拓の商機を見いだすことができるかもしれません！

私は東大で心理学を専攻し、実験データの扱いや統計解析手法に慣れ親しみました。さらに旧帝大医学部に再入学し、独学でデータ分析手法を学ぶほか、機械学習を医学研究に応用する研究室での研究従事、さらには統計検定準1級を最優秀成績賞で取得しました。
実務ではデータ分析企業でのインターンにて自動車部品の性能データ分析、さらに大学医学部での医学研究データ分析を経験。貢献が認められ医学部論文への氏名掲載に至りました。

経験例：
データクレンジング、分散分析、相関係数の算出、ロジスティック回帰分析、重回帰分析、t検定、カイ二乗検定、赤池情報量基準の算出、scikit-learn ならびにxgboostによる機械学習モデル、ノンパラメトリック検定など

ご購入前にDMにて簡単に依頼内容をご相談ください。差し支えなければデータをお送りいただけますと幸いです。

ぜひ私におまかせください！

▼業務データの管理に課題を抱えるクライアント様へ

ご覧いただきありがとうございます。
お持ちのデータをクレンジングしExcelリストに統合する作業のパッケージとなります。

このサービスは、バラバラの形式で扱われているデータを効率よく統一・標準化し、
集計や管理がしやすくなるようにすることを目的としています。
これにより、迅速な集計・分析が可能となり、業務の効率化と意思決定の質向上をサポートします。

1. データの統合と形式統一
   課題: リストが別々に作成され、レイアウトやファイル形式が異なり、全体を一覧で確認できない。
   対応: 異なる月度や作成者ごとに分かれたリストを変換し、統一されたExcelリストに連結し,
   　　　リストの形式やレイアウトを揃え、過不足を解消します。

2. 項目属性の標準化
   課題: 数値単位や表記、会社名の表記形式、全角半角の不一致、項目分けの違いなどがあるため、
   　　　集計や加工が困難。
   対応: 数値や表記方法、全角・半角などを標準化し、項目を修正・変換します。
   　　　たとえば「姓名」を「姓」と「名」に分けるなど、データの整理。

3. 集計用項目の追加
   課題: リストに集計に必要な項目が不足している。
   対応: 集計用の新しい区分やカテゴリーをデータに基づいて追加し、データをより分析しやすくします。

4. データの精度向上
   課題: データの重複や必須項目の不足、関連性のエラーなどが存在し、データの精度が低い。
   対応: 重複や異常値エラーを明示するフラグを付け、データのチェックを行います。
   　　　また共通項目をマスター化し、データを正確に塗り替え、精度を向上します。

5. データの正規化
   課題：データの単位が一貫していない。
   対応： スケーリングや正規化を行い、数値データを同じ基準に揃えます。
   　　これにより、特定のデータが過度に影響を与えることを防ぎます。

作業はExcel（ハンドリング、関数、PowerQuery）にて行いますが、
納品ファイルの形式はExcel以外もご要望に従い対応させていただきます。

▼納品物
・要件まとめ
・作業前/後の検証
・クレンジング統合したExcelリスト

▼納期
3～7日ほどで納品可能です。
データ量によりますので目安としてご参照ください。

▼進め方
・対象リストを拝見させていただくとともに、ご要望をお聞かせください。
・要件をまとめて見積もりを行いご提示させていただきます。
・ご発注後に作業を開始し、質問等がもし発生しましたらメッセージにてご連絡します。
・作業前/後の照合検証は、要件とデータ件数によっては部分照合となる可能性があります。
・納品1週間以内の修正は無料、1週間後も対応可能な場合は無料修正します。

▼作業時間
・9:00～18:00

一般企業での事務経験を活かし慎重、正確、迅速に対応させていただきます。
大量データをExcel加工した実務経験もありますので、まずはお気軽にお声がけください。

CSVやExcelデータの前処理（いわゆるデータクレンジング）を行います。

例えば、
複数のファイルのデータを一つのデータにまとめたい。
データの中から指定の条件に合うデータだけを取り出したい。
条件を設定して新たに項目を作成したい。
など。