Webページクローリング
業務内容
データの集まったサイトから、データを収集してきます。それをSpreadsheetに入れたり、Slackに流す、常に取り続けてグラフを表示など柔軟に対応できます。
例)
・Amazonから商品の価格情報を毎日収集して、価格推移をみる。
・mynaviの企業情報から、御社のニーズにあった企業の電話番号を取得
pythonプログラムコーディングします
業務内容
CSVデータ、画像処理、機械学習などプログラミング経験があります。
難易度や希望納期から対応可能か判断させていただきます。
難しい内容でも納期に余裕がある場合は対応させていただきます!
SQLに関するご相談を承ります(データベース上級資格保有)
業務内容
SQLについて、SQLを業務でメインに扱っているデータエンジニアが質問に答えます。
大学での情報処理の課題や、独学でSQLを勉強されている方の相談など大歓迎です。
IT系の国家資格・DB系ベンダー資格も上級まで保有しておりますので、IT系資格取得に関するご相談も歓迎いたします。
具体的には以下のようなご質問に対応いたします。
・SQLに関する問題の答えが知りたい。
・SQLの解説書等読んでも分からない部分を解説してほしい。
・こういうSQLを書きたいけど書き方が分からない。
・業務などで使用しているSQLの速度が遅く、チューニングしてほしい。
・データベーススペシャリスト・Oracle Masterといった資格を取得したいが、学習方法が分からない。 など
データベースについてはOrcale,MySQLを専門としていますが、SQLに関する質問であれば大抵はお力になれると思います。
※本業があるため、回答には余裕を持って7日を見込んでいただきますが、金額とのご相談で納期を短縮することもできます。まずはご相談ください。
大手会社の基幹システムの受託、自社製品開発等で、日々大規模データベース、SQLを扱ってきた現役のデータエンジニアです。
SQL以外でもお力になれるようであれば、ぜひご相談ください。
Djangoでホームページを作れます
業務内容
https://serene-hollows-55175.herokuapp.com/
- Webサイトの種類
- ビジネスプロモーション
- プラットフォーム・ツール
- Django
CSVグラフ化ソフト(JPG出力、Excel出力、大容量ファイル対応、高速処理)
業務内容
Excel VBAやマクロでは処理できない大容量CSVファイルから、データを抜き出し・結合・整形して、グラフを画像として出力できます。結合するためサイズが大きくなりますが、Excel出力も可能です。処理時間は、100MB×6グラフで数十秒でした。
BIツールで処理できない大容量記録の可視化にご活用ください。
【使用言語】Python
【提出物】実行ファイル(exe)
キーワード検索したツイートの埋込タグをワードプレスに投稿するexeファイルの提供
業務内容
exeファイルの実行
↓
キーワードの入力
↓
Wordpressにキーワードに関するツイートの埋め込みタグを投稿
上記のことができるようになります。
但し、記事の途中への挿入はできません
先にWordpressに埋め込みツイートを投稿しておいて後で編集するという使い方ができると思います。
いいね数やリツイート数で検索ツイートを絞ることも可能です。
最新のツイートから該当ツイートを取得するプログラムです。
TwitterのAPIが無料のプランの場合は、直近7日間から検索するようになります。
言語はpythonを使います。
もし依頼していただける場合は、下記2点を事前にご用意ください。
①TwitterのAPI(CONSUMER KEY・CONSUMER SECRET・ACCESS TOKEN・ACCESS SECRET)
②WordpressのプラグインApplication Passwordsで作ったパスワード
いただいた情報は悪用しないことをお約束します。
また、ご利用に関してはTwitterやWordpressの規約に則っていただければと思います。
YouTubeの特定動画の全コメントをcsvファイルで納品します(返信欄は除く)
業務内容
YouTubeの特定の動画のコメントを全て取得してExcelで開けるcsvファイルで納品いたします。
コメントの他に、ユーザー名と高評価数と返信数も取得できます。
但し、低評価数と返信欄は取得できませんのでご了承ください(私の技術不足です)
自分の動画のコメントチェック等にどうですか。
高評価でのソートもできますよ。
同じ作業してるかも、、、そんなあなたに、自動化ツールを作成いたします
業務内容
ご要望にあわせた自動化ツールを、VBAかPythonで作成いたします。
具体的なイメージが固まっていない場合でも、サンプルデータや、なんとなくの処理イメージをご連携いただければ、当方からご提案をさせていただきます。
お気軽にご相談ください。
■販売価格の目安(ランサーズ手数料込)
・コピー&ペーストなど、単純作業の自動化:5000円~
・2~3ファイルからデータ集計、整形、グラフ化:10000円~
■ツール作成例
・【複数チームの作業時間集計】(データ集計、整形)
事前に、複数チームの作業時間が一覧化されたCSVファイルなどを用意。
→ボタンを1クリックしたら、対象のCSVファイルを自動集計し一覧化。
・【特定銘柄の株価データ取得】(Webスクレイピング)
事前に、取得したい銘柄コードを一覧化して記載。
→ボタンを1クリックしたら、ご指定のWebサイトから当日の株価などを取得し一覧化。
GASスクリプトを用いて、Google上での作業を自動化します
業務内容
◆提供内容(例)
-Google上の作業を自動化するツールの作成
-サイトの特定の情報の収集
-システム管理の自動化
Webサイトのクローリング・スクレイピングプログラムの作成
業務内容
Webサイトからのクローリング・スクレイピングプログラムを作成します。
納期は1週間程度を想定しておりますが、プログラムの詳細などにより納期の交渉をする場合がございます。
スクレイピングシステムを開発します
業務内容
受注者様が欲するwebの情報をPythonでスクレイピングして,google スプレッドシートにまとめるツールを開発します.開発したツールの所有者は受注者様となり,開発終了後も受注者様で使用していただいて結構です.
⚠契約終了後の保守・運用は行いません.
- 業務
- 作業自動化・効率化
【業務効率化】Webサイトから自動で情報収集するシステムを提供します
業務内容
✅主な業務内容
Google Apps Script(GAS)であなたの毎日のWebサイトでの情報収集の時間を無くします。
データ収集や他社情報の収集など幅広く対応させていただきます。情報収集だけでなく、「この時にメールで通知してほしい」、「収集した情報をスプレッドシートに追記してほしい」などご要望に応じて追加機能の構築も柔軟に対応しております!
✅こんなことができます!
- 他社のデータ収集をしたものをスプレッドシートに記載する
- 企業のお知らせが更新されていれば、LINEで通知する
- 決まった時間帯にサイトから自動で情報収集を行い、その情報をCSV形式にしてGoogle Driveに保存
上記に書いた例以外も対応できますので、「こんなことしてみたいけど...」というものがあれば、ぜひ一度ご相談ください!
✅こんなサービスの連携もできます!
- Gmail
- Googleスプレッドシート
- Googleドキュメント
- Googleカレンダー
- Googlemap
- Google翻訳
- Google Meet
- webページ
- LINE
- Chatwork
- 各種API
などなど、上記以外のサービスについても柔軟に対応しますので、まずはご相談ください!
- 業務
- スクリプティング
- プログラミング言語
- JavaScript
- 専門知識
- クロスブラウザ対応
現場で即戦力になるPythonデータ分析をレッスンします
業務内容
Pythonを使った機械学習の学習において、教本やウェブサイトでは「アヤメの分類をしてみよう!」といった例題がよく目にされるかと思います。しかし、実際のビジネス現場では、「アヤメの花の分類」といった課題を抱える人はほとんどいません。私も最初は機械学習の学習を始めたとき、教本と現場のギャップに悩まされました…
実際の現場では、よく「必要なデータが別の部署で管理され、フォーマットがバラバラ」といった状況や「データが汚くてすぐに分析できない」といった問題に直面します。
そこで、このレッスンでは実際の現場で扱われるような「リアルなデータ」を教材にし、単なる知識だけでなく、実際の現場で役立つPythonデータ分析のスキルを身につけることを目指します!
このレッスンを受講することで、以下の内容を実践形式で学ぶことができます:
✅ 実際の現場で扱われるデータの種類
✅ そうしたデータを扱う際に生じる問題
✅ それらの問題にどのように対処すれば良いか
また、レッスンで使用するGoogle Colaboratoryのコードも提供しますので、復習も自分で行うことができます。
このレッスンは以下のような方々に向けています:
✅ 実際の現場で役立つPythonデータ分析のスキルを身につけたい方
✅ 独学で勉強しているが、教材が仕事内容と一致せずモチベーションが上がらない方
✅ 完全な初心者から、ある程度Pythonプログラミングの知識がある方まで
データ分析では「前処理8割」を言われているほど分析は準備が重要です。
このレッスンでは基礎編として、小売店のリアルな購買データを使用した以下の内容をカバーします:
・分析環境の用意(Google Colaboratory)
・データの読み込みと書き出し
・データの結合(ユニオン、ジョイン)
・データのグループ化と集約
・月別の統計的な購買集計(平均、中央値、最大値、最小値など)
・商品別売上推移の可視化(ヒストグラム、折れ線グラフなど)
このレッスンでは、実際の現場で遭遇するであろうデータの課題と、それらに対処するための手法を実際のデータを用いて学ぶことができます。Google Colaboratoryを使用することで、実際のコードを実行しながら学ぶことができます。
データ分析のスキルは、ビジネスにおいて意思決定や戦略立案において重要な要素となっています。このレッスンを通じて、実践的なデータ分析のスキルを習得し、ビジネスの現場での価値を高めましょう。
R/python処理承ります 研究・解析・趣味・課題等でお困りのあなたへ
業務内容
R/pythonを研究に用いて10年以上になります。
プログラムを書いて処理するのは、慣れれば決して難しくないですが、初心者にはどうしても取り掛かりづらいものです。
大きな課題から小さな課題まで、まずはお気軽にご相談ください。
また受注料金は、ケースバイケースでご提案申し上げます。例えば簡単な例として1000行x30列のデータを様々に処理して最終的に3通りのデータ(特徴量)を抽出する、というレベルのものもあれば、ディープラーニングのような高度なものまで、様々なケースが想定できるためです。
ご依頼主さまの状況に合わせて、目標達成への道筋を上記料金にてご提案いたします。
一緒にお仕事できるのをたのしみにしております。
SBIネオモバイル証券の配当金自動分析ツール【両学長】
業務内容
YouTube等でご活躍の両学長(https://www.youtube.com/channel/UC67Wr_9pA4I0glIxDt_Cpyw)が提案する高配当株ポートフォリオのメンテナンスを自動化したい人必見です。
プログラムを実行すると自分のネオモバイル証券口座データをスクレイピングし、配当金の業種ごとの割合等を分析できます。
サムネイルのように、マウスを合わせるとその業種の保有銘柄及び配当金などが表示されるようになっています。
銘柄登録の手間が一切なく、圧倒的に管理が楽になります。
環境構築もサポートしますので宜しくお願い致します。
Pythonでデータ収集(webスクレイピング)を行います
業務内容
・こんな方へオススメ
「安く済ませたい」「そこまでクオリティは高くなくてもいい」「急ぎではない」「早めに連絡をいただければキャンセルされても問題ない」と考えてる方。
・提供内容
Pythonを使ったwebスクレイピングを行います。
・ご購入後の流れ
①要件の設定(依頼者側)
スクレイピングする場所(サイト名、URL等)
収集する情報(人名、アカウント名、商品名、URL等)
納品形態(エクセル、ワード、テキストファイル等)
②スクレイピング作業を開始(出品者側)
③納品(出品者側)
④納品物チェック、追加指示、修正指示(依頼者側)
⑤追加作業、修正(出品者側)
⑥取引終了
・納期
5〜14日(難易度によって変動する可能性あり)