Webページから、TypeScript や Python でデータを取得します

スクレイピング・クローリングのご相談に乗ります。

Web & Program しげる

業務内容

株価情報やSNSなどに掲載されている情報を、自分のパソコンで活用したいと思ったことはありませんか?
それは「スクレイピング」と呼ばれる技術で可能になります。
公開されているWebページのHTMLの構造を取得して、任意の情報のみを編集して、自分のパソコンに持ってくることができます。

サンプルスクリプトの結果をふたつ、載せておきます。
いずれも、わたしのホームページにアクセスして、特定のセクションの下の複数のdivにあるh4情報を取得したものです。
・TypeScriptの場合は、puppeteerライブラリを使用します。
・Pythonの場合は、beautifulsoupライブラリ、またはseleniumライブラリを使用します。
table形式のデータなども、中の数字や文字列を取得することができます。

画像の例は、標準入出力を使用したものです。

業務
Webアプリケーション構築
プログラミング言語
Python TypeScript

基本料金

プラン
10,000

ベーシック

スクレイピングサンプルの作成
30,000

スタンダード

スクレイピングアプリの作成(静的ページ)
50,000

プレミアム

スクレイピングアプリの作成(動的ページ)
納期
5 日
14 日
30 日
合計
10,000円
30,000円
50,000円

出品者

Web & Program しげる
Web & Program しげる (oiseau1999)

SE歴11年。Webは黎明期からHP持ってました。最近、ChatGPT-APIをいじっています。

  • 6 満足
    0 残念
  • ブロンズ
  • 個人

NTTにて80年代人工知能技術を勉強していました。
初めてコンピュータを使ったのは中学生のとき。その頃はまだPC-6001も世界に存在しませんでした。

インターネット黎明期よりホームページを保有。業務でも会社のサイトを5年ほど管理していました。HTML & CSS で一からページを書くのが好きです。

C、LISP、Java、Pythonなど習得言語多数あります。小規模プロトタイプシステム(エキスパート・システム、金融工学系投資ゲーム、など)の開発に11年間従事していました。

東京大学情報基盤センターに技術補佐員として5年間勤務しました。技術事務のほかに、職場のLinuxファイルサーバを構築しました。

最近では3Dゲーム開発環境Unityを駆使して、実在する神社のメタバース(仮想空間)を開発していました。メッセージの英語翻訳等も担当しました。

TypeScriptと組になるReactの技術を勉強していく中で、現代のプログラマとして自分に必要な技術と経験を感得し、フルスタックの開発(React/Vue.js+TypeScript+Django+mariadb)についての学習を急ピッチで進めています。

2024年7月は、某クライアントの発注を受け、ハイパーカジュアルゲームの開発(Unity/C#)を行いました。Android向けのゲームで、Google Play にてダウンロードできます。
2024年11月は、ChatGPTのAPI呼び出しと、Seleniumを組み合わせた、自動投稿AIシステムを開発しました。対象サイトは楽天、Note、WordPressサイトです。

資格:
Webクリエイター能力検定試験合格
MOS(Excel associate)
特種情報処理技術者
英語検定準1級
その他

ポートフォリオ
dark-hita-6716.kuron.jp/portfolio/contents/

注文時のお願い

スクレイピングの対象になるWebページが、第三者からのスクレイピングを許可しているかどうかを確認してください。技術的に可能でも、法的に制限のある場合が多いです。