【エクセルで情報収集】★超オススメ★Yahooマップ情報をキーワード指定で取得します
業務内容
Yahoo地図サイトから店舗情報を高速に取得(スクレイピング)します。
https://beta-map.yahoo.co.jp/search?q=PAYPAY%E3%80%80%E6%9D%B1%E4%BA%AC%E9%83%BD%E3%80%80&lat=35.67256120099444&lon=139.7187484480993&zoom=11&maptype=basic
■プログラムの特徴
▼Yahooマップは巨大データベースなので様々なジャンルや店舗名・電話番号で検索・取得できます。
▼「Yahooロコ」とも連携しているため、グルメの「評価」や「レビュー数」も取得できます。
▼「PAYPAY」加盟店も取得できます(現在100万店舗を超えています)
▼「コンビニ」「ガソリンスタンド」等、ブランドを超えてデータを取得できます。
▼詳細情報を取得(処理は遅くなりますが)営業時間等も取得できます。
■プログラムの注意点
▼キーワードで検索しますので、ちょっと違った店舗等を取得することがあります。
その場合「カテゴリ」や「店舗名」で判断してください。
▼「PAYPAY」で検索するは100万を超えるため、全ては取得できません。
都道府県を分けて取得して頂き、最後をマージして下さい。
■2024年1月8日現在のキーワード別、全国取得件数
コンビニ(63,623店) セブンイレブン(21,396店) ファミマ(16,097店) ローソン(13,746店)
ガソリンスタンド(63,623店) ENEOS(12,031店) コスモ石油(2,589店) apollostation(5,913店)
小学校(20,095校) 中学校(10,979校) 高校(6,024校) 幼稚園(51,671園)
法律事務所(11,541店) 司法書士(11,586店) 行政書士(19,237店) 介護施設(53,438店)
和食(180,832店) 寿司店(42,603店) そば店(38,962店) ラーメン店(59,342店)
マクドナルド(2,965店) スターバックス(1,888店) ドン・キホーテ(487店)
■ノートパソコンの取得時間は以下の通りです
取得条件:「東京都」、「PAYPAY」、「詳細情報を取得しない」
データ件数 :187,031件
取得処理時間:1時間32分29秒
取得条件:「東京都」、「ファミマ」、「詳細情報を取得しない」
データ件数 :967件
取得処理時間:0分48秒
取得条件:「東京都」、「ファミマ」、「詳細情報を取得する」
データ件数 :967件
取得処理時間:5分17秒
※Windows11,EXCEL2021,WIFI5(IEEE 802.11ac)
■動画やPDFファイルで確認してください。
■当プログラムはEXCELバージョン2021作成しています。
EXCEL2016以降なら問題なく動作します。
※申し訳ありませんが、MACでは動作しません。
■EXCELのマクロが動作する環境を設定してください。
注)EXCELをダウンロードして開くとたまに以下のような表示されることがあります。
「このファイルのソースが信頼できないため、microsoftによりマクロの実行がブロックされました。」
その場合お手数ですが「デスクトップ」にコピーして動作させるか、以下の対処を行ってください。
https://oa-center.co.jp/2022/10/10/excel_macro/
■お願い事項
エクセルのプログラムはコピーすることは可能ですが、1つのプログラムでの複写は
パソコン5台までとさせて頂ければと存じます。
※5台を超える場合は別途ご相談させて頂ければと存じます。
※また購入者以外への配布を行わないようお願い致します。
■【免責】について
現在問題なくプログラムは動作しています。
将来サイトがバージョンアップ等で仕様変更があった場合動作しない可能性があります。
申し訳ありませんが、この場合は【免責】とさせて頂きます。
- 業務
- 作業自動化・効率化