こんにちは！今日は、パソコンやスマホの操作に自信がない方でもできる、Google Apps Script（GAS）を使ったWebスクレイピングの方法をご紹介します。特に、Googleスプレッドシートを使って、インターネット上の情報を自動で集める方法に焦点を当てます。
GASって何？
Googleスプレッドシートのイメージ
まず、GASとは「Google Apps Script」の略で、Googleが提供する無料のプログラミングツールです。これを使うと、GoogleスプレッドシートやGmail、GoogleカレンダーなどのGoogleサービスを自動で操作できるようになります。
例えば、毎朝決まった時間にウェブサイトから最新のニュースを取得して、スプレッドシートに自動で記録することができます。これにより、手作業での情報収集の手間を大幅に削減できます。
スクレイピングって何？
「スクレイピング」とは、インターネット上のウェブページから必要な情報を自動で取得する技術のことです。例えば、天気予報、ニュース、株価など、日々更新される情報を自動で集めることができます。
なぜGASとスプレッドシートを使うのか？
GASとスプレッドシートを組み合わせることで、以下のようなメリットがあります
- 環境構築が不要Googleアカウントさえあれば、すぐに始められます。
- 自動化が簡単定期的な情報収集を自動で行う設定が可能です。
- Googleサービスとの連携取得したデータをGmailで通知したり、Googleカレンダーに登録することができます。
実際にやってみよう！
では、実際にGASを使ってスプレッドシートにウェブサイトの情報を自動で取得する方法を見ていきましょう。
Googleスプレッドシートを準備しよう
まず、Googleスプレッドシートを開いて新しいシートを作成します。これがデータを保存する場所になります。
スクリプトエディタを開こう
スプレッドシートのメニューから「拡張機能」→「Apps Script」を選択します。これで、GASの編集画面が開きます。
Parserライブラリを追加しよう
GASでは、ウェブページの情報を簡単に取得するための「Parserライブラリ」を使用します。以下の手順で追加します
- スクリプトエディタの左側のメニューから「ライブラリ」をクリックします。
- 「スクリプトID」に以下のIDを入力します
1Mc8BthYthXx6CoIz90-JiSzSafVnT6U3t0z_W3hLTAX5ek4w0G_EIrNw - 「検索」をクリックし、「Parser」を選択して「追加」をクリックします。
スクリプトを書いてみよう
以下のコードをスクリプトエディタに貼り付けてください
javascript
function myFunction() {
var url = 'https://example.com'; // 取得したいウェブページのURLを入力
var response = UrlFetchApp.fetch(url);
var html = response.getContentText();
// Parserライブラリを使って、特定のタグの内容を抽出
var data = Parser.data(html).from('
').to('
').build();
// スプレッドシートにデータを書き込む
var sheet = SpreadsheetApp.getActiveSpreadsheet().getActiveSheet();
sheet.getRange(1, 1).setValue(data);
}
このコードは、指定したウェブページから
タグの内容を取得し、スプレッドシートのセルに書き込むものです。
スクリプトを実行しよう
スクリプトエディタの上部にある「▶」ボタンをクリックすると、スクリプトが実行されます。初めて実行する際には、Googleアカウントへのアクセス許可を求められるので、指示に従って許可してください。
自動化してみよう
定期的に情報を取得したい場合は、スクリプトを自動で実行する設定が可能です。スクリプトエディタのメニューから「時計アイコン（トリガー）」をクリックし、新しいトリガーを追加します。例えば、毎朝8時に実行するよう設定できます。
注意点とマナー
スクレイピングを行う際には、以下の点に注意してください
- 対象サイトの利用規約を確認スクレイピングが禁止されているサイトもあります。
- サーバーに負荷をかけない短時間に大量のリクエストを送ると、サイトがダウンする可能性があります。
- 個人情報や著作権に配慮収集したデータの取り扱いには十分注意してください。
よくある質問や疑問
Q1: スクレイピングは違法ではないのですか？
スクレイピング自体は違法ではありませんが、対象サイトの利用規約に違反しないよう注意が必要です。また、収集したデータの取り扱いには法律を遵守してください。
Q2: どんな情報をスクレイピングできますか？
ニュース、天気予報、株価、商品情報など、公開されているウェブページの情報を取得できます。ただし、サイトによっては情報の取得が制限されている場合があります。
Q3: スクレイピングの結果をどのように活用できますか？
取得したデータをスプレッドシートで管理したり、Gmailで通知を受け取ったり、Googleカレンダーに登録するなど、様々な活用方法があります。
まとめ
今回は、Google Apps Script（GAS）を使って、Googleスプレッドシートにウェブサイトの情報を自動で取得する方法をご紹介しました。パソコンやスマホの操作に自信がない方でも、手順に沿って進めれば簡単に実現できます。
他にも疑問やお悩み事があれば、お気軽にLINEからお声掛けください。
コメント