GAS簡易スクレイピングツール
URLの指定でお好きなWebページを簡単スクレイピング
Web関連のお仕事に従事されている方の中で、特定のWebページの情報を取得して、Googleスプレッドシートに書き出したいとお考えになる方も多いのではないでしょうか。
特に、最近ではOpenAIの「ChatGPT」が注目を集めており、特定のWebサイト情報を含めてAIにプロンプトで指示を出したいとお考えの方もいらっしゃるはずです。
しかし、特定のWebサイトページの情報を取得するにはプログラミングの技術を用いて「スクレイピング」をする必要があります。
これはノンプログラマーの方にとっては少し悩ましい問題です。
そこで今回GASラボでは、ご自身で指定したWebサイトページの簡易なスクレイピングを実施できるGASツールを開発いたしました。
本ツールは、ご自身がスクレイピングしたい「Webページ」のURLを指定し、それぞれのページの情報を取得した上で、Googleスプレッドシートに出力することができるGAS自動化ツールです。
指定できるWebページは1つのみではなく、複数のWebページを指定することが可能です。
取得・出力できる情報は「title」「description」「body」の主要な情報をカバーしております。
スクレイピング結果イメージ
本ツールはGASが実装されたGoogleスプレッドシート形式のツールです。そのため、ツールのインストールは不要で、お持ちのPCのOS(Mac、Windowsなど)も問わずご利用可能です。
本ツールの利用方法もクリックと入力のみのシンプルな仕様です。専門知識は必要ありません。
※詳しい仕様は、ツールマニュアルをご覧ください。
特定のWebページの情報収集を効率化したい方
様々なWebページの情報を取得したい方
特定のWebページの情報を含めて生成AIのプロンプトを作成したい方
①指定したWebページを簡単に簡易スクレイピング
・本ツールは、事前にリストアップしたWebページのURLをもとに、簡易スクレイピングを実施することができます。
・本ツールで取得できる情報は「title」「description」「body」の主要な情報です。
・複数のWebページを指定可能で、一括でスクレイピングすることができます。
②自動で取得した情報はGoogleスプレッドシートに記録!
・本ツールで自動で取得した情報はGoogleスプレッドシートに記録。
・出力データは関数などを利用して加工や編集などが可能です。
・例えば、日本語以外の情報については、スプレッドシートの関数を使えば、簡単に簡易翻訳することができます。
③入力とクリックのみのシンプルな操作!初心者でも簡単に利用可能!
・本ツールのご利用は、基本的に入力とクリックのみで操作・設定可能。
・ExcelやGoogleスプレッドシートを使用した経験を少しでもお持ちの方であればすぐに使いこなすことができます。
①スクレイピングしたいWebページURLをリストアップ
本ツールのご利用方法は簡単です。
まず、本ツールの「リスト」シートの「スクレイピング対象URL」欄に、簡易スクレイピングしたいWebページのURLをリストアップしていきます。
②「スクレイピング実施」メニューを実行
次にリストアップしたWebページを一括で簡易スクレイピングします。
本ツール独自でご用意している「メニュー」より「スクレイピング実施」をクリックします。
スクレイピング処理が実施され、データ取得した結果が「リスト」シートのそれぞれの対象URLごとに出力されていきます。
結果
スクレイピング処理中にエラーがでない限り、「成功」が出力されます。
title
スクレイピング対象ページのtitleタグの情報を出力します。
titleタグが存在しないページの場合、「title情報なし」と出力されます。
description
スクレイピング対象ページのdescriptionタグの情報を出力します。
descriptionタグが存在しないページの場合、「description情報なし」と出力されます。
body(htmlタグあり×scriptタグあり)
スクレイピング対象ページのbody情報をhtmlタグやscriptタグありで出力します。
body(htmlタグあり×scriptタグなし)
スクレイピング対象ページのbody情報を事前にscriptタグを削除した上で、htmlタグありで出力します。
body(htmlタグなし×scriptタグ考慮)
スクレイピング対象ページのbody情報をscriptタグの情報を含めた上で、タグを削除し、プレーンテキストで出力します。
body(htmlタグなし×scriptタグなし)
スクレイピング対象ページのbody情報をscriptタグの情報を含めない形で、タグを削除し、プレーンテキストで出力します。
取得日時
スクレイピングで情報を取得した日時を出力します。
本ツールの利用には、Googleアカウントの利用権限が必要になります。
本ツールはリストアップされた各Webサイト情報を取得しております。場合によっては、一時的に情報の取得ができない場合や、情報の取得が失敗するケースもございます。予めご了承ください。
GASのWebサイトへのリクエスト数(スクレイピング数)は1日あたりの上限が定められています。上限に達した場合は、時間を空けてご利用ください。
本ツールの利用で発生した問題の責任は負いかねます。事前に使い方をテスト、理解した上で、ご利用ください。
本ツールをご利用されてスクレイピングを実施する際には、相手型のサーバーに負荷をかけないように最大限ご配慮をお願いします。
スクレイピング対象のWebサイトがスクレイピングを禁止している場合、本ツールでのスクレイピングはお控えください。
本ツールは処理時間に上限があります(約6分)。処理時間を超える場合には、データの取得・出力が完了できないケースもございますので、予めご了承ください。
ツールおよびプログラムの著作はGASラボにあります。無断での転載・再販・配布・共有やソースコードのコピーは固く禁止しております。
本ツールは初回利用時に「認証・許可プロセス」が発生します。認証・許可を下記の記事を参考に進めて下さい。
本ツールはGASの仕様変更に伴い、ツール自体の仕様が変更になる可能性やアップデートされる可能性、情報が取得できなくなる可能性がございます。予めご了承ください。
残念ながら、本ツールではログインやCookie情報が必要なWebページのスクレイピングには対応しておりません。簡易なスクレイピングのみ対応しております。
GASラボではツールをご利用いただけるのはご購入されたお客様1名様のみに限定しております。ご購入されたお客様以外のご利用は固く禁止しております。法人でツールをご利用される場合は「GASラボ法人プラン」に必ずご加入ください。
GASラボでは、有料ツールご購入者様限定で「無料使い方サポートサービス」を提供しておりますので、ご安心ください。
有料ツールの購入後にご覧いただけるページ内に、お問い合わせフォームのご案内がございますので、そちらよりお問い合わせください。
GASラボでは、個人のユーザー様向けに100種類以上のツールがお得にご利用いただけるセット商品「【GASラボ】自動化ツール使い放題セット」をnoteにて販売しております。
個人のユーザー様で本ツールも含めて複数のツールのご利用を予定されている場合はセット商品のご利用がおすすめです。
▼おすすめのセット商品
GASラボではご購入されたユーザー様以外のツールのご利用を固く禁止しております。
法人でツールをご利用される場合は、GASラボの有料ツール全てを複数のユーザー様でご利用いただける「GASラボ法人プラン」にご加入ください。
※GASラボ法人プランならではの特典を多数ご用意しております。
お得な自動化ツールセットのご案内
GASラボでは、自動化ツールを100種類以上企画・開発・販売しております。
個人のお客様で複数のツールをご利用される場合は、note限定で販売しているお得なツールセットがおすすめです。
GASラボでは便利な自動化・AIツールを多数ご用意しております。
GASラボの「Instagram×WordPress自動連携投稿ツール」は、Instagramの投稿をWordPressに連携して記事として自動投稿できるGAS自動化ツールです。過去のInstagramの投稿のうちWordPressに連携したいものを一括で同期投稿する機能も搭載しています。WordPressの投稿にInstagramの投稿を埋め込むこともできます。本ツールは買い切り方のため、月額料金は不要です。
4,980円
「AI画像一括生成ツール」はChatGPTで有名な「OpenAI」の画像生成AI「DALL-E」API(DALL-E3モデル)を利用して、AIによる画像生成ができるツールです。「画像生成のためのプロンプト(指示内容)」を入力指定して、自動化メニューをワンクリックすることで複数のAI画像を一括生成することができます。生成する画像サイズや保存先も指定可能です。
980円
「記事構成案AI自動作成ツール」は「ターゲットキーワード」、「関連キーワード(LSI、再検索KW)」、「競合WebページURL」を指定することで、SEOを目的とした記事構成案をAI(ChatGPT)の技術を用いて自動生成することができるツールです。関連キーワードは複数指定することができ、競合WebページURLも複数指定(最大3件まで)することもできます。
1,980円
「WordPress記事一覧自動取得ツール」は、ご自身が運営・管理されるWordPressサイトの記事一覧情報を取得し、自動でリストアップできるGAS自動化ツールです。取得できる記事は「投稿ページ」および「固定ページ」の2種類です。出力形式は「CSVファイル」、「Googleスプレッドシート」の2種類から選択可能です。本ツールは買い切り型のツールで、月額料金は不要です。
500円
「Webページ内リンクURL一括抽出ツール」は、URLで指定したWebページ内のリンクURLを一括で抽出し、Googleスプレッドシートに一覧として自動出力できるGAS自動化ツールです。抽出したページ内のリンクURLの基本情報を取得できる「簡易スクレイピング機能」を搭載しています。本ツールは無料でご利用いただけます。
無料
「Hタグ(見出しタグ)一括抽出ツール」はご自身がHタグ(見出しタグ)を抽出したい「Webサイトページ」のURLをリストアップ(複数対応)し、それぞれのページのHタグ(見出しタグ)情報を取得した上で、Googleスプレッドシートに出力することができるGASの自動化ツールです。抽出できる「Hタグ(見出しタグ)」はh1〜h6まで対応しています。本サイト限定で無料でご利用いただけます。
無料
「Twitter(X)画像付きツイート自動投稿ツール」は画像付きのツイートに対応したTwitter(X)自動投稿ツールです。2023年3月末に変更されたTwitter APIのプラン変更にも対応しており、無料プランでもご利用可能なTwitter Botが構築できます。自動ツイートの頻度は「毎日特定の時間帯にツイート」や「数時間ごとにツイート」などお好みのインターバルを設定可能です。ツイートに添付できる画像は最大で4枚まで対応しており、もちろん画像なしのツイートの投稿にも対応しております。
2,500円
GASラボの「Instagramインサイトデータ自動取得ツール」は、Instagramの標準機能に搭載されていない「Instagramインサイトデータ」の「外部出力機能」を実現するGAS自動化ツールです。Instagramの各種インサイトデータを自動で取得し、 Googleスプレッドシートに出力・蓄積していくことができます。専用のBI分析テンプレートつき。本ツールは買い切り型のため、月額料金は不要です。
2,980円
GASラボの「ツイート一括取得・保存ツール」は、指定したTwitter(X)アカウントのツイートを一括取得・保存することのできるGAS自動化ツールです。他人(公開アカウント)の特定のツイートも一括取得にも対応。ツイートのパフォーマンス指標も取得するため、ツイートの分析にも活用できます。本ツールは買い切り型のツールです。
2,980円
「Slack自動エクスポートツール」は、Slackのメッセージを自動でスプレッドシートにエクスポートするGAS自動化ツールです。また、DMのエクスポートも可能で、アップロードされたファイルもダウンロードです機能も搭載しています。メッセージのエクスポートタイミングは「月」「週」「日」単位で指定できます。買い切り型のツールであるため、月額利用料は発生しません。
2,980円
GASラボの「Instagram×WordPress自動連携投稿ツール」は、Instagramの投稿をWordPressに連携して記事として自動投稿できるGAS自動化ツールです。過去のInstagramの投稿のうちWordPressに連携したいものを一括で同期投稿する機能も搭載しています。WordPressの投稿にInstagramの投稿を埋め込むこともできます。本ツールは買い切り方のため、月額料金は不要です。
4,980円
「YouTube動画コメント一覧一括取得ツール」は公開されている特定のYouTube動画のコメント一覧をAPI経由で自動で取得し、Googleスプレッドシートへ一括出力することができるツールです。本ツールでは親コメントだけではなく、親コメントへの返信された子コメントも取得することができ、それぞれのコメントへの高評価数、コメント投稿日、投稿者に関する情報も取得する事ができます。
1,500円
GASラボの「Gmail添付ファイル自動保存ツール」は、Gmailで受信したメールに添付されているファイルをGoogleドライブへ自動保存できるGAS自動化ツールです。添付ファイルを自動保存するメールは「送信者」「受信者」「件名」などで指定可能で、ファイル保存先のフォルダも指定可能です。
500円
「Googleカレンダー自動エクスポートツール」は予め指定した期間のGoogleカレンダーのイベントデータを、お好みのタイミングで自動エクスポートできるGAS自動化ツールです。出力形式はCSVファイル、Excelファイル、Googleスプレッドシートの3つのパターンからお好みの形式を選択することができます。エクスポートするタイミングもお好きなタイミングで設定可能です。 本ツールには、「簡易スクレイピング機能」も搭載しております。
500円
「Twitter(X)フォロワー増減記録・確認ツール」は、ご自身のTwitter(X)アカウントのフォロワー数を含む基本情報をAPI経由(無料APIプラン)で自動で取得し、記録することができるGAS自動化ツールです。 取得できる項目は、フォロワー数やフォロー数、投稿数といったアカウント基本情報や、ご自身のアカウントの固定ツイート(固定投稿)のパフォーマンスデータもカバーしています。本ツールは無料でご利用いただけます。
無料
GASラボの無料ツール情報や新着ツール情報を受け取りたい方は、メールマガジンにご登録ください