【GAS】ログインが必要なWebページをスクレイピングする方法

GAS界隈ではV8ランタイムがサポートされたのがホットな話題になっていますね。
このブログの過去記事も（気が向いたら）書き直すか、、

さて、今日はログインが必要なページをスクレイピングする方法について書いていこうと思います。

いきなりコードです
あとがき

いきなりコードです

まぁまるっきりダミーコードですが。
適宜フォームのデータなどを書き換えれば使えるようになっていると思います。

function routine() {
  const url = 'https://example.com/login';
  const contentUrl = 'https://example.com/content'
  const cookie = login(url);
  const content = getContent(contentUrl, cookie)
}

function login(url) {
  const formData = { //これは一例です
    'email': EMAIL,
    'password': PASS
  }

  const options = {
    "method": "POST",
    "payload": formData,
    "followRedirects": false
  };

  const response = UrlFetchApp.fetch(url, options);

  return response.getHeaders()["Set-Cookie"]; // cookie
}

function getContent(url, cookie) {
  const headers = { 'Cookie': cookie }; 

  var options = {
    method: 'GET',
    headers: headers,
    followRedirects: false,
  };

  const response = UrlFetchApp.fetch(url, options);

  return response.getContentText();
}

一つ一つ見ていきましょう。