tubone

tubone

Boyaki makes a new world


 Recent posts  6 / 53

SepOctNovDecJanオムロン HV-F312で腰の痛みをなくすGithub Actionを使って、簡単CIを作ってみるChromeDriverがGoogleChrome v76 に対応していないらしい。Googleデータポータルを触ってみるHyper-vにMetasploitableの仮想マシンを立ててみるNightwatch.jsでE2Eテストを回したときにうまく動かないたった一つの理由particles.jsをVue.jsで使ってかっこいいページを作るGitPitchを使ってMarkdownからプレゼンテーションを作ってBadgeをレポジトリに貼るSentryを使ってフロントエンドのエラーを確認するJSON Resume + API With GitHubを使って、さくっと職務経歴書チックなもののAPIなど作ってみるGitHubに30日間草を生やし続けた感想Netlify Formを使って、簡易Contact Formを作ってみる10/1は天下一品の日Ansible + Serverspecを使ってMacの環境構築を自動でする (Ansible編)Ansible + Serverspecを使ってMacの環境構築を自動でする (Serverspec編)今日のラーメン台風の時の我が家のセンサー(netatmo)の値をZabbixで見る究極の謝罪はSlackのスタンプを活用しよう! ~明日から使えるSlackスタンプスニペット集~ハロウィーンはえちえちでチンパンジーなイベントじゃない。GitHubと向き合うイベントだ昔ながらのラーメンたべたい珠玉の一杯。たくさん残業した日はこのラーメンを食べろ!docoptはNimでも使えたのお話GitHubに草を生やし続け90日が経ったので感想を書くGoでAWS Lambdaを動かして、GitHubAPIv4(GraphQL)を叩いてみた感想Hadoopゾウさんについて本気出して考えてみたNuxt.jsでparticles-bg-vueを使うNuxt.jsのmodulesをCompositionAPIで使ってみる(@nuxtjs/toast編)くろおびらーめん with チャーシュー飯Nuxt.jsのmodulesをCompositionAPIで使ってみる(@nuxtjs/toast Global Option編)Nuxt.js + Composition APIでVuexのStateをReactiveに使う方法【初学者】Juliaを使って円周率を求める初めてプログラミングをした時のゴミソース見つけた面倒なことはPythonにやらせよう@GitHub API v4を使ったリリース実績取得Gatsby.jsで作ったブログに読み終わるまで○○分を追加した話Google広告設定でみる属性情報であなたをもっと知ろう!Blog用に新しいLogo作った話今年1年を振り返ってGoのEchoでJaegerを使ってボトルネックを調査するGatsby.jsで作ったBlogの投稿をGitHubの草にして表示させるWeb Developer Roadmap 2020を眺めながら今年の目標(Frontend)をだらだら考えるの会AWS X-RayでLambdaのトレースをしつつ、Datadog APMに連携するElixirでパラレルな負荷試験ツールを作るMonWedFri
Elixirでパラレルな負荷試験ツールを作るAWS X-RayでLambdaのトレースをしつつ、Datadog APMに連携するWeb Developer Roadmap 2020を眺めながら今年の目標(Frontend)をだらだら考えるの会Gatsby.jsで作ったBlogの投稿をGitHubの草にして表示させるGoのEchoでJaegerを使ってボトルネックを調査する今年1年を振り返って


 SearchBox

Search your interesting by Algolia in this blog.


 All 145 Tags

ぼやき 19JavaScript 12GitHub 7Vue.js 6TypeScript 6ラーメン 6デブ活 5Nuxt.js 4React 3Gatsby.js 3Auto Provisioning 3Serverspec 3Mac 3AWS 3自動テスト 3Python 3Ansible 3GitHub Action 2Go 2Lambda 2ChromeDriver 2GraphQL 2Netlify 2toast 2Chainer 2Write Code Every Day 2CompositionAPI 2Nim 1particle.js 1JSON Resume 1GitHub Pages 1Resume 1CV 1GitHubAction 1Sentry 1監視 1 1weed 1CI 1GitPitch 1GitHub Badges 1Azusa Colors 1Travis 1天下一品 1E2E Test 1Netlify Form 1Selenium 1Contact Form 1GoogleChrome 1Gatsby 1Googleデータポータル 1BI 1Azure Devops Build Pipeline 1netatmo 1台風 1IoT 1センシング 1Google Apps Script 1API FLASH 1SlackAPI 1Clasp 1Google Analytics 1Jest 1Unit Test 1Slack 1Stamp 1ハロウィーン 1昆布 1健康 1Headless CMS 1腰痛 1仮想化 1Hyper-v 1docopt 1CLI 1Hadoop 1ゾウ 1metasploitable 1powerShell 1RNN 1LSTM 1Chat BOT 1アイマス 1デレマス 1ひなこのーと 1Deep Learing 1OpenCV 1機械学習 1CNN 1分類学習 1顔認識 1AWS認定ソリューションアーキテクトプロフェッショナル 1資格 1勉強法 1E2Eテスト 1particles-bg-vue 1particle 1Proton 1particles.js 1Nightwatch.js 1test 1チャーシュー飯 1modules 1Composition API 1Vuex 1ストアパターン 1Julia 1円周率 1初心者 1The Gauss–Legendre algorithm 1Leibniz formula for π 1ギター 1DTM 1エフェクター 1ATELIERZ 1Caparison 1VOCALOID 1かわいい 1恐竜時代 1ことり隊 1早稲田 1GitHub API v4 1リリース実績 1Estimated Reading Time 1あと何分 1Logo 1SVG 1Server 1Seti@Home 1Google広告設定 1Google 1属性情報 1Persolal Data 1振り返り 1Echo 1Jaeger 1ボトルネック調査 1React Calendar Heatmap 1Frontend 1Web Developer Roadmap 2020 1Elixir 1Load Test 1X-Ray 1Datadog 1APM 1
この記事は264文字1.3で読めます

タイトル長い

くっそ長いタイトルで恐縮ですが、Google Apps Script(GAS)とAPI FLASHとSlackAPIをClaspとJestとGitHub Actionで調理して定期的にWebページのスクリーンショットを撮っていきたいと思います。

作成したコード GitHubはこちらとなります。

GASへの詳しい設定方法は拙作コードのReadmeをご参照いただければと思います。

Table of Contents

Google Apps Script(GAS)とは?

Google Driveをご存じでしょうか?

スプレッドシートやらプレゼンテーションと呼ばれる某ExcelやPowerPointの基本機能がWeb画面で扱えるアレです。

Google Apps Scriptはそれのマクロだと思っていただけるとイメージがつきやすいかと思います。

ExcelやPowerPointだとVBAがマクロ言語ですが、Google Apps ScriptはJavaScriptが言語です。

さすがGoogle公式言語。

またGoogle Apps Scriptのことを省略してGASとか言ったりするそうです。

ガスガス

GAS専用のマクロ用関数がある程度用意されてるのでマクロを組むのも簡単ですし、時間で関数をキックするトリガー機能もあるので、簡単なFaaS(Function as a Service)として 利用することもできます。

今回は後者の使い方が中心となります。

JavaScriptはJavaScriptなんだけどさ

さきほど書いたとおり、ほとんどGASはJavaScriptなのですが、ES6な記法ではないので、JavaScriptとは恐れ多くても言えないというのが実状です。

なので上記と合わせ素のGASを使うと下記のような悲しいことがおきます。

  • 古くさいJavaScriptを書く
  • テストできない
  • CIに乗っけられない(手デプロイ)

これは悲しいですね。

悲しい世界には美しい花が咲く

と悲しい気持ちになってるところで見つけたのがclaspです。

claspはGoogle謹製のGASデプロイツールなのですが、勇者が Claspを使ったTypeSciptテンプレートを作ってました。天才かよ。

今回はこちらのテンプレートを借りて開発を進めたいとおもいます。

API FLASH のサービス層作成

今回のGASの目的は、WEBページのスクリーンショットを撮るということですので、スクリーンショットを簡単に取得する方法としてAPI FLASHを使います、

API FLASHとは

API FLASHとは、ChromeベースのWebscreenshotAPI提供サービスです。

API FLASH自体はAWS Lambdaを使ってるらしく、スケーラビリティが高いと主張してます。

おそらく、Serverless-chromeをLambdaで実行しているものと思われます。

Chromeベースのキャプチャリングなので、レンダリングも正確で非対応ページがすくないのもうれしいところです。

さらに、うれしい機能として遅延キャプチャリング機能があり、ページのレンダリングを待ってからキャプチャを撮ることも可能です。

https://api.apiflash.com/v1/urltoimage?access_key=hoge&url=hoge&delay=10

のようなURLでHttp Getをするだけでキャプチャが撮れるんです、すごいですね。

ちなみに、無料版には1ヶ月あたりの利用制限がありますのでご注意を。

実際できあがったコード

TypeSciptでこんな感じのサービス層を作りました。

export class ApiFlashService {
  static captureWebPage = (
    url: string,
    accessKey: string,
    width: string,
    height: string,
    delay: string
  ): GoogleAppsScript.Base.Blob => {
    const captureUrl = ApiFlashService.createChaptureUrl(url, accessKey, width, height, delay);
    const responseData = UrlFetchApp.fetch(captureUrl);
    return responseData.getBlob();
  };
  private static createChaptureUrl = (
    url: string,
    accessKey: string,
    width: string,
    height: string,
    delay: string
  ): string => {
    return `https://api.apiflash.com/v1/urltoimage?access_key=${accessKey}&url=${url}&width=${width}&height=${height}&delay=${delay}&fresh=true`;
  };
}

GASの場合APIのコールにはURLFetchAppが利用できます。

UrlFetchApp.fetch(url) とするだけでAPIがコールできます。

URLFetchAppはもちろんGAS専用のAPIですが、TypeSciptのLintがちゃんと利くのが何気にすごいと思いました。

img

Slackのサービス層

コードは省略しますが上と同じ要領でURLFetchを使って、Slackコール部も作ります。

テスト

テストはJestで作ります。

ポイントは先ほどから利用しているURLFetchをMock化する必要があることです。

Jestのグローバル変数定義であらかじめURLFetchを作り、JestのMock関数をテストケースごとにfetch関数と置き換えることで実現できます。

package.jsonに

  "jest": {
    "verbose": true,
    "globals": {
      "UrlFetchApp": {}
    },
  },

とすることでグローバルにUrlFetchAppができますので、テストコードで

const mockFetch = jest.fn();
UrlFetchApp.fetch = mockFetch;

describe('sendSlackServiceOK', () => {
  it('sendImage', () => {
    const actual = SendSlackService.sendImage('test-token', 'test-image', 'test-title', '#test');
    const expectedOption = {
      method: 'post',
      payload: { token: 'test-token', file: 'test-image', channels: '#test', title: 'test-title' }
    };
    expect(mockFetch.mock.calls[0][0]).toBe('https://slack.com/api/files.upload');
    expect(mockFetch.mock.calls[0][1]).toEqual(expectedOption);
    expect(actual).toBe(true);
  });
});

とすることでfetch関数がmockに置き換わり、テスト可能です。

mock関数をあらかじめ作成しておくと、コールのassertも可能です。

Buildとdeploy

StarterではWebpackを使ってTypeSciptのGAS化を実行しているようです。

npm run build

とすることで、dist配下にGASのコードが配置されました。

デプロイは、claspを利用します。

clasp login
clasp push

とするだけでデプロイできちゃいます。

GitHub Actionで自動デプロイさせる

ここまできたらあとはCIに乗っけるだけです。

clasp loginをローカル上で実施したときに取得できるトークンがclasprc.jsonに出力されているので、こちらをGitHub ActionのSecret機能で渡してあげます。

img

あとは、testが通ったらclasp loginして、build, deployする定義をかけばよいです。

GitHub ActionのSecretにはこのようにアクセスします。

echo "${{ secrets.CLASPRC_JSON }}" > ~/.clasprc.json

完成!

GASにデプロイできたらcronでトリガーさせてあげれば定期的にキャプチャをとります。

やったー!!

無事にSlackへキャプチャが送られてきました!

Img

˚