ラズパイ4+Seleniumで定期的に情報を取得し、GoogleSheetsAPIを使って集計する

$ sudo apt-get install -y git
$ sudo git --version

$ git clone https://{Token Name}:{Access Token}@gitlab.com/XXXXXXXX/YYYYYYYYYYYYYYYY.git
Cloning into 'YYYYYYYYYYYYYYYY'...

$ git pull

$ git remote set-url origin https://{Token Name}:{Access Token}@gitlab.com/

# 設定されている filemode を確認
$ git config core.filemode

# filemode を設定
$ git config --local core.filemode false

$ sudo apt install python3-venv
$ python3 -m venv .python3_venv
$ source .python3_venv/bin/activate

$ pip install selenium
$ sudo apt install chromium-chromedriver

$ which chromedriver
/usr/bin/chromedriver

$ sudo apt-get dist-upgrade chromium-browser

$ pip install python-dotenv

import os
from dotenv import load_dotenv

# .envファイルの内容を読み込む
load_dotenv()

# ユーザID、パスワードを設定
username = (os.environ.get('USER_ID'),)

#!/bin/bash

# シェルの位置にカレントディレクトリを移動させる
cd `dirname ${0}`

CLIENT_ID="" # クライアントID
CLIENT_SECRET="" # クライアントシークレット
SCOPE="" # スコープ

# クライアントIDを取得
echo -n "クライアントIDを入力:"
read CLIENT_ID

# クライアントシークレット
echo -n "クライアントシークレットを入力:"
read CLIENT_SECRET

# jsonフォルダ作成
mkdir -p json

# クライアント情報を保存（client.jsonに保存）
echo "{\n \"client_id\": \"${CLIENT_ID}\",\n \"client_secret\": \"${CLIENT_SECRET}\"\n }" > json/client.json

# スコープを取得
echo -n "Scopeを入力:"
read SCOPE

# 認証用URLを表示
REDIRECT_URI="urn:ietf:wg:oauth:2.0:oob" # HTTPサーバを起動しなくてもAuthorization_Codeを取得できる
AUTHORIZATION_CODE="" # 認可コード

echo "https://accounts.google.com/o/oauth2/v2/auth?response_type=code&client_id=$CLIENT_ID&redirect_uri=$REDIRECT_URI&scope=$SCOPE&access_type=offline"
echo -n "上記URLをブラウザでアクセスし、認可コードを入力:"
read AUTHORIZATION_CODE

# トークンの取得（refresh_token.jsonに保存）
curl --data "code=${AUTHORIZATION_CODE}" --data "client_id=${CLIENT_ID}" --data "client_secret=${CLIENT_SECRET}" --data "redirect_uri=${REDIRECT_URI}" --data "grant_type=authorization_code" --data "access_type=offline" https://www.googleapis.com/oauth2/v4/token > json/refresh_token.json

echo "設定完了！"

#! /bin/bash

# シェルの位置にカレントディレクトリを移動させる
cd `dirname ${0}`

# リフレッシュトークン取得
REFRESH_TOKEN=`cat json/refresh_token.json | jq -r '.refresh_token'`
echo "REFRESH_TOKEN: ${REFRESH_TOKEN}"

# リフレッシュトークンからアクセストークン取得
CLIENT_ID=`cat json/client.json | jq -r '.client_id'`
CLIENT_SECRET=`cat json/client.json | jq -r '.client_secret'`

curl --data "refresh_token=${REFRESH_TOKEN}" --data "client_id=${CLIENT_ID}" --data "client_secret=${CLIENT_SECRET}" --data "grant_type=refresh_token" https://www.googleapis.com/oauth2/v4/token > json/access_token.json

#! /bin/bash
# シェルの位置にカレントディレクトリを移動させる
cd `dirname ${0}`
# リフレッシュトークンからアクセストークンを取得
sh token.sh
ACCESS_TOKEN=`cat json/access_token.json | jq -r '.access_token'`
echo "ACCESS_TOKEN: ${ACCESS_TOKEN}"
# スプレッドシートに追記
# https://developers.google.com/sheets/api/reference/rest/v4/spreadsheets.values/append?hl=ja
SPREADSHEET_ID="XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX"
curl -H "Content-type: application/json" -H "Authorization: Bearer ${ACCESS_TOKEN}" -d \
'
{
  "values": [
    ["value1", "value2"]
  ]
}
' \
"https://sheets.googleapis.com/v4/spreadsheets/${SPREADSHEET_ID}/values/A1:A2000000:append?valueInputOption=USER_ENTERED&insertDataOption=INSERT_ROWS" > json/append.json

$ echo $PATH
/home/XXXXXXXX/.python3_venv/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/local/games:/usr/games

$ crontab -e

LANG=ja_JP.UTF-8
PATH=/home/XXXXXXXX/.python3_venv/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/local/games:/usr/games
42 15 * * * DISPLAY=:0.0 /home/XXXXXXXX/shellbattools/spreads/append_property.sh > /var/log/cron.log 2>&1

$ sudo /etc/init.d/cron status

$ journalctl -xe -f -u cron