mysqlで日付パーティションを追加するバッチの作成

よっしー

こんにちは。よっしーです(^^)

今日は、mysqlで日付パーティションを追加する方法についてご紹介します。

背景
作成ファイル一覧
1. aws/work/add_partition.sh
動作確認
解説
1. aws/work/add_partition.sh
おわりに

背景

mysqlの日付パーティションを調査した際に、検証環境の構築したときの内容を備忘として残しました。

この記事のソースは下記のリポジトリにあります。

GitHub - Gate-Yossi/Musica: 読み方：ムジカ

読み方：ムジカ. Contribute to Gate-Yossi/Musica development by creating an account on GitHub.

作成ファイル一覧

下記のファイルを作成しました。ファイルの内容は下記のセクションに記載しています。

aws/work/add_partition.sh

aws/work/add_partition.sh

#!/bin/bash

host='mysql'
user='root'
pass='P@ssw0rd'

db='sample'
tbl='test'

mysql_cmd="mysql -h${host} -u${user} -p${pass} -D${db}"

partition_info=$(${mysql_cmd} -sN <<EOL
SELECT TABLE_SCHEMA
     , PARTITION_NAME
     , PARTITION_ORDINAL_POSITION
     , PARTITION_EXPRESSION
     , PARTITION_DESCRIPTION
     , TABLE_ROWS
  FROM INFORMATION_SCHEMA.PARTITIONS
 WHERE TABLE_NAME =  '${tbl}'
 ORDER BY PARTITION_DESCRIPTION DESC
 LIMIT 1
;
EOL
);

column=$(echo "${partition_info}" | awk '{print $4}')

max_p_name=$(echo "${partition_info}" | awk '{print $2}')

max_cond_date=$(echo "${partition_info}" | awk '{print $5}')
max_cond_date=${max_cond_date/\'/}

add_cond_date=$(date '+%Y-%m-%d' -d "${max_cond_date} 1 day")
add_p_name=p$(date '+%Y%m%d' -d "${max_cond_date}")

${mysql_cmd} <<EOL
ALTER TABLE \`${tbl}\` ADD PARTITION (
    PARTITION ${add_p_name} VALUES LESS THAN ('${add_cond_date} 00:00:00')
);
EOL

cat <<EOL
success !!
$column
MAX : ${max_p_name} ( LESS THAN ${max_cond_date} )
ADD : ${add_p_name} ( LESS THAN ${add_cond_date} )
EOL

動作確認

下記のコマンドを実行します。

make build
make up
make login_aws
cd /work

下記のコマンドで日付パーティションが追加されます。

bash add_partition.sh

bash-5.2# bash add_partition.sh 
mysql: [Warning] Using a password on the command line interface can be insecure.
mysql: [Warning] Using a password on the command line interface can be insecure.
success !!
`date_at`
MAX : p20231022 ( LESS THAN 2023-10-23 )
ADD : p20231023 ( LESS THAN 2023-10-24 )

解説

aws/work/add_partition.sh

このスクリプトはBashスクリプトで、MySQLデータベース内のパーティションテーブルに新しいパーティションを追加する目的を持っています。以下はスクリプトの各部分の説明です：

スクリプトの冒頭では、MySQLの接続情報が設定されています。host、user、pass、db、tbl変数にそれぞれホスト、ユーザー、パスワード、データベース、テーブルの情報が設定されています。
mysql_cmd変数にMySQLクライアントのコマンドが構築されています。これにより、MySQLデータベースへの接続が確立されます。
partition_info変数には、mysql_cmdを使用してMySQLデータベースにクエリを送信し、テーブルのパーティション情報を取得するためのSQLクエリが実行されています。取得された情報は、テーブルのスキーマ、パーティション名、パーティション順序などを含みます。awkコマンドを使用して、特定の列の値を変数に格納しています。
max_cond_date変数は、最大のパーティション条件を表す日付を取得します。この日付に1日を追加して、新しいパーティションの条件日付を計算します。
add_p_name変数は、新しいパーティション名を生成します。日付情報を使用して、新しいパーティション名をpYYYYMMDDの形式で作成します。
ALTER TABLEクエリを使用して、新しいパーティションをテーブルに追加します。新しいパーティションは、指定された日付を基準に作成され、それ以前のデータは既存のパーティションに格納されます。
最後に、スクリプトは成功メッセージを表示し、追加されたパーティションとその条件を示します。