はじめに

本記事は、SQL Profileの利用方法をご紹介します。

SQL Profileは、既存のテーブルで管理されているデータをスクリプトでチェックし、不必要に確保されているカラム長や、実データに合った最適なデータ型を確認することができるパッケージです。

Verticaは、クエリの実行時に実データ長ではなく、カラム長をもとにメモリを確保します。
不要にカラム長を大きくとりすぎた場合は、その分のメモリも確保するので、パフォーマンスは低下する(※)可能性があります。

このような場合に、SQL Profileの実行結果をもとに、最適なデータ型、カラム長を再設定することで、パフォーマンスの改善が期待できます。

(※)カラム長による性能劣化についての詳細は、以下リンク先をご参照ください。
https://www.ashisuto.co.jp/cm/analytics-database/column_length.html

使用方法

利用スクリプト

SQL Profileに含まれるスクリプトは、以下のとおりです。

スクリプト実行手順

以下の手順にて、各カラムに格納されているデータのサイズ、実データに合った最適なデータ型を確認します。

Step1：SQL Profileのダウンロード
Step2：「tabsel.sql」の編集、実行
Step3：「profile.sql」の実行
Step4：出力された「out.sql」の確認

Step1：SQL Profileのダウンロード

 
以下リンク先のGitHubから、「tabsel.sql」、「profile.sql」ダウンロードし、任意のディレクトリに配置します。
※改行コードはLFに設定してください。
https://github.com/marco-the-sane/sqlprofile
 

Step2：「tabsel.sql」の編集、実行

 
テーブル定義を見直すスキーマ・テーブル名を 「tabsel.sql」 に記述します。

編集完了後、tabsel.sqlを実行し、「profile.sql」の実行に必要になる、tbidテーブルを作成します。

$ vsql -f tabsel.sql

作成されたテーブル 「tbid」 に、指定したテーブルがリストアップされていることを確認します。

SQL=> SELECT * FROM tbid;
/*** 実行例 ***/
table_schema | table_name | reduction_filter
-------------+------------+------------------ 
 public      | DATE1      |
 public      | PART       |
 public      | SUPPLIER   |
 public      | CUSTOMER   |
 public      | LINEORDER  |

Step3：「profile.sql」の実行

 
dbadminユーザで「profile.sql」を実行し、結果を 「out.sql」 へ出力します。

$ vsql -f profile.sql | tee out.sql

※profile.sql の実行にあたって、以下の注意事項をご確認ください。

・実行の際、dbadminユーザのパスワード入力を数回求められます。
・実行には高い負荷がかかります。
可能であればメンテナンス期間を設けてご実施いただくことをお勧めします。
・指定したテーブル数分のビューが作成されます。
例：「CUSTOMER」テーブルを指定した場合、「CUSTOMER_pv」ビューが作成されます。

Step4：出力された「out.sql」の確認

 
「out.sql」を開き、チェック対象で指定したスキーマ名に接尾辞 「_new」 がついた CREATE SCHEMA と、
最適化したデータ型・カラム長の CREATE TABLE が出力されていることを確認します。

参考情報

SQL Profile
https://github.com/marco-the-sane/sqlprofile

検証バージョンについて

この記事の内容はVertica 12.0で確認しています。

更新履歴

2022/12/26　本記事を公開