-
データロード
新バージョン/機能
S3のデータをVerticaにロードする～セッションレベルでのAWSパラメータ設定～(Vertica 9.1新機能)
はじめにVertica 9.0では、S3からデータロードをする際にデータベースレベルでリージョンなどのAWSパラメータの設定を行う必要がありました。9.1からは、セッションレベルでのパラメータ設定が可能となり、データ...
- #AWS
- #COPY
- #パラメータ
- #セッション
-
データロード
S3のデータをVerticaにロードする/外部テーブルを使用してS3内のデータファイルを検索する
はじめにVerticaをAWS上で利用している場合、以下のS3ダイレクト連携機能を利用することが可能です。①S3内のデータファイルをVerticaにロードする②外部テーブルを使用してS3内のデータファイルを検索する事前準備...
- #AWS
-
データロード
一般ユーザでCOPYコマンドを利用する方法
はじめにVerticaでデータロードを実施する際、一般的にCOPYコマンドを利用します。COPYコマンドはスーパーユーザ(dbadmin)であれば事前準備なく実行できますが、データロード用ユーザ等、一般ユーザでデータロー...
- #COPY
- #権限
-
データロード
VSQLを使用してAWSのS3からロードする方法
はじめにVerticaでAWSのS3からデータロードすることはVertica7.2.2から可能になりました。VSQLを使用してAWSのS3からデータをロードする手順をご紹介します。AWSのS3に保存されているCSVをロードする手順１．Vert...
- #AWS
- #vsql
- #COPY
-
データロード
HDFS上のデータをVerticaのテーブルにロードする方法(Hadoop連携)
はじめにVerticaには、以下のようなHadoopと連携する機能が実装されています。・HDFSコネクタ：HDFS上のファイルをVerticaに簡単にロード・External Table：VerticaにロードすることなくHDFS上のファイルをSQLで...
- #Hadoop
-
データロード
JSONデータをVerticaのテーブルにロードする方法(Flex Table 基本編)
はじめにHadoopやSparkに格納されるログデータ、IoTデバイス等からのセンサーデータなどは、半構造化データを採用していることが多いと言われます。多くのデータベースでは、これらのデータを事前に構造化データ...
- #Flex Table
- #半構造化データ
-
データロード
改行をデータとしてロードする方法
はじめにCOPYコマンドは、CSVデータ内の改行を1レコードの終端文字として扱います。以下のCSVデータは2レコード目に改行が含まれています。このCSVデータをデータロードしようとした場合、4レコードのデータが存...
- #COPY
- #データロード
-
データロード
Management Console
Management Consoleを使用してAWSのS3からロードする方法
はじめにVerticaでAWSのS3からデータロードすることはVertica7.2.2から可能になりました。さらに、Management Consoleを使用してAWSのS3からデータをロードすることがVertica7.2.3から可能になりましたので、その...
- #AWS
- #COPY
-
データロード
データロード時に関数などを使用しロードする方法
COPYコマンドで関数などを使用してロードする方法をご紹介します。概要データをCOPYコマンドを使用してロードする場合、そのままデータをロードするだけでなく、関数などを使用してデータを編集してロードするこ...
- #COPY
- #関数
-
データロード
新バージョン/機能
テーブルにデフォルトのロード方式を設定する方法(8.0新機能)
はじめにVertica7.2.3までは、データをバルクロードでロードしたい場合等、COPY文やINSERT文に、ロード方式のオプションを指定する必要がありました。Vertica8.0.0より、CREATE TABLE/ALTER TABLE文で、テーブル...
- #テーブル
データロード
