-
データロード
「Too many ROS containers」エラーの対処方法
はじめにROSコンテナが上限値に達した場合は、以下のエラーが発生します。 <ERROR> @v_rebodb_node0001: 53000/5065: Too many ROS containers exist for the following projections:public.TEST1_sup...
- #ROS
-
データロード
COPYのデータ変換でエラー時に処理を継続させる方法
はじめに本記事では、COPYでFILLER関数を使用してデータ変換時にエラーが発生した場合、処理を継続させる方法をご紹介します。FILLER関数に関しては、以下の情報を参照ください。「データロード時に関数などを使...
- #COPY
- #関数
-
データロード
データ更新が伴うデータロード処理について
はじめにVerticaではアーキテクチャの関係上、大量データのロード処理はINSERTではなくCOPYコマンドを利用することが推奨されていますが、日々のバッチ処理等において、既存データへの更新処理が発生する場合の手...
- #COPY
-
データロード
改行をデータとしてロードする方法②
はじめに改行データをロードする場合は、COPYコマンドのパラメータでレコード終端文字を指定する必要があります。指定したレコード終端文字がテーブルのデータ内に含まれている場合はロードエラーになるため、デ...
- #COPY
- #データロード
-
データロード
ロード処理のエラー内容をテーブルに出力する方法
はじめにCOPYコマンドのエラー内容とエラーデータは、ファイルに出力する方法とテーブルに出力する方法があります。本記事では、COPYコマンドのエラー内容とエラーデータをテーブルに出力する方法をご紹介します...
- #COPY
-
技術情報
データロード
データロード処理のエラー内容をファイル出力する方法
はじめにデータロード(COPYコマンド)のエラー内容はエラーログファイルやエラーレコードファイルに記録されます。ただし、上記ファイルの出力有無や出力先は、COPYコマンドのパラメータの指定内容によって異な...
- #COPY
-
データロード
Verticaのデータロード方法
はじめにVerticaにデータロードを行うコマンドとして以下の2つが用意されています。 ・INSERT ・COPY本記事ではそれぞれのコマンドの基本的な使用方法をご案内します。INSERTとCOPYの使い分けデータロード方式は...
- #COPY
-
データロード
圧縮されたファイルをCOPYコマンドでロードする方法
はじめに下記の圧縮形式のファイルは、COPYコマンドでオプションを指定することで、解凍せずにロードすることが可能です。[圧縮形式] ・BZIP ・GZIP ・LZO以下に、COPYコマンドで圧縮したファイルをロードする方...
- #COPY
-
データロード
ネストされたデータを持つJSONファイルをFlex Tableへロードする
はじめにVerticaにはFlex Tableという、半構造化データをそのままロードできる機能がありますが、このFlex Table機能では、ネストされたデータを持つJSONファイルもそのままロードできます。Flex Tableの基本につ...
- #Flex Table
- #半構造化データ
- #JSON
-
データロード
CSVフォーマットのパーサを使用してロードする方法
はじめにデータロードに関する開発作業を進める際、ロード対象データのフォーマットとCOPYコマンドのパラメータ調整が大変な場合があります。 本記事では、RFC4180に準拠したCSVフォーマットのデータをロードする...
- #COPY
- #エスケープ文字