INSERT INTO SELECT ステートメント
Apache Hive への1回の要求で複数の挿入処理を実行するには、INSERT INTO SELECT 構文を使用して、データの一時テーブルをApache Hive に挿入します。このとき、Apache Hive に送信されるデータは、まず一時テーブルに入力されます。挿入するデータがすべて一時テーブルに入力されたら、そのテーブルがApache Hive のテーブルに渡されます。
一時テーブルへの入力
入力先の一時テーブルは動的なテーブルで、実行時に最初のデータをテーブルに入力するときに作成されます。一時テーブルは、その名前に「#」を付加して示されます。一時テーブルを使用してデータを挿入する場合、その一時テーブルには「[TableName]#TEMP」という形式で名前を付ける必要があります。「TableName」は、データを挿入するテーブルの名前です。
次に例を示します。
INSERT INTO [CData].[Default].Customers#TEMP (CompanyName, MyCustomField__c) VALUES ('New Customers', '9000'); INSERT INTO [CData].[Default].Customers#TEMP (CompanyName, MyCustomField__c) VALUES ('New Customers 2', '9001'); INSERT INTO [CData].[Default].Customers#TEMP (CompanyName, MyCustomField__c) VALUES ('New Customers 3', '9002');
このコードでは、2つのデータカラムと3つのデータ行を含む「[CData].[Default].Customers#TEMP」という名前の一時テーブルが作成されます。一時テーブルでは型を指定できないため、すべての値が文字列としてメモリに保存されます。これらの値の型は、[CData].[Default].Customers テーブルに送信された後で正しい型に変換されます。
実際のテーブルへの挿入
一時テーブルにデータが入力されたら、Apache Hive の実際のテーブルに対して挿入を実行します。そのためには、実際のテーブルへの挿入(INSERT)を実行し、一時テーブルから入力データを選択します。次に例を示します。
INSERT INTO [CData].[Default].Customers (CompanyName, MyCustomField__c) SELECT CompanyName, MyCustomField__c FROM [CData].[Default].Customers#TEMPこの例では、[CData].[Default].Customers#TEMP テーブルのすべての内容が[CData].[Default].Customers テーブルに渡されます。この結果、各要求で複数のINSERT を送信できるため、Apache Hive に送信される要求の数が少なくて済み、多くのレコードを挿入する場合のパフォーマンスが向上します。
結果
クエリの結果は、一時テーブルLastResultInfo#TEMP に保存されます。次に一時テーブルが渡されてデータが変更されると、このテーブルはクリアされて、データが再挿入されます。LastResultInfo#TEMP テーブルはスキーマが事前定義されていないことに注意してください。データを読み取る前に、実行時にそのメタデータを確認する必要があります。
一時テーブルの存続時間
一時テーブルは、接続が開いている間だけ存続します。Apache Hive への接続が閉じられると、LastResultInfo#TEMP テーブルを含むすべての一時テーブルがクリアされます。