バッチ処理

CData ADO.NET Provider for Apache Hive では、ApacheHiveDataAdapters を通じて、Apache Hive の一括ロードサポートを活用することができます。Batch API を使用して、関連するSQL データ操作ステートメントを同時に実行できます。本製品はバッチ内のすべてのSQL クエリを単一のリクエストに変換します。

ADO.NET Batch API の使用

バッチ更新を実行するには、次の基本的な手順を実行します。

ApacheHiveCommand オブジェクトで、パラメータ化されたカスタムSQL ステートメントを定義します。
ApacheHiveCommand オブジェクトのUpdatedRowSource プロパティを"UpdateRowSource.None" に設定します。
ApacheHiveCommand オブジェクトをApacheHiveDataAdapter に割り当てます。
パラメータをコマンドに追加します。
ApacheHiveDataAdapter のUpdate メソッドを呼び出します。変更を含むDataSet またはDataTable を渡します。

バッチサイズの制御

要求のサイズ、ネットワークリソース、サーバーのパフォーマンスなどの要因に応じて、より小さなバッチ要求をいくつか実行することでパフォーマンスを向上させることができます。各バッチのサイズは、ApacheHiveDataAdapter のUpdateBatchSize プロパティを正の整数に設定することで制御できます。

一括挿入

次のコードはレコードを一括で挿入する単一のバッチを準備します。。この例では、"Added" 状態の新しいDataRows の一括挿入を実行します。

ApacheHiveDataAdapter adapter = new ApacheHiveDataAdapter();

using (ApacheHiveConnection conn = new ApacheHiveConnection("Server=127.0.0.1;Port=10000;TransportMode=BINARY")) {
  conn.Open();
  adapter.InsertCommand = conn.CreateCommand();
  adapter.InsertCommand.CommandText = "INSERT INTO [CData].[Default].Customers (CompanyName) VALUES (@CompanyName)";
  adapter.InsertCommand.UpdatedRowSource = UpdateRowSource.None;
  adapter.InsertCommand.Parameters.Add("@CompanyName", "CompanyName");

  DataTable batchDataTable = new DataTable();
  batchDataTable.Columns.Add("CompanyName", typeof(string));
  batchDataTable.Rows.Add("John Deere");
  batchDataTable.Rows.Add("RSSBus Inc.");
  adapter.UpdateBatchSize = 2;
  adapter.Update(batchDataTable);
}

VB.NET

 
Dim adapter As New ApacheHiveDataAdapter()

Using conn As New ApacheHiveConnection("Server=127.0.0.1;Port=10000;TransportMode=BINARY")
  conn.Open()
  adapter.InsertCommand = conn.CreateCommand()
  adapter.InsertCommand.CommandText = "INSERT INTO [CData].[Default].Customers (City) VALUES (@CompanyName)"
  adapter.InsertCommand.UpdatedRowSource = UpdateRowSource.None
  adapter.InsertCommand.Parameters.Add("@CompanyName", "CompanyName")

  Dim batchDataTable As New DataTable()
  batchDataTable.Columns.Add("CompanyName", GetType(String))
  batchDataTable.Rows.Add("RSSBus Inc.")
  batchDataTable.Rows.Add("John Deere")
  adapter.UpdateBatchSize = 2
  adapter.Update(batchDataTable)
End Using

一括削除

次のコードは、レコードを一括で削除する単一のバッチを準備します。各行の主キーが必要です。次の例では、"Deleted" 状態のすべてのDataRow レコードに対してバッチを実行します。

ApacheHiveDataAdapter adapter = new ApacheHiveDataAdapter();

using (ApacheHiveConnection conn = new ApacheHiveConnection("Server=127.0.0.1;Port=10000;TransportMode=BINARY")) {
  conn.Open();
  adapter.DeleteCommand = conn.CreateCommand();
  adapter.DeleteCommand.CommandText = "DELETE FROM [CData].[Default].Customers WHERE _id=@_id";
  adapter.DeleteCommand.Parameters.Add("@_id", "_id");
  adapter.DeleteCommand.UpdatedRowSource = UpdateRowSource.None; 
  adapter.UpdateBatchSize = 2;
  adpater.Update(table);
}

VB.NET

Dim adapter As New ApacheHiveDataAdapter()

Using conn As New ApacheHiveConnection("Server=127.0.0.1;Port=10000;TransportMode=BINARY")
  conn.Open()
  adapter.DeleteCommand = conn.CreateCommand()
  adapter.DeleteCommand.CommandText = "DELETE FROM [CData].[Default].Customers WHERE _id=@_id"
  adapter.DeleteCommand.Parameters.Add("@_id", "_id")
  adapter.DeleteCommand.UpdatedRowSource = UpdateRowSource.None 
  adapter.UpdateBatchSize = 2
  adpater.Update(table)
End Using