バッチ処理
CData ADO.NET Provider for Apache Hive では、ApacheHiveDataAdapters を通じて、Apache Hive の一括ロードサポートを活用することができます。Batch API を使用して、関連するSQL データ操作ステートメントを同時に実行できます。本製品 はバッチ内のすべてのSQL クエリを単一のリクエストに変換します。
ADO.NET Batch API の使用
バッチ更新を実行するには、次の基本的な手順を実行します。
- ApacheHiveCommand オブジェクトで、パラメータ化されたカスタムSQL ステートメントを定義します。
- ApacheHiveCommand オブジェクトのUpdatedRowSource プロパティを"UpdateRowSource.None" に設定します。
- ApacheHiveCommand オブジェクトをApacheHiveDataAdapter に割り当てます。
- パラメータをコマンドに追加します。
- ApacheHiveDataAdapter のUpdate メソッドを呼び出します。変更を含むDataSet またはDataTable を渡します。
バッチサイズの制御
要求のサイズ、ネットワークリソース、サーバーのパフォーマンスなどの要因に応じて、より小さなバッチ要求をいくつか実行することでパフォーマンスを向上させることができます。各バッチのサイズは、ApacheHiveDataAdapter のUpdateBatchSize プロパティを正の整数に設定することで制御できます。
一括INSERT
次のコードはレコードを一括で挿入する単一のバッチを準備します。。 この例では、"Added" 状態の新しいDataRows の一括INSERT を実行します。
C#
ApacheHiveDataAdapter adapter = new ApacheHiveDataAdapter(); using (ApacheHiveConnection conn = new ApacheHiveConnection("Server=127.0.0.1;Port=10000;TransportMode=BINARY")) { conn.Open(); adapter.InsertCommand = conn.CreateCommand(); adapter.InsertCommand.CommandText = "INSERT INTO [CData].[Default].Customers (CompanyName) VALUES (@CompanyName)"; adapter.InsertCommand.UpdatedRowSource = UpdateRowSource.None; adapter.InsertCommand.Parameters.Add("@CompanyName", "CompanyName"); DataTable batchDataTable = new DataTable(); batchDataTable.Columns.Add("CompanyName", typeof(string)); batchDataTable.Rows.Add("John Deere"); batchDataTable.Rows.Add("RSSBus Inc."); adapter.UpdateBatchSize = 2; adapter.Update(batchDataTable); }
VB.NET
Dim adapter As New ApacheHiveDataAdapter()
Using conn As New ApacheHiveConnection("Server=127.0.0.1;Port=10000;TransportMode=BINARY")
conn.Open()
adapter.InsertCommand = conn.CreateCommand()
adapter.InsertCommand.CommandText = "INSERT INTO [CData].[Default].Customers (City) VALUES (@CompanyName)"
adapter.InsertCommand.UpdatedRowSource = UpdateRowSource.None
adapter.InsertCommand.Parameters.Add("@CompanyName", "CompanyName")
Dim batchDataTable As New DataTable()
batchDataTable.Columns.Add("CompanyName", GetType(String))
batchDataTable.Rows.Add("RSSBus Inc.")
batchDataTable.Rows.Add("John Deere")
adapter.UpdateBatchSize = 2
adapter.Update(batchDataTable)
End Using
一括削除
次のコードは、レコードを一括で削除する単一のバッチを準備します。各行の主キーが必要です。次の例では、"Deleted" 状態のすべてのDataRow レコードに対してバッチを実行します。
C#
ApacheHiveDataAdapter adapter = new ApacheHiveDataAdapter();
using (ApacheHiveConnection conn = new ApacheHiveConnection("Server=127.0.0.1;Port=10000;TransportMode=BINARY")) {
conn.Open();
adapter.DeleteCommand = conn.CreateCommand();
adapter.DeleteCommand.CommandText = "DELETE FROM [CData].[Default].Customers WHERE _id=@_id";
adapter.DeleteCommand.Parameters.Add("@_id", "_id");
adapter.DeleteCommand.UpdatedRowSource = UpdateRowSource.None;
adapter.UpdateBatchSize = 2;
adpater.Update(table);
}
VB.NET
Dim adapter As New ApacheHiveDataAdapter()
Using conn As New ApacheHiveConnection("Server=127.0.0.1;Port=10000;TransportMode=BINARY")
conn.Open()
adapter.DeleteCommand = conn.CreateCommand()
adapter.DeleteCommand.CommandText = "DELETE FROM [CData].[Default].Customers WHERE _id=@_id"
adapter.DeleteCommand.Parameters.Add("@_id", "_id")
adapter.DeleteCommand.UpdatedRowSource = UpdateRowSource.None
adapter.UpdateBatchSize = 2
adpater.Update(table)
End Using