DataReader を使用したクエリ
CData ADO.NET Provider for HDFS では、次の2つのネイティブ.NET インターフェースを使用して、HDFS からデータを取得できます。HDFSDataAdapter オブジェクトおよびHDFSDataReader オブジェクト。各オブジェクトは同じタスク(データの取得)を実行しますが、実行方法が異なります。HDFSDataAdapter オブジェクトはクエリに一致するすべてのデータを取得しますが、HDFSDataReader オブジェクトは必要に応じてインクリメントしながら一部のデータだけをフェッチします。
HDFSDataReader の使用
HDFSDataReader はページ単位でデータを取得できるため、HDFSDataAdapter よりもデータの取得が高速です。HDFSDataReader からデータを読み取っていくと、必要に応じて一定の間隔で、データソースからの結果の次のページが要求されます。このため、結果が高速に返されます。 次の例は、Files テーブルからすべてのカラムを選択します。
C#
string connectionString = "Host=sandbox-hdp.hortonworks.com;Port=9870;Path=/user/root;";
using (HDFSConnection connection = new HDFSConnection(connectionString)) {
HDFSCommand cmd = new HDFSCommand("SELECT * FROM Files", connection);
HDFSDataReader rdr = cmd.ExecuteReader();
while (rdr.Read()) {
Console.WriteLine(String.Format("\t{0} --> \t\t{1}", rdr["FileId"], rdr["ChildrenNum"]));
}
}
VB.NET
Dim connectionString As String = "Host=sandbox-hdp.hortonworks.com;Port=9870;Path=/user/root;"
Using connection As New HDFSConnection(connectionString)
Dim cmd As New HDFSCommand("SELECT * FROM Files", connection)
Dim rdr As HDFSDataReader = cmd.ExecuteReader()
While rdr.Read()
Console.WriteLine([String].Format(vbTab & "{0} --> " & vbTab & vbTab & "{1}", rdr("FileId"), rdr("ChildrenNum")))
End While
End Using