DataReader を使用したクエリ
CData ADO.NET Provider for HDFS では、次の2つのネイティブ.NET インターフェースを使用して、HDFS からデータを取得できます。HDFSDataAdapter オブジェクトおよびHDFSDataReader オブジェクト。各オブジェクトは同じタスク(データの取得)を実行しますが、実行方法が異なります。HDFSDataAdapter オブジェクトはクエリに一致するすべてのデータを取得しますが、HDFSDataReader オブジェクトは必要に応じてインクリメントしながら一部のデータだけをフェッチします。
HDFSDataReader の使用
HDFSDataReader はページ単位でデータを取得できるため、HDFSDataAdapter よりもデータの取得が高速です。HDFSDataReader からデータを読み取っていくと、必要に応じて一定の間隔で、データソースからの結果の次のページが要求されます。このため、結果が高速に返されます。 次の例は、Files テーブルからすべてのカラムを選択します。
C#
string connectionString = "Host=sandbox-hdp.hortonworks.com;Port=50070;Path=/user/root;"; using (HDFSConnection connection = new HDFSConnection(connectionString)) { HDFSCommand cmd = new HDFSCommand("SELECT * FROM Files", connection); HDFSDataReader rdr = cmd.ExecuteReader(); while (rdr.Read()) { Console.WriteLine(String.Format("\t{0} --> \t\t{1}", rdr["FileId"], rdr["ChildrenNum"])); } }
VB.NET
Dim connectionString As String = "Host=sandbox-hdp.hortonworks.com;Port=50070;Path=/user/root;" Using connection As New HDFSConnection(connectionString) Dim cmd As New HDFSCommand("SELECT * FROM Files", connection) Dim rdr As HDFSDataReader = cmd.ExecuteReader() While rdr.Read() Console.WriteLine([String].Format(vbTab & "{0} --> " & vbTab & vbTab & "{1}", rdr("FileId"), rdr("ChildrenNum"))) End While End Using