学习笔记之数据批量导入（二）

          由于近期在研究数据的批量导入，为了提高程序效率，我们使用SqlBulkCopy会使程序效率得到极大提高，但今天我们这里讨论的不是SqlBulkCopy的使用，如需了解SqlBulkCopy，请查看我的另一篇文章：学习笔记之向数据库批量插入数据，今天主要要说的是我在做数据从一张表导入另一张表时从数据库读取数据速度的问题。

数据库表：

使用SqlDataReader和SqlDataAdapter读取数据 （表中有100000条数据）

 static void Main(string[] args)
        {
            string sql = "select * from News";
            DateTime t5 = DateTime.Now;
            DataTable dt1 = GetTableReader(sql);
            DateTime t6 = DateTime.Now;

            DateTime t3 = DateTime.Now;
            DataTable dt = GetTable(sql);
            DateTime t4 = DateTime.Now;

            dt.TableName = "News2";
            dt.Columns["newsId"].ColumnName = "Id";
            dt.Columns["newsName"].ColumnName = "Content";
            dt.Columns["newsTime"].ColumnName = "Date";
            Console.WriteLine("SqlDataReader 所用时间：" + (t6 - t5).TotalSeconds);
            Console.WriteLine("SqlDataAdapter 所用时间：" + (t4 - t3).TotalSeconds);
                                Console.ReadKey();
        }

  public static DataTable GetTableReader(string SQLString)
        {
            string connectionString = "Server=GOUMINGHON;database=Test2;uid=sa;pwd='12345678'";
            using (SqlConnection connection = new SqlConnection(connectionString))
            {
                DataTable dt = new DataTable();
                try
                {
                    connection.Open();
                    SqlCommand cmd = new SqlCommand(SQLString, connection);
                    SqlDataReader reader = cmd.ExecuteReader();
                    //dt.Load(reader);//加入这条语句返回datatable效率没有SqlDataAdapter高
                }
                catch (System.Data.SqlClient.SqlException ex)
                {
                    throw new Exception(ex.Message);
                }
                return dt;
            }
        }

public static DataTable GetTable(string SQLString)
        {
            string connectionString = "Server=GOUMINGHON;database=Test2;uid=sa;pwd='12345678'";
            using (SqlConnection connection = new SqlConnection(connectionString))
            {
                DataTable dt = new DataTable();
                try
                {
                    connection.Open();
                    SqlDataAdapter command = new SqlDataAdapter(SQLString, connection);
                    command.Fill(dt);
                }
                catch (System.Data.SqlClient.SqlException ex)
                {
                    throw new Exception(ex.Message);
                }
                return dt;
            }
        }

结果：

     很明显 SqlDataReader 的读取速度更快，那么，我就想：如果能将SqlDataReader读取的数据首先用DataTable保存起来，是否比SqlDataAdapter效率更高呢？

于是，在GetTableReader(string SQLString)中加入一句：dt.Load(reader);（上面代码中注释的）将读出来的数据放入dt中，再次运行项目得出以下结果：

    很显然和上面的结果是相反的，所以 SqlDataReader只适合读取数据，如果在项目中我们只是读取数据而不做其他操作，那么用 SqlDataReader效率更高，而要对读取的数据进行操作，那么最好还是选取SqlDataAdapter，效率更高。