黎波

Windows Mobile Development for Line of Business
posts - 180, comments - 1045, trackbacks - 34, articles - 0
  博客园 :: 首页 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理

如何将数据导入到 SQL Server Compact Edition 数据库中（五）

Posted on 2008-03-05 01:53 黎波 阅读(2149) 评论(17)  编辑 收藏 所属分类: Smart Client 、SQL Server CE

系列文章导航：
如何将数据导入到 SQL Server Compact Edition 数据库中（一）
如何将数据导入到 SQL Server Compact Edition 数据库中（二）
如何将数据导入到 SQL Server Compact Edition 数据库中（三）
如何将数据导入到 SQL Server Compact Edition 数据库中（四）

摘要：在本系列文章中，我已经尝试在 Windows 桌面平台和 Windows Mobile 平台上将数据导入到 SQL Server Compact Edition 数据库中。不过，之前的示例程序都属于 Windows 应用程序。本文将介绍如何在 ASP.NET Web 应用程序中实现 SQL Server Compact Edition 数据库的生成和数据导入。

一、创建 ASP.NET 版的数据导入程序

1.使用 Visual Studio 2005 新建一个 Visual C# 版本的“ASP.NET Web 应用程序”项目，项目名称为“CopyTableASPNET”。

2.为新建的“CopyTableASPNET”项目添加对 System.Data.SqlServerCe.dll 程序集的引用，注意版本号是 9.0.242.0。这里特别声明版本号是考虑到大家可能安装了 Visual Studio 2008，它自带了最新的 SQL Server Compact 3.5，版本号是 3.5.0.0，可能也会出现在添加引用对话框中。而本文的示例是针对 SQL Server 2005 Compact Edition (v3.1) 编写的，程序集版本号为 9.0.242.0。



3.在“解决方案资源管理器”打开 Default.aspx 页面，默认显示的是 HTML 代码视图，需要切换到设计视图。从工具箱拖拽一个 Button 控件到页面上，修改其 Text 属性为“生成 SQL Server Compact 数据库”。

4.打开 Default.aspx 页面的 C# 代码编辑视图，或者直接打开 Default.aspx.cs 文件。从本系列文章第四篇的示例代码中，复制 From1.cs 文件的 GetTableNames, CopyTable, VerifyDatabaseExists, GenerateTableSchemaSql, GetSqlCeDataType 和 GetSqlCeNativeType 等方法到 Default.aspx.cs 文件中。

5.回到 Default.aspx 页面的设计视图，用鼠标双击 Button 控件，此时会跳到 Default.aspx.cs 的代码编辑视图，并生成了 Button 控件的 Click 事件处理方法。将以下代码复制到 Click 事件处理方法中：

// 创建源 SQL Server 数据库连接对象
string srcConnString = "Data Source=(local);Initial Catalog=Northwind;Integrated Security=True";
SqlConnection srcConnection = new SqlConnection(srcConnString);

// 创建目标 SQL Server Compact Edition 数据库连接对象
string destConnString = string.Format("Data Source={0};", Server.MapPath("Northwind.sdf"));
SqlCeConnection destConnection = new SqlCeConnection(destConnString);

VerifyDatabaseExists(destConnString);

srcConnection.Open();
destConnection.Open();

// 复制数据
string[] tableNames = GetTableNames(srcConnection);
string query;
for (int i = 0; i < tableNames.Length; i++)
{
    query = string.Format("SELECT * FROM [{0}]", tableNames[i]);
    CopyTable(srcConnection, destConnection, query, tableNames[i]);
}

srcConnection.Close();
destConnection.Close();

// 重定向到生成的 Northwind.sdf 文件的 url 地址（使浏览器提示下载）
Response.Redirect("Northwind.sdf");

这段代码跟本系列文章第四篇的示例代码非常相似，大家注意代码中加亮的语句。

6.数据导入的代码已经编写完成，现在可以生成项目，并在浏览器中查看 Default.aspx 页面。



出错了！到底是什么原因呢？

二、解锁 SQL Server Compact Edition 对 ASP.NET 的支持

我在《SQL Server精简版支不支持ASP.NET？》曾经探讨过这个问题。“当前 SQL Server Compact Edition 并未针对网站数据库用途进行优化。默认情况下，在 SQL Server Compact Edition 中阻塞了来自 ASP.NET 应用程序的连接。SQL Server Compact Edition 经过优化后，可在应用程序中作为嵌入数据库使用。使用 SQL Server Compact Edition 作为网站数据库要求支持多用户和并发数据更改。这可能会导致性能问题。因此，不支持这些情形。其他版本的 SQL Server 2005（包括 SQL Server 2005 Express Edition）经过优化后，也可作为网站数据库使用。在使用 ASP.NET 创建 SQL Server Compact Edition 数据库以实现同步操作的应用方案中，SQL Server Compact Edition 可与 ASP.NET 配合使用。使用下列代码更改 SQL Server Compact Edition 的默认行为，以便与 ASP.NET 配合使用：AppDomain.CurrentDomain.SetData("SQLServerCompactEditionUnderWebHosting", true)”——引自《SQL Server 2005 Compact Edition 联机丛书》

7.为了解决步骤6出现的错误，我在 Default.aspx 页面上添加一个 CheckBox 控件 chkEnableSqlCe，并将它的 Text 属性设置为“允许在 ASP.NET 使用 SQL Server Compact”。在 Default.aspx.cs 的 Page_Load 方法中添加以下代码：

if (chkEnableSqlCe.Checked)
{
    AppDomain.CurrentDomain.SetData("SQLServerCompactEditionUnderWebHosting", true);
}
else
{
    AppDomain.CurrentDomain.SetData("SQLServerCompactEditionUnderWebHosting", false);
}

8.重新编译项目，并浏览 Default.aspx 页面。页面加载完成后，选中“允许在 ASP.NET 使用 SQL Server Compact”检查框，再点击“生成 SQL Server Compact 数据库”按钮。此时，Default.aspx 页面将在后台生成 SQL Server Compact Edition 数据库文件 Northwind.sdf，并从 SQL Server 服务器的 Northwind 数据库导入数据，最后将提示您下载 Northwind.sdf 文件。



三、总结

在很多场景中，我们可以使用 ASP.NET 根据各种条件在服务器端快速生成 SQL Server Compact Edition 数据库文件(.sdf)，并从数据库服务器导入初始数据，再将动态生成的数据库文件提供给客户端程序下载。这样可以加速和简化 Windows Mobile 应用程序初始化本地数据库的过程，因为只需要传输文件而不需要进行复杂的数据同步。本文介绍的方案并没有结束，实际上 SQL Server Compact Edition 数据库文件的压缩率是很高的。例如：本文的示例代码生成的 Northwind.sdf 文件是 788 KB，经过 ZIP 标准压缩后生成的 Northwind.zip 文件是 228 KB。为了减少数据传输流量，同时也是为了节约时间，我们还可以对生成的数据库文件进行压缩后，再提供给客户端下载，客户端再对文件进行解压缩。

示例代码下载：sqlce_data_import5.rar

作者：黎波
博客：http://upto.cnblogs.com/
日期：2008年3月5日

Feedback

#1楼    回复  引用  查看    

2008-03-05 08:30 by appleseeker      
终于等到第5篇了。

#2楼    回复  引用  查看    

2008-03-05 09:33 by 毁于随      
支持.原来还有这个问题.

#3楼    回复  引用  查看    

2008-03-05 12:45 by fox23      
快点写完我好收藏 :-)

#4楼    回复  引用  查看    

2008-03-11 09:19 by 大双      
期待你的下一篇佳作。。。
写的太好了。。
只是我想知道如何进行从Oracle服务器中下载数据呢？之前我按照文章4做的还是不行。。现在采用的是Oracle导入到sql server，然后Sql server到sqlce。。
比较繁琐。。。
望指点。。

#5楼 [楼主]   回复  引用  查看    

2008-03-11 13:40 by 黎波      
@大双
Oracle的参数跟SQL Server不同，你只要把下面这句：
param = "@" + ((string)schemaRow["ColumnName"]).Replace(" ", "_"); //参数名称
改为：
param = ":" + ((string)schemaRow["ColumnName"]).Replace(" ", "_"); //参数名称
应该就可以了。

#6楼    回复  引用  查看    

2008-03-17 17:27 by 痛苦的人 [未注册用户]
黎波,你好，像你请教一个问题
我是和oracle相连，通过webservers将查询出来的数据集放在DataSet里，然后再插入sqlce里，目前出现问题是：插入速度太慢需要进行优化，代码如果下：
sql = "select * from XXtable";
ds=new DataSet();
//通过调用Web Service 得到数据集
ds = gt.GetDataSetBySql("strConnection_USER",sql,ConfigurationSettings.AppSettings.Get("device_id"),code_fm_main.login,code_fm_main.user,code_fm_main.pas);

if(ds.Tables[0].Rows.Count > 0)
{
for(int i=0;i<ds.Tables[0].Rows.Count;i++)
{
cmd.CommandText = "INSERT INTO PDA_STAND_CONTENT (CATEGORY_ID ,CONTENT) VALUES (?,?)";

cmd.Parameters.Add(new SqlCeParameter("p1", SqlDbType.Int));
cmd.Parameters.Add(new SqlCeParameter("p2", SqlDbType.NText));
cmd.Parameters["p2"].Size = ds.Tables[0].Rows[i]["CONTENT"].ToString().Length;
cmd.Prepare();
cmd.Parameters["p1"].Value = ds.Tables[0].Rows[i]["CATEGORY_ID"].ToString().Trim();
if(ds.Tables[0].Rows[i]["CONTENT"].ToString().Length > 0)
cmd.Parameters["p2"].Value = ds.Tables[0].Rows[i]["CONTENT"].ToString().Trim();
else
cmd.Parameters["p2"].Value = DBNull.Value;

cmd.ExecuteNonQuery();
cmd.Parameters.Clear();
}
不知道有没有其他更快的插入方法，方便下载数据，目前数据量一大，下载就需要1个多小时，表有七八张，每张有十几个字段。

#7楼    回复  引用  查看    

2008-03-17 17:29 by ssch [未注册用户]
看了您的如何将数据导入到ssce数据库的系列文章,学到了不少知识,想问个问题,我的需求是:windows mobile 6操作系统的pda作为平台,先把数据保存到手机上,然后在连到线上时更新我手机里的数据到sql server2005数据库中,因为断线期间我肯定是做了某些单据的审批什么的,而没有提交的sql server2005数据库中,只是暂时保存到了手机,这个该如何实现,讲一下原理就行,谢谢...

#8楼 [楼主]   回复  引用  查看    

2008-03-17 19:27 by 黎波      
@ssch
可以使用RDA或MergeReplication实现数据同步，也可以使用Sync Services for ADO.NET 1.0，还可以自己实现WebService的同步。

#9楼 [楼主]   回复  引用  查看    

2008-03-17 22:49 by 黎波      
@痛苦的人
你可以参考本文的方法，在服务器端导入好数据之后，再用HTTP方式下载数据库文件下来。

#10楼    回复  引用  查看    

2008-03-18 11:40 by 痛苦的人 [未注册用户]
@黎波
我们用的数据库是ORACLE的，能再服务器端导入数据么？还要再在WEB段搭建一个SQL SERVER然后再导入？请教

#11楼 [楼主]   回复  引用  查看    

2008-03-18 12:17 by 黎波      
@痛苦的人
Oracle其实也一样的，都是用ADO.NET访问。你把本系列文章都看一遍吧。

#12楼    回复  引用  查看    

2008-03-18 19:18 by tdskee [未注册用户]
upto:我想请教下,在你这一系列的文章中,全部都是用的sqlce3.1,能不能用sqlce2.0呢??

#13楼 [楼主]   回复  引用  查看    

2008-03-18 21:38 by 黎波      
@tdskee
不能，因为sqlce2.0不支持桌面操作系统。

#14楼    回复  引用  查看    

2008-03-18 23:06 by toney.wu [未注册用户]
我现在导入数据的时候用的是RDA，因为RDA中有建立索引的功能
而且性能也不错
你这几篇文章中没有关于如何同步之前建立数据的索引
能不能新增一点功能，在建立目标数据库的时候跟RDA的功能一样，可以建立索引啊
因为如果Mobile数据库没有建立索引的话 查询速度会非常慢 相比与有索引的
特别是查询条件是字符串类型的时候

#15楼    回复  引用  查看    

2008-03-19 09:00 by 毁于随      
从代码上来讲,你这样做有一些性能上的损失:
你把Command的CommandText和Parameters集合的处理放在循环里了,应该放在外面.在循环里只要赋值就可以了.
--引用--------------------------------------------------
痛苦的人: 黎波,你好，像你请教一个问题
我是和oracle相连，通过webservers将查询出来的数据集放在DataSet里，然后再插入sqlce里，目前出现问题是：插入速度太慢需要进行优化，代码如果下：
sql = &quot;select * from XXtable&quot;;
ds=new DataSet();
//通过调用Web Service 得到数据集
ds = gt.GetDataSetBySql(&quot;strConnection_USER&quot;,sql,ConfigurationSettings.AppSettings.Get(&quot;device_id&quot;),code_fm_main.login,code_fm_main.user,code_fm_main.pas);

if(ds.Tables[0].Rows.Count &gt; 0)
{
for(int i=0;i&lt;ds.Tables[0].Rows.Count;i++)
{
cmd.CommandText = &quot;INSERT INTO PDA_STAND_CONTENT (CATEGORY_ID ,CONTENT) VALUES (?,?)&quot;;

cmd.Parameters.Add(new SqlCeParameter(&quot;p1&quot;, SqlDbType.Int));
cmd.Parameters.Add(new SqlCeParameter(&quot;p2&quot;, SqlDbType.NText));
cmd.Parameters[&quot;p2&quot;].Size = ds.Tables[0].Rows[i][&quot;CONTENT&quot;].ToString().Length;
cmd.Prepare();
cmd.Parameters[&quot;p1&quot;].Value = ds.Tables[0].Rows[i][&quot;CATEGORY_ID&quot;].ToString().Trim();
if(ds.Tables[0].Rows[i][&quot;CONTENT&quot;].ToString().Length &gt; 0)
cmd.Parameters[&quot;p2&quot;].Value = ds.Tables[0].Rows[i][&quot;CONTENT&quot;].ToString().Trim();
else
cmd.Parameters[&quot;p2&quot;].Value = DBNull.Value;

cmd.ExecuteNonQuery();
cmd.Parameters.Clear();
}
不知道有没有其他更快的插入方法，方便下载数据，目前数据量一大，下载就需要1个多小时，表有七八张，每张有十几个字段。
--------------------------------------------------------

#16楼 [楼主]   回复  引用  查看    

2008-03-19 09:40 by 黎波      
@毁于随
这种性能损失是有的，特别是造成很多内存垃圾。不过在他的案例中，下载需要1个多小时，这主要是因为单表的数据量太大，导致传输、序列化和反序列化DataSet用了很多内存和时间。我想他应该是在PC平台上做吧，如果是Mobile，应该会报内存不足的异常。

#17楼 [楼主]   回复  引用  查看    

2008-03-19 09:46 by 黎波      
@toney.wu
可以实现，但是要做到通用性强比较难，不同的数据库获取表索引信息的SQL不同。
我建议你目前可以在导入完成后，执行"Create Index ..."SQL语句创建。这样做有个好处就是你可以自己决定哪些字段需要建立索引，而不是把服务器数据库的索引照搬下来，毕竟索引建立多了会使得数据库变得很大，而且还会影响Update,Insert,Delete等数据操作的性能。
抱歉！目前正在将网站迁移至新服务器，暂时不能发表评论,由此给您带来了麻烦，请谅解!。
迁移期间,请在博客园社区交流。
联系邮件：cnblogs@126.com