[精品]SQLSERVER大容量数据导入导出浅析

SQLServer中bcp命令的⽤法以及数据批量导⼊导出0.参考⽂献：1.bcp命令参数解析bcp命令有许多参数，下⾯给出bcp命令参数的简要解析⽤法: bcp {dbtable | query} {in| out | queryout | format} 数据⽂件[-m 最⼤错误数][-f 格式化⽂件][-e 错误⽂件][-F ⾸⾏][-L 末⾏][-b 批⼤⼩][-n 本机类型] [-c 字符类型] [-w 宽字符类型][-N 将⾮⽂本保持为本机类型][-V ⽂件格式版本][-q 带引号的标识符][-C 代码页说明符][-t 字段终⽌符][-r ⾏终⽌符][-i 输⼊⽂件] [-o 输出⽂件] [-a 数据包⼤⼩][-S 服务器名称] [-U ⽤户名] [-P 密码][-T 可信连接] [-v 版本][-R 允许使⽤区域设置][-k 保留空值][-E 保留标识值][-h"加载提⽰"][-x ⽣成xml 格式化⽂件]其中最常⽤的已经⽤粉红⾊字体标注。

2.bcp命令实例这⾥我们以AdventureWorks样例数据库为例进⾏实验。

2.1.将表中数据导出到⼀个⽂件中（使⽤可信连接）bcp AdventureWorks.Sales.Currency out c:\Currency.dat -T -c上⾯的参数 out 表⽰输出⽂件，c:\Currency.dat是⽂件名和路径，-T表⽰可信连接，这个跟sqlcmd有点不同，在sqlcmd中使⽤-E表⽰可信连接。

-c表⽰以字符形式输出，如果使⽤-w的话，输出内容相同，但是输出⽂件的⼤⼩将增加⼀倍。

如果你要将导出的Currency.dat⽂件导⼊到⾮sql server数据库中，那么使⽤-w⽐较好。

2.2.将表中数据导出到⼀个⽂件中（使⽤混合模式⾝份验证）bcp AdventureWorks.Sales.Currency out c:\Currency.dat -c -Usa -Psa12345 -S.这个数据导出语句与前⾯的不同之处是，前⾯使⽤可信连接，也就是windows验证，不需要输⼊⽤户名和密码。

当我们建⽴⼀个数据库时，并且想将分散在各处的不同类型的数据库分类汇总在这个新建的数据库中时，尤其是在进⾏数据检验、净化和转换时，将会⾯临很⼤的挑战。

幸好SQL Server为我们提供了强⼤、丰富的数据导⼊导出功能，并且在导⼊导出的同时可以对数据进⾏灵活的处理。

在SQL Server中主要有三种⽅式导⼊导出数据：使⽤Transact-SQL对数据进⾏处理;调⽤命令⾏⼯具BCP处理数据;使⽤数据转换服务(DTS)对数据进⾏处理。

这三种⽅法各有其特点，下⾯就它们的主要特点进⾏⽐较。

⼀、使⽤⽅式的⽐较 1. 使⽤Transact-SQL进⾏数据导⼊导出 我们很容易看出，Transact-SQL⽅法就是通过 SQL语句⽅式将相同或不同类型的数据库中的数据互相导⼊导出或者汇集在⼀处的⽅法。

如果是在不同的SQL Server数据库之间进⾏数据导⼊导出，那将是⾮常容易做到的。

⼀般可使⽤SELECT INTO FROM和INSERT INTO。

使⽤ SELECT INTO FROM时INTO后跟的表必须存在，也就是说它的功能是在导数据之前先建⽴⼀个空表，然后再将源表中的数据导⼊到新建的空表中，这就相当于表的复制(并不会复制表的索引等信息)。

⽽INSERT INTO的功能是将源数据插⼊到已经存在的表中，可以使⽤它进⾏数据合并，如果要更新已经存在的记录，可以使⽤UPDATE。

SELECT * INTO table2 FROM table1 --table1和table2的表结构相同 INSERT INTO table2 SELECT * FROM table3 --table2和table3的表结构相同 当在异构数据库之间的进⾏数据导⼊导出时，情况会变得复杂得多。

⾸先要解决的是如何打开⾮SQL Server数据库的问题。

在SQL Server中提供了两个函数可以根据各种类型数据库的OLE DB Provider打开并操作这些数据库，这两个函数是OPENDATASOURCE和OPENROWSET。

SQLServer数据导入技巧详解SQL Server是一个著名的关系型数据库管理系统，可用于管理大量的数据。

在SQL Server中，数据的导入是很重要的，不仅要保证数据的完整性和准确性，也可能涉及到大量数据的导入和处理。

为了解决这个问题，本文将向你介绍SQL Server中的数据导入技巧。

数据源首先，需要准备好要导入的数据源。

SQL Server支持多种数据源格式，包括CSV、Excel、Access、文本文件等。

其中，CSV格式是最常用的一种格式。

CSV文件是使用逗号分隔的纯文本文件，可以使用文本编辑器打开和修改。

有些软件还支持用Excel导入CSV文件生成。

在使用CSV格式时，需要注意在字段中间不应该加上逗号。

如果有逗号，可以将该字段用双引号括起来。

Excel文件也是常见的数据源格式，但是使用Excel文件进行数据导入，需要注意文件的格式和内容。

特别是在使用中文进行数据导入时，很容易出现编码问题。

这时候需要将文件另存为UTF-8格式的文件，再进行导入。

Access格式和文本文件也可以用于数据导入，但是需要注意文件的格式和内容，如果格式不对，导入时也可能会出现问题。

使用导入向导在SQL Server中，可以使用导入和导出向导来帮助我们完成数据导入。

使用导入向导时，需要选择数据源类型、连接字符串和导入的目标表等参数。

不同的数据源类型需要选择不同的数据源驱动程序。

然后，可以使用“预览”和“编辑映射”来调整导入的数据，以确保数据的完整性和准确性。

对于大量数据的导入，我们可以使用批量插入方法，将数据以批次的方式插入到数据库中。

这种方式可以提高导入速度，减少系统开销。

同时，还可以使用并行操作来提高数据导入的速度。

导入存储过程除了导入向导之外，我们还可以使用存储过程来完成数据导入。

存储过程是SQL Server中一种特殊的程序单元，可以将复杂的业务逻辑和数据处理操作封装起来，提高系统的安全性和可维护性。

1、打开本地企业管理器，先创建一个SQL Server注册来远程连接服务器端口SQL Server。

步骤如下图：图1:2、弹出窗口后输入内容。

"总是提示输入登陆名和密码"可选可不选，如图2。

图2:3、注册好服务器后，点击打开。

如果是选择了"总是提示输入登陆名和密码"的话再点了确定后会提示输入用户密码，如图3。

图3:4、进入后，选择到您的数据库，如testdb。

在上面点右键，"所有任务">>"导入数据"，如图4。

图4:5、进入DTS导入/导出向导，点击“下一步”按钮继续6、选择数据源，输入数据源所在的数据库服务器名称、用户名、密码和要复制数据的源数据库，点击“下一步”按钮7、选择“在SQL Server数据库之间复制对象和数据”方式，点“下一步”继续图7:8、这一步可以把"包括扩展属性"和"排序规则"两个选择上。

接着去掉左下的"使用默认选项"，点击右下角的"选项"来进行配置。

图8:9、图8中点"选项"后会弹出图9，把"复制数据库用户和数据库角色"与"复制对象级权限"两个选项去掉，点确定回到图8接着点"下一步"进到图10。

10、设定调度方式，一般选“立即运行”就可以，然后点“下一步”继续11、点"完成"开始执行。

图11:12、正在进行数据导入中图12:13、如果一切正常，提示成功复制如图13，那就大功告成了。

图13:如果提示导入失败，出现图14情况，这时不要急着点"完成"关闭窗口。

双击中间的"出现错误"会出现详细的失败原因。

图14:错误原因一、没安装SP3补丁如果是出现如图15的报错原因，那么就很有可能是因为您本机的SQL Server 还没有打SP3补丁。