当前位置：文档之家 › DB2 Load数据装入

DB2 Load数据装入

  • 格式：docx
  • 大小：176.46 KB
  • 文档页数：5

DB2 Load数据装入
1.引言
这段时间一直在忙一个基于DB2的项目，其中一部分工作涉及到DB2数据的导入。

我们知道oracle提供了sqlloader程序完成大数据量的快速导入，DB2是和oracle最相似的数据库，所以DB2也提供了数据导入的实用程序，而且还是两个，分别是import和load，因为import的实质还是要执行sql语句完成数据的导入，所以速度相对较慢。

Load是直接将格式化的页写入数据库，对于大数据量的导入，load程序更快。

但是load实用程序不会触发触发器。

并且load时除了验证索引唯一性约束之外，不执行其他的约束检查，这样会对数据库的数据完整性造成一些影响。

如果能保证数据来源可靠的话，load是个不错的选择。

接下来就简单说一下load实用程序的使用。

2.概述
Load 的过程分为四个阶段：装入，构建,删除,索引复制。

如下图:
Load有四种装入方式，分别是:
REPLACE：这种方式下会删除目标表数据，用并用输入数据填充该表。

INSERT：目标表原有数据不做修改，将输入数据追加到目标表之后。

TERMINATE：装载失败后，可以通过该方式回滚失败的装入操作。

RESTART：已终端的装入操作将继续（我没有试过这种方式）。

Load可以装入的数据格式包括IXF——也就是DB2 export程序推荐的那种数据格式，是二进制的。

这种数据导入也最方便；DEL——就是分界符的ASCILL文件，DB2默认的是用逗号(,)作为字段列的分隔符,用双引号(“)作为记录行的分隔符；ASC——非定界符的ASCII文件，load时需要指定列的起止位置；CURSOR——游标，我没用过。

3.语法及参数介绍
Load程序的语法参数还是相当复杂的，现在虽然在用这个程序了，但是有些参数还是没搞明白。

在这里我拣着主要的&&我明白的参数介绍一下。

基本上能够满足一般的装入操作要求。

因为语法实在是很繁琐，我不得不贴一张官方的大图出来了。

部分参数介绍：
FROM
设定装入数据的来源，如果是数据源来自于多个文件，则文件之间可以用逗号分开。

如：Db2 Load from “E:\tmp\test_file_001.dat”,”E:\tmp\test_file_002.dat”……
OF filetype
指定数据文件的类型，也就是前面提到过的四种类型，IXF,DEL,ASC,CURSOR.
Modify by file-type-mode
指定文件类型修饰符。

支持的文件类型修饰符相当多，这里只列举一部分我测试过的。

METHOD
L 指定要装入文件的列的起止位置，用于非定界的ASC文件。

从1开始计数,起止位置的数字间通过空格分隔，字段间通过逗号分隔。

例如
METHOD L (1 3,4 9,10 15)
N 这个参数好像是只应用于IXF或者CURSOR类型的数据文件，我没有试过。

P 指定装入文件的列的编号，可以通过这个调整转入数据文件的对应关系。

例如METHOD P (1,3,4,2)
ROWCOUNT n
指定要装入的数据文件的物理记录行数。

允许用户只装入前面n行。

WARNINGCOUNT n
指定装入操作过程中允许的警告次数，超过该次数后装入操作失败。

如果不设置或者设置为0那么无论有多少条记录告警，装入操作都将继续。

TEMPFILES PATH temp-filespath
指定装入过程中用到的临时路径，指的是服务器端的路径。

装入方式
INSERT\REPLACE\TERMINATE\RESTART
INTO tabname
指定要装入到的数据库表。

Insert_column
指定数据要插入到的列名，列名之间用逗号分隔。

FOR EXCEPTION table-name
指定要讲加载错误行复制到异常表名，该异常表是指加载目标数据库中的表。

ALLOW NO ACCESS
Load程序在装载过程中锁定目标表，是目标表处于“正在装载”状态，ALLOW NO ACCESS 是默认行为，对于REPLACE加载的load命令，allow no access是唯一有效的选项。

ALLOW READ ACCESS
目标表在装载过程中仍然被置为“正在装载”状态，不过装载之前的数据仍然可以访问，进行read操作。

4.命令举例
接下来就列举几个例子。

4.1加载定界的ascill文件，也就是分隔符的数据文件
db2 LOAD FROM "E:\ data\src_001.dat","E:\data\src_002.dat" OF DEL MODIFIED BY dateformat=\"YYYY-MM-DD\" timestampformat=\"YYYYMMDDHHMMSS\"
CHARDEL0x0D0A coldel# dumpfile="E:\error\data.bad" METHOD P (1, 2, 3,4,5) ROWCOUNT 400 MESSAGES "E:\message\message.log" TEMPFILES PATH "E:\tmp"
REPLACE INTO TEST_TAB (ID, NAME, ADDRESS,BIRTHDAY,createtime) NONRECOVERABLE INDEXING MODE AUTOSELECT SET INTEGRITY PENDING CASCADE IMMEDIATE
涉及到的具体参数可以参考文档中的说明。

4.2加载非定界的ascill文件
db2 LOAD FROM "E:\data\src_001.dat" OF ASC MODIFIED BY dateformat=\"YYYY-MM-DD\" timestampformat=\"YYYYMMDDHHMMSS\" striptblanks dumpfile="E:\data\data.bad" METHOD L (1 5,6 10,11 20,21 35,36 50) ROWCOUNT 400 MESSAGES "E:\message\message.log" TEMPFILES PATH "E:\tmp" REPLACE INTO TEST_TAB (ID, NAME, ADDRESS,BIRTHDAY,createtime) NONRECOVERABLE INDEXING MODE AUTOSELECT
注：定长的文件加载时需要指定每个列的起止位置，之间用空格分隔，列之间用逗号分隔。

因为load程序的参数很多，不能一一描述，不过以上这些对于常用的操作有这些基本也就够用了。

合集下载

DB2中的数据移动装入-电脑资料

DB2中的数据移动装入-电脑资料

DB2中的数据移动装入-电脑资料装入（Load）装入命令格式与导入类似，命令关键字是Load，但是后面的参数比导入命令多的多，详细用法可以自行参考DB2文档，。

装入与导入类似，都是将输入文件中的数据移入到目标表中，二者的不同点将在实例中逐步解释。

在装入之前，目标表必须已经存在。

装入的性能比导入高，原因在后面结合实例详细解释。

装入操作不记录到日志中，所以不能使用日志文件进行前滚操作。

装入分为4个阶段：1. 装入阶段在这个阶段发生两件事：数据存储在表中，收集索引键并排序。

在装入时，DBA可以指定多长时间生成一致点。

它是装入工具的检查点。

如果装入在执行期间被打断，它可以从最后一个一致点处开始继续重新执行。

2. 构建阶段在构建阶段，基于在装入阶段收集的索引键信息创建索引。

如果在构建阶段发生错误，装入工具就重启，它将从构建阶段开始处重新开始构建。

3. 在删除阶段，所有违反唯一或主键约束的行都被删除并拷贝到一个异常表（如果在语句中指定相应选项）中。

当输入行被拒绝，消息文件中就生成消息。

4. 索引拷贝阶段如果在装入操作期间为索引创建指定了系统临时表空间，并且选择了READ ACCESS 选项，该索引数据将从系统临时表空间拷贝到原来的表空间。

装入过程的所有四个阶段都是操作的一部分，只有在所有的四个阶段都完成之后，该装入操作才算完成。

在每个阶段都将生成消息，一旦其中的某个阶段发生错误，这些消息可以帮助DBA分析并解决问题。

导入操作每次插入一行数据时都要检查是否满足约束条件，并且记入日志文件中。

下面我们看一些LOAD命令特有的功能，IMPORT命令也能做的就不再详细说了。

例十二：从光标类型文件中进行装入定义一个cursordeclare mycur cursor for select * from org创建一个新表，结构与cursor相容create table org2 like org从cursor中装入load from mycur of cursor insert into org2除了可以从cursor中装入，还可以从文件、管道、设备中进行装入。

DB2数据库导入和导出

DB2数据库导入和导出


若表中存在自增长的IDENTITY列，需要使 用相应的参数才能导入，比如：
import from mytbl2.ixf of ixf modified by identityignore insert into mytbl2
导入命令的一些关键参数如下：
INSERT：不修改当前数据，向目标表添加新的行。 INSERT_UPDATE：向目标表添加新的行，或更新匹配 主键的已有行。 REPLACE：删除目标表中所有已有数据后，向目标表插 入导入数据。 CREATE：创建表定义并插入新行。 COMMITCOUNT n：每导入n条记录就提交一次更改，用 来降低数据丢失的风险。 RESTARTCOUNT n：跳过前n条记录，从n+1开始导入 数据，可以减少导入量，但是必须指定COMMITCOUNT 参数。 COMPOUND n：指定在一个可之行操作中包含n条SQL 语句，可以提高性能。
例如：导出sample数据库中的全部数据 db2move sample export –u db2inst1 –p password
说明： • 每个表的内容都存储在一个.ixf文件中，每个.ixf文件都有一个与之 相对应的.msg文件(用于描述从表中导出数据时的信息); • db2move.lst用来记录.ixf文件、.msg文件与表的一一对应关系; • EXPORT.out记录的是导出数据时的屏幕输出。
db2move <database-name> <action> [<option> <value>]
其中： action： export、import、load
option： -tn（特定的表）、-ts （表空间）、-tc（表创建者）、
-sn（模式名） 、-u（用户id）、-p（密码）
使用DB2的LOAD

使用DB2的LOAD

使⽤DB2的LOAD FROM CURSOR转移数据典型的 DB2 数据转移任务涉及三个步骤：把数据以⼆进制或⽂本格式从源数据库导出到⼀个临时数据交换⽂件,在系统之间转移⽣成的⽂件,把数据从⽂件导⼊或装载到⽬标数据库中. 使⽤ DB2 LOAD 实⽤程序的 FROM CURSOR 选项简化 DB2? for Linux?, UNIX?, and Windows? 的数据转移过程。

本⽂介绍 LOAD FROM CURSOR 特性并提供两个接⼝ Command Line Processor 和 ADMIN_CMD 存储过程的使⽤⽰例。

典型的 DB2 数据转移任务涉及三个步骤： 把数据以⼆进制或⽂本格式从源数据库导出到⼀个临时数据交换⽂件 在系统之间转移⽣成的⽂件 把数据从⽂件导⼊或装载到⽬标数据库中 在数据量很⼤的情况下，使⽤ EXPORT 实⽤程序⽣成数据交换⽂件常常要花费很长时间。

另外，在把数据移⼊和移出数据库时，必须考虑不同的数据库编码页和操作系统。

可以使⽤ LOAD 实⽤程序的 FROM CURSOR 选项避免这些问题。

当指定 FROM CURSOR 选项时，LOAD 实⽤程序直接把⼀个 SQL 查询的结果集作为数据装载操作的来源，这样就不需要⽣成临时数据交换⽂件。

因此，LOAD FROM CURSOR 是在不同的表空间或数据库之间快速轻松地转移数据的⽅法。

可以在命令⾏上执⾏ LOAD FROM CURSOR，也可以通过使⽤ DB2 的 ADMIN_CMD 存储过程在应⽤程序或存储过程中执⾏它。

本⽂介绍 LOAD FROM CURSOR 特性并提供两个接⼝ Command Line Processor (CLP) 和 ADMIN_CMD 存储过程的使⽤⽰例。

把表转移到另⼀个表空间 ⾸先，看看如何把表从⼀个表空间转移到另⼀个表空间。

如果创建表的表空间的页⾯⼤⼩不合适，或者应该⽤另⼀个缓冲区池访问表，就可能需要执⾏这种数据转移。

基于游标和LOAD技术的DB2数据库高效数据迁移方法

基于游标和LOAD技术的DB2数据库高效数据迁移方法

基于游标和LOAD技术的DB2数据库高效数据迁移方法作者：柴新来源：《中国科技博览》2016年第03期[摘要]在DB2数据库中，游标cursor和LOAD技术相结合是进行数据迁移的有效解决方法，它的优点是迁移速度快，耗用时间短，当迁移海量数据时该优点尤其显著，而且被迁移的数据无需从源库导出保存到服务器文件系统上，节省存储空间，既适用于同一数据库内的数据迁移，也适用于异构操作系统平台上的不同DB2数据库间的数据迁移。

[关键词]游标；LOAD技术；数据迁移中图分类号：TP311.13 文献标识码：A 文章编号：1009-914X（2016）03-0132-011、前言在信息系统建设中，常常存在将某数据库中的数据一次性迁移到另一个数据库中的需求，这种迁移既可能发生在同一个数据库内的不同数据表之间，也可能会发生于不同数据库的数据表之间。

本文假设场景是进行DB2数据库的数据迁移，如何准确、高效、方便地完成数据迁移，是DBA的重要工作。

2、游标和LOAD技术DB2数据库进行数据迁移时，通常做法是首先从源库将数据用export方法导出保存到服务器文件系统上，然后再连接上目标数据库，用import方法将数据导入。

但是这种方法存在两个缺点：（1）、需要先将被迁移数据export导出保存到文件系统上，这将占用文件系统存储空间，尤其是当迁移海量数据时，导出文件所耗用的存储空间将十分巨大和可观。

（2）、import方法无法满足性能要求。

用import方法向目标数据库加载数据时，速度低耗时长。

尤其是当加载海量数据时，所耗费的时间将十分漫长。

使用游标和LOAD技术相结合进行数据迁移，可有效避免上述两个缺点：（1）、使用游标方式的数据迁移，可避免导出文件耗用大量存储空间的缺点。

它直接在源表、目标表之间进行数据的抽取、传输和加载，不需要将源表的数据先导出保存到文件系统上，不会产生中间数据文件。

该方法快速高效、语法简洁，是一种数据迁移的好方法。