Oracle数据库移植时字符集问题的解决
- 格式:doc
- 大小:43.00 KB
- 文档页数:5
字符集不同的Oracle数据库间交换数据的解决方法
刘长兴
【期刊名称】《中国医疗设备》
【年(卷),期】2009(024)006
【摘要】本文介绍了字符集不同的Oracle数据库间交换数据的几种解决方法,成功地解决了医院HIS数据库与医保数据库数据交换问题.
【总页数】2页(P35-36)
【作者】刘长兴
【作者单位】济南军区总医院,信息科,山东,济南,250031
【正文语种】中文
【中图分类】TP311.13
【相关文献】
1.Oracle数据库字符集问题分析及解决方法 [J], 韩谦
2.不同字符集的ORACLE数据库对象和信息转换方法 [J], 程仁洪
3.Oracle数据库字符集问题分析及解决方法 [J], 戴常英;张孝天
4.MQ不同字符集间的通信 [J], 邱丰
5.Oracle数据库字符集问题及其解决方法 [J], 刘文娟;潘地林
因版权原因,仅展示原文概要,查看原文内容请购买。
oracleZHS16GBK的数据库导⼊到字符集为AL32UTF8的数据库(转载+⾃⼰经验总结)字符集⼦集向其超集转换是可⾏的,如此例 ZHS16GBK转换为AL32UTF8。
导出使⽤的字符集将会记录在导出⽂件中,当⽂件导⼊时,将会检查导出时使⽤的字符集设置,如果这个字符集不同于导⼊客户端的NLS_LANG设置,字符集将根据导⼊客户端NLS_LANG设置进⾏转换,如果必要,在数据插⼊数据库之前会进⾏进⼀步转换。
通常在导出时最好把客户端字符集设置得和数据库端相同,这样可以避免在导出时发⽣不必要的数据转换,导出⽂件将和数据库具有相同的字符集。
即使将来会把导出⽂件导⼊到不同字符集的数据库中,这样做也可以把转换延缓⾄导⼊时刻。
当进⾏数据导⼊时,主要存在以下两种情况:1.源数据库和⽬标数据库具有相同字符集设置这时,只需要设置NLS_LANG等于数据库字符集即可导⼊(前提是,导出使⽤的是和源数据库相同字符集,即三者相同)2.源数据库和⽬标数据库字符集不同如果我们导出时候使⽤的NLS_LANG是和源数据库相同的字符集,那么导⼊时就可以设置客户端NLS_LANG等于导出时使⽤的字符集,这样转换只发⽣在数据库端,⽽且只发⽣⼀次。
例如:如果进⾏从ZHS16GBK到UTF8的转换1)使⽤NLS_LANG=AMERICAN_AMERICA.ZHS16GBK导出数据库。
这时创建的导出⽂件包含ZHS16GBK的数据2)导⼊时使⽤NLS_LANG=AMERICAN_AMERICA.ZHS16GBK这时转换仅发⽣在insert数据到UTF8的数据库中。
含有汉字的固定字符由ZHS16GBK数据库导⼊到AL32UTF8的数据库此⽂章是对于上⼀个实验的补充,上⼀次实验仅仅考虑的 varchar2 的情况。
这次考虑到对于char类型的含有中⽂数据的情况。
对于英⽂:对英⽂,在al32utf8中仍然和zhs16gbk⼀样⽤1个字节表⽰,因此导⼊固定长度英⽂字符数据时不会出错。
Oracle数据库字符集问题总结在不同数据库做数据迁移、同其它系统交换数据等,常常因为字符集不同而导致迁移失败或数据库内数据变成乱码。
现在我将oracle字符集相关的一些知识做个简单总结一、什么是oracle字符集Oracle字符集是一个字节数据的解释的符号集合,有大小之分,有相互的包容关系。
ORACLE 支持国家语言的体系结构允许你使用本地化语言来存储,处理,检索数据。
它使数据库工具,错误消息,排序次序,日期,时间,货币,数字,和日历自动适应本地化语言和平台。
影响oracle数据库字符集最重要的参数是NLS_LANG参数。
它的格式如下:它有三个组成部分(语言、地域和字符集),每个成分控制了NLS子集的特性。
其中:Language 指定服务器消息的语言,territory 指定服务器的日期和数字格式,charset 指定字符集。
如:AMERICAN _ AMERICA. ZHS16GBK从NLS_LANG的组成我们可以看出,真正影响数据库字符集的其实是第三部分。
所以两个数据库之间的字符集只要第三部分一样就可以相互导入导出数据,前面影响的只是提示信息是中文还是英文。
二、如何查询Oracle的字符集很多人都碰到过因为字符集不同而使数据导入失败的情况。
这涉及三方面的字符集,一是oracel server端的字符集,二是oracle client端的字符集;三是dmp文件的字符集。
在做数据导入的时候,需要这三个字符集都一致才能正确导入。
1、查询oracle server端的字符集有很多种方法可以查出oracle server端的字符集,比较直观的查询方法是以下这种:结果类似如下:AMERICAN _ AMERICA. ZHS16GBK2、如何查询dmp文件的字符集用oracle的exp工具导出的dmp文件也包含了字符集信息,dmp文件的第2和第3个字节记录了dmp文件的字符集。
如果dmp文件不大,比如只有几M或几十M,可以用UltraEdit 打开(16进制方式),看第2第3个字节的内容,如0354,然后用以下SQL查出它对应的字符集:如果dmp文件很大,比如有2G以上(这也是最常见的情况),用文本编辑器打开很慢或者完全打不开,可以用以下命令(在unix主机上):然后用上述SQL也可以得到它对应的字符集。
oracle导入出现字符集问题解决办法场景:把一台linux上的oracle库的数据捣腾到一台 windows2003上的oracle库中,在捣腾的过程中乱码了!有经验的知道多半是要改windows的注册表。
注册表打开发方式:Win98/98SE/Me运行中输入regedit.exe 无权限限制Win2000/XP1.开始>>运行.中输入regedt322.开始>>运行.中输入regedit第一种方法打开的注册表编辑器和Win98下的一样,而且功能相同,而使用第二种方法打开的注册表编辑器则可以方便的设置权限,建议网络管理员使用第2种方法打开注册表编辑器修改需要修改的权限设置部分以免被他人恶意修改。
Windows Vista/71.在开始菜单搜索框中输入regedit并按回车键.(需要管理员权限)2.在运行中输入regedit.exe(需要管理员权限)1. NLS_LANG 参数组成NLS_LANG参数由以下部分组成:NLS_LANG=<language>_<territory>.<client character set>Language:指定Oracle消息使用的语言,校验,日期中月份和日显示。
Territory:指定默认日期、数字、货币等格式,地区和计算星期及日期的习惯。
Client character set:控制客户端应用程序使用的字符集例如:NLS_LANG=AMERICAN_7ASCIIAMERICAN是语言,AMERICA是地区,US7ASCII是客户端字符集通常设置或者等于客户端(如Windows)代码页或者对于unicode应用设置为UTF8在Windows上查看当前系统的代码页可以使用chcp命令:E:\>chcp活动的代码页: 936代码页936也就是中文字符集 GBK,在Microsoft的官方站点上,我们可以遭到关于936代码页的具体编码规则,请参考以下链接:/globaldev/reference/dbcs/936.htm2. 查看 NLS_LANG 的方法Windows使用:注册表HKEY_LOCAL_MACHINE\SOFTWARE\ORACLE\HOMExx\NLS_LANG查看Unix使用:env|grep NLS_LANG如:/opt/oracle>env|grep NLS_LANGNLS_LANG=AMERICAN_CHINA.ZHS16GBKWindows客户端设置,可以在注册表中更改NLS_LANG,具体键值位于:HKEY_LOCAL_MACHINE\SOFTWARE\ORACLE\HOMExx\xx指存在多个ORACLE_HOME时系统编号。
Oracle字符集的查看查询和Oracle字符集的设置修改本⽂主要讨论以下⼏个部分:如何查看查询oracle字符集、修改设置字符集以及常见的oracle utf8字符集和oracle exp 字符集问题。
⼀、什么是Oracle字符集Oracle字符集是⼀个字节数据的解释的符号集合,有⼤⼩之分,有相互的包容关系。
ORACLE ⽀持国家语⾔的体系结构允许你使⽤本地化语⾔来存储,处理,检索数据。
它使⼯具,错误消息,排序次序,⽇期,时间,货币,数字,和⽇历⾃动适应本地化语⾔和平台。
影响数据库字符集最重要的参数是NLS_LANG参数。
它的格式如下: NLS_LANG = language_territory.charset它有三个组成部分(语⾔、地域和字符集),每个成分控制了NLS⼦集的特性。
其中:Language:指定服务器消息的语⾔,影响提⽰信息是中⽂还是英⽂Territory:指定服务器的⽇期和数字格式,Charset:指定字符集。
如:AMERICAN _ AMERICA. ZHS16GBK从NLS_LANG的组成我们可以看出,真正影响数据库字符集的其实是第三部分。
所以两个数据库之间的字符集只要第三部分⼀样就可以相互导⼊导出数据,前⾯影响的只是提⽰信息是中⽂还是英⽂。
怎么查看数据库版本select * from v$version 包含版本信息,核⼼版本信息,位数信息(32位或64位)等 ⾄于位数信息,在Linux/unix平台上,可以通过file 查看,如file $ORACLE_HOME/bin/oracle⼆、. 查看数据库字符集数据库服务器字符集select * from nls_database_parameters,其来源于props$,是表⽰数据库的字符集。
客户端字符集环境select * from nls_instance_parameters,其来源于v$parameter, 表⽰客户端的字符集的设置,可能是参数⽂件,环境变量或者是注册表 会话字符集环境select * from nls_session_parameters,其来源于v$nls_parameters,表⽰会话⾃⼰的设置,可能是会话的环境变量或者是alter session完成,如果会话没有特殊的设置,将与nls_instance_parameters⼀致。
oracle字符集问题应一直受服务端编码和客户端编码要一致误导,结果害了我半个小时时间,来解决这个小问题,现在把解决记录一下,以备忘记:出现中文乱码的主要原因是字符集不同。
在Oracle中,我们关心三个地方的字符集:先来查看一下数据库字符集:在Oracle中可能使用Select userenv('language') from dual;或者:Select name, value$ from props$;查看。
l Oracle服务器内部的字符集修改方法:connect sys/chang_on_installupdate props$set value$='TRADITIONAL CHINESE_TAIWAN.AL32UTF8'wherename='NLS_CHARACTERSET';commit;2 NLS_LANG变量里保存的字符集这个是Oracle设置的一个变量。
在Windows中,这个变量保存在注册表中:HKEY_LOCAL_MACHINE\SOFTWARE\ORACLE\HOME0 保存着NLS_LANG变量。
在Unix/Linux中,则需要自己进行设置,在.profile里面加上NLS_LANG=AMERICAN_AMERICA.ZHS16GBKexport NLS_LANG3 客户端应用的字符集下面是我用到的字符集american_america.AL32UTF8TRADITIONAL CHINESE_TAIWAN.ZHT16MSWIN950TRADITIONAL CHINESE_TAIWAN.AL32UTF8AMERICAN_AMERICA.WE8ISO8859P1AMERICAN_AMERICA.ZHS16GBK特别注意:如果服务端编码为AL32UTF8,那么客户端就应该安装自己环境来设置字符编码。
比如我有一个服务器端,其中两个客户端一个为简体,一个为繁体:服务器端字符集设置:american_america.AL32UTF8简体客户端字符集设置:AMERICAN_AMERICA.ZHS16GBK繁体客户端字符集设置:TRADITIONAL CHINESE_TAIWAN.ZHT16MSWIN950。
更改转换ORACLE数据库字符集在大型数据库管理系统中,ORACLE数据库不论在数据库管理能力还是在安全性方面都是无可非议的。
国内企业使用ORACLE数据库的也较多,但是由于ORACLE不同版本的字符集,给数据一、字符集参数一旦数据库创建后,数据库的字符集是不能改变的。
因此,考虑使用哪一种字符集是十分重要的。
数据库字符集应该是操作系统本地字符集的一个超集。
存取数据库的客户使用的字符集将决定选择哪一个超集,即数据库字符集应该是所有客户字符集的超集。
下面介绍一些与字符集有关的NLS_LANG参数:NLS_LANG格式:NLS_LANG=language_territory.charset有三个组成部分(语言、地域和字符集),每个组成成分控制了NLS子集的特性。
三个成 AMERICAN_7SCIIJPANESE_JAPAN.JA16EUC其中:language 指定服务器消息的语言。
territory 指定服务器的日期和数字格式。
Charset 指定字符集还有一些子集可以更明确定义NLS_LANG参数:NLS_DATE_FORMAT 缺省的日期格式NLS_DATE_LANGUAGE 缺省的日期语言NLS_NUMBERIC_CHARACTERS 小数字符和组分隔开NLS_CURRENCY 本地货币字符NLS_ISO_CURRENCY ISO货币字符NLS_SORT 字符排序序列二、字符集转换1、NLS_LANG参数的修改方法:1)用SYS用户名登陆ORACLE。
2)查看字符集内容 SQL>SELECT * FROM PROPS$;3)修改相应的字符子集 SQL>UPDATE PROPS$ SET V ALUE$=’SIMPLIFIED CHINESE ‘WHERE NAME=’NLS_LANGUAGE’;4) 递交COMMIT;2、NLS_LANG参数的具体应用:1)采用服务器端/客户端方式,两端字符集不同修改客户端字符集:WIN95/WIN98:修改注册表HKEY_LOCAL_MACHINESOFTWAREORACLENLS_LANGUNIX:按照1方法,直接进入ORACLE 修改。
使用常用的gbk,utf8以及ascii说明(oracle中对应hs16gbk,al32utf8,us7ascii)。
其中,ascii为经典的单字节编码,采用7位,只能表示128个常用字符以及计算机控制字符,不能显示中文等字符;gbk为中国大陆标准,16位,简体中文字符集标准;utf8为unicode 的一种最常用实现,兼容ascii的字符使用1位,其余字符都采用3位,可以表示任何字符。
Utf8其实已经可以称为国际标准字符集编码,应首先考虑使用utf8。
需要说明的是,虽然gbk跟utf8都能表示中文字符,但每个字符的编码是不一样的,所以不能认为是兼容的。
其实,oracle的字符系统很简单,主要由3部分组成:客户终端字符集,nls_lang环境变量字符集,数据库使用的字符集。
其中,客户终端各种各样,比如windows下cmd,unix/linux下terminal/console,甚至如toad等工具也可以视为一个终端。
我们使用windows cmd举例说明,cmd使用了gbk编码(好像不能修改)nls_lang环境变量决定了终端与服务器连接时,要不要转换字符集,如果nls_lang和服务器端数据库使用的编码不一样,那就要进行转码;如果设为一样,就不会发生转码。
比如一个终端cmd查询一张数据库表,而其nls_lang设为american_america.zhs16gbk,而数据库为american_america.al32utf8,则数据库中的数据传到终端时,首先要进行utf8到gbk的转码。
而转码又有两种情况,a.就是一个字符在两中编码里都有,就是具体的码文不一样;b.转码时发现一个字符在另一种编码里没有,则直接用替代字符代替,而这一般就是…?‟字符了。
这里要注意的是,我们一般所说的乱码有2种,一种就是b所说的…?‟,而另一种出现的奇奇怪怪的字符就是由于nls_lang设置等转码原因造成的。
而数据库使用的字符集就是数据库实际使用的字符集。
Oracle数据库移植时字符集问题的解决作者:slackerqxl 发表时间:2002/03/11 04:43pmOracle数据库移植时字符集问题的解决对于Oracle数据库之间的移植采用Oracle的导入导出工具(Import/Export)是一个比较好的策略。
虽也可以利用第三方软件如Sybase 的Power designer中的Reverse Engineering 进行数据库结构重建,然后在进行较复杂的数据导入过程,但对于作业队列、快照等则不得不用手工来创建。
而Export能将整个数据库、指定用户、指定表和相关的数据字典进行输出,Export 输出的输出转存二进制文件包括了完全重建所有被选对象所需的命令。
本人在为某电厂MIS(Oracle数据库)数据采用Oracle的导入导出工具从Windows NT平台移植到Digital Unix平台时遇到的关于字符集的问题和总结出的经验与大家来分享。
1. 移植环境原操作系统平台:Windows NT数据库:Oracle 8.0.5 for Windows NT服务器:HP NetServer LH3目标操作系统平台:Digital Unix alpha V4.0数据库:Oracle 8.0.4 for Digital Unix服务器:ALPHASERVER ES40 小型机2. 数据导出在NT服务器上用Oracle导出工具进行数据导出,Oracle导出工具有命令行和图形界面两种方式。
本人直接用命令行方式进行数据导出:c:> exp80 gxmisdba/manager file=c:expdat.dmp log=c:export.log即将导出指定的用户.... 正在导出用户GXMISDBA的外部函数程序库名称. 正在导出用户GXMISDBA的对象类型定义即将导出GXMISDBA的对象.... 正在导出数据库链接. 正在导出序号. 正在导出群集定义. 即将导出GXMISDBA的表通过常规路径.... . 正在导出表AAAAA 0 行被导出. . 正在导出表EVT_CARRIER_CONFIGURATION 0 行被导出. . 正在导出表TBL_AJ_AGKS 331 行被导出.... 正在导出同义词. 正在导出视图. 正在导出存储的过程. 正在导出参考资料一致性约束条件. 正在导出触发器. 正在导出后期表活动. 正在导出快照. 正在导出快照日志. 正在导出作业队列. 正在导出刷新组和子组在没有警告的情况下成功终止导出。
3.数据导入在NT服务器上通过ftp命令将导出的输出转存二进制文件expdat.dmp(使用binary传输模式)传输至Digital Unix服务器上。
用Oracle for Digital Unix 数据导入工具命令行方式进行数据导入$imp gxmisdba/manager file=/expdat.dmp full=y log=u01import.logConnected to: Oracle8 Enterprise Edition Release 8.0.4.0.0 - ProductionPL/SQL Release 8.0.4.0.0 - ProductionExport file created by EXPORT:V08.00.05 via conventional path. importing GXMISDBAs objects into GXMISDBA. . importing table "AAAAA" 0 rows imported. . importing table "EVT_CARRIER_CONFIGURA TION" 0 rows imported. . importing table "TBL_AJ_STK" 331 rows importedIMP-00017: following statement failed with ORACLE error 2437:"ALTER TABLE "TBL_KJ_JLRY" ADD CONSTRAINT "PK_TBL_KJ_JLRY" PRIMARY KEY ("FLD_KJ_JLRY_BH","FLD_KJ_JLRY_XM") USING INDEX PCTFREE 10 INITRANS 2 MAXTRANS 255 STORAGE (INITIAL 10240 NEXT 10240 MINEXTENTS 1 MAXEXTENTS 2147483645 PCTINCREASE 50 FREELISTS 1 FREELIST GROUPS 1 BUFFER_POOL DEFAULT)""ENABLE NOV ALIDATE"IMP-00003: ORACLE error 2437 encounteredORA-02437: cannot enable (GXMISDBA.PK_TBL_KJ_JLRY) - primary key violated...Import terminated successfully with warnings.数据导入出现20多个以上类似错误,后分析其中报错的"TBL_AJ_STK"表,发现"FLD_KJ_JLRY_XM"字段值(关键字组成之一)为中文字符而在Digital Unix服务器Oracle数据库中"FLD_KJ_JLRY_XM"字段值显示的为"????"(在客户端用Oracle Sql Plus查看),从而造成关键字冲突。
在客户端Oracle Sql Plus对某行显示"????"的字段值进行修改,如改成中文值”测试”,提交后,用SQL语句查看,刚修改的行中显示"????"的字段值变成了”测试”,这说明了Digital UNIN服务器上的Oracle数据集可以存储中文字符,但Oracle 8.0.4 for Digital UNIN的导入工具imp未能将Oracle 8.0.5 for Windows NT imp80导出的中文数据进行转换。
4.查看字符集参数4.1查看Oracle 8.0.5 for Windows NT props$内容SQL> connect sys/change_on_installSQL> col value$ format a40SQL> select name,value$ from props$;NAME V ALUE$---------------------------------------DICT.BASE 2NLS_LANGUAGE AMERICANNLS_TERRITORY AMERICANLS_CURRENCY $NLS_ISO_CURRENCY AMERICANLS_NUMERIC_CHARACTERS.,NLS_CALENDAR GREGORIANNLS_DATE_FORMAT DD-MON-YYNLS_DA TE_LANGUAGE AMERICANNLS_CHARACTERSET ZHS16GBKNLS_SORT BINARYNLS_NCHAR_CHARACTERSET ZHS16GBKNLS_RDBMS_VERSION8.0.5.0.0GLOBAL_DB_NAME ORACLE.WORLDEXPORT_VIEWS_VERSION7已选择15行。
4.2查看Oracle 8.0.4 for Digital UNIN 的props$内容SQL> connect sys/change_on_installSQL> col value$ format a40SQL> select name,value$ from props$;NAME V ALUE$---------------------------------------DICT.BASE 2NLS_LANGUAGE AMERICANNLS_TERRITORY AMERICANLS_CURRENCY $NLS_ISO_CURRENCY AMERICANLS_NUMERIC_CHARACTERS .,NLS_CALENDAR GREGORIANNLS_DA TE_FORMAT DD-MON-YYNLS_DA TE_LANGUAGE AMERICANNLS_CHARACTERSET ZHS16CGB231280NLS_SORT BINARYNLS_NCHAR_CHARACTERSET ZHS16CGB231280NLS_RDBMS_VERSION 8.0.4.0.0GLOBAL_DB_NAME ORCL.WORLDEXPORT_VIEWS_VERSION715 rows selected.发现Oracle 8.0.4 for Digital UNIN 采用了Oracle在Digital Unix环境下建议的中文字符集ZHS16CGB231280,两者的字符集不同,于是本人就在Digital UNIN服务器上重新安装Oracle,选择了与NT上同样的字符集ZHS16GBK(中国简体汉字16位国标库)。
安装完成后,通过查看props$的内容,确认了Oracle 8.0.4 for Digital UNIN和Oracle 8.0.5 for Windows NT 的字符集一致。
于是用Oracle 8.0.4 for Digital UNIN的导入工具imp重新进行数据导入,但还是报同样的错误,问题还未得到解决。
5.问题解决办法后来本人发现在Oracle 8.0.5 for Windows NT的服务器(或装有Oracle 8.0.5 for windows 95/98的工作站)上直接用Oracle 8.0.5 for Windows NT的导入工具imp80远程对Oracle 8.0.4 for Digital UNIN数据库进行数据导入,问题竟得到解决。
5.1在NT的服务器上,修改tnsnames.ora(或通过Oracle Net8 Easy config)设置数据库连接字符串gxmis(可自行设定)指向Oracle 8.0.4 for Digital UNIN服务器。
5.2在NT的服务器上进行数据远程导入c:>imp80 gxmisdba/manager@gxmis file=c:expdat.dmpfull=y log=c:import.log已连接到:Oracle8 Enterprise Edition Release 8.0.4.0.0 - ProductionPL/SQL Release 8.0.4.0.0 - Production经由常规路径导出由EXPORT:V08.00.05创建的文件. 正在将GXMISDBA的对象导入到GXMISDBA. . 正在导入表"AAAAA" 0行被导入. . 正在导入表"EVT_CARRIER_CONFIGURA TION" 0行被导入. . 正在导入表"TBL_AJ_AGKS" 331行被导入...准备启用约束条件...成功终止导入5.3把Oracle 8.0.4 for Digital UNIN字符集重新又改成ZHS16CGB231280,进行数据远程导入测试,数据也同样地导入成功。