使用Ccscan进行数据字符集转换验证（下）

最新推荐文章于 2024-06-15 21:40:09 发布
最新推荐文章于 2024-06-15 21:40:09 发布
阅读量130 收藏
点赞数
文章标签： 数据库


      上篇中，笔者演示了如何安装调用Ccscan工具，下面继续通过演示实验进行测试。 


     4、演示实验

 

下面笔者进行一个简单实验，通过schema范围的数据表扫描，来进行Ccscan工作分析。

 

 

SQL> select * from nls_database_parameters where parameter='NLS_CHARACTERSET';

PARAMETER                      VALUE

------------------------------ ----------------------------------

NLS_CHARACTERSET               ZHS16GBK

 

SQL> create user test identified by test;

User created

 

SQL> grant connect, resource to test;

Grant succeeded

 

SQL> create table test.t (name varchar2(4));

Table created

 

 

当前实验数据表T所在数据库字符集ZHS16GBK，name字段长度为varchar2(4)。下面向其中插入中文字符。

 

SQL> insert into test.t values ('测试');

 

SQL> insert into test.t values ('测试中');

 

insert into test.t values ('测试中')

 

ORA-12899: 列 "TEST"."T"."NAME" 的值太大 (实际值: 6, 最大值: 4)

 

SQL> desc test.t

Name Type        Nullable Default Comments

---- ----------- -------- ------- --------

NAME VARCHAR2(4) Y                        

 

SQL> select * from test.t;

NAME

----

测试

 

 

在当前字符集编码方式下，name列能容纳两个中文字已经是极限了。当尝试插入三个中文字的时候，系统报错。

 

下面进行扫描处理。

 

 

[oracle@ddd ~]$ csscan user=test fromchar=zhs16gbk tochar=al32utf8 log=testchange capture=n process=1

 

Character Set Scanner v2.2 : Release 11.2.0.4.0 - Production on Wed Sep 2 10:52:42 2015

Copyright (c) 1982, 2011, Oracle and/or its affiliates.  All rights reserved.

 

Username: system

Password:

 

Connected to:

Oracle Database 11g Enterprise Edition Release 11.2.0.4.0 - 64bit Production

With the Partitioning, OLAP, Data Mining and Real Application Testing options

 

Enter array fetch buffer size: 1024000 >

Enumerating tables to scan...

. process 1 scanning TEST.T[AAAWB0AAEAAAACoAAA]

Creating Database Scan Summary Report...

Creating Individual Exception Report...

 

Scanner terminated successfully.

 

 

结果文件正确生成。

 

 

[oracle@ddd ~]$ ls -l | grep test

-rw-r--r--. 1 oracle oinstall   1879 Sep  2 10:52 testchange.err

-rw-r--r--. 1 oracle oinstall    590 Sep  2 10:52 testchange.out

-rw-r--r--. 1 oracle oinstall   8136 Sep  2 10:52 testchange.txt

 

 

下面分别查看结果文件内容。

 

5、结果文件分析

 

首先我们查看err文件，其中记录着异常信息。

 

 

[oracle@ddd ~]$ cat testchange.err

Database Scan Individual Exception Report

 

[Database Scan Parameters] –SCAN信息内容参数

 

Parameter                      Value                                          

------------------------------ ------------------------------------------------

CSSCAN Version                 v2.1                                           

Instance Name                  mmdb                                      

Database Version               11.2.0.4.0                                      

Scan type                      User tables                                    

User name                      test                                            

Scan CHAR data?                YES                                             

Database character set         ZHS16GBK                                       

FROMCHAR                       zhs16gbk                                       

TOCHAR                         al32utf8                                        

Scan NCHAR data?               NO                                             

Array fetch buffer size        1024000                                        

Number of processes            1                                               

Capture convertible data?      NO                                             

------------------------------ ------------------------------------------------

 

[Data Dictionary individual exceptions]

 

[Application data individual exceptions]

 

User  : TEST

Table : T

Column: NAME

Type  : VARCHAR2(4)

Number of Exceptions         : 1         

Max Post Conversion Data Size: 6        

 

ROWID              Exception Type      Size Cell Data(first 30 bytes)    

------------------ ------------------ ----- ------------------------------

AAAWB0AAEAAAACuAAA exceed column size     6 测试                         

------------------ ------------------ ----- ------------------------------

 

 

可以看到问题了，数据表test.t在转化字符集合过程中会有异常出现。异常数据的rowid信息、异常类型，期望修改的长度都可以清晰看到。

 

Out报告是执行程序过程中的日志记录，其中也有输出信息。

 

 

[oracle@ddd ~]$ cat testchange.out

 

 

Character Set Scanner v2.2 : Release 11.2.0.4.0 - Production on Wed Sep 2 10:52:42 2015

 

Copyright (c) 1982, 2011, Oracle and/or its affiliates.  All rights reserved.

 

 

Username:

Connected to:

Oracle Database 11g Enterprise Edition Release 11.2.0.4.0 - 64bit Production

With the Partitioning, OLAP, Data Mining and Real Application Testing options

 

Enter array fetch buffer size: 1024000 >

Enumerating tables to scan...

 

. process 1 scanning TEST.T[AAAWB0AAEAAAACoAAA]

 

Creating Database Scan Summary Report...

Creating Individual Exception Report...

Scanner terminated successfully.

 

 

处理过程中，已经比较清楚的显示出问题数据表、数据行信息。

 

最后是结果汇总报告。

 

 

Database Scan Summary Report

 

Time Started  : 2015-09-02 10:52:49

Time Completed: 2015-09-02 10:52:50

 

Process ID         Time Started       Time Completed

---------- -------------------- --------------------

         1  2015-09-02 10:52:49  2015-09-02 10:52:49

---------- -------------------- --------------------

 

[Database Size]

 

Tablespace                           Used            Free           Total       Expansion

------------------------- --------------- --------------- --------------- ---------------

SYSTEM                            757.75M          12.25M         770.00M            .00K

SYSAUX                            574.38M          35.63M         610.00M            .00K

UNDOTBS1                           15.25M         189.75M         205.00M            .00K

TEMP                                 .00K            .00K            .00K            .00K

USERS                               1.38M           3.63M           5.00M            .00K

------------------------- --------------- --------------- --------------- ---------------

Total                           3,100.75M         413.25M       3,514.00M            .00K

 

[Database Scan Parameters]

 

Parameter                      Value                                          

------------------------------ ------------------------------------------------

CSSCAN Version                 v2.1                                           

Instance Name                  mmdb                                      

Database Version               11.2.0.4.0                                      

Scan type                      User tables                                    

User name                      test                                           

Scan CHAR data?                YES                                             

Database character set         ZHS16GBK                                       

FROMCHAR                       zhs16gbk                                       

TOCHAR                         al32utf8                                       

Scan NCHAR data?               NO                                             

Array fetch buffer size        1024000                                        

Number of processes            1                                              

Capture convertible data?      NO                                             

------------------------------ ------------------------------------------------

 

[Scan Summary]

 

Some character type application data are not convertible to the new character set

 

[Data Dictionary Conversion Summary]

 

Data Dictionary Tables:

 

Datatype                    Changeless      Convertible       Truncation            Lossy

--------------------- ---------------- ---------------- ---------------- ----------------

VARCHAR2                             0                0                0                0

CHAR                                 0                0                0                0

LONG                                 0                0                0                0

VARRAY                               0                0                0                0

--------------------- ---------------- ---------------- ---------------- ----------------

Total                                0                0                0                0

Total in percentage              0.000%           0.000%           0.000%           0.000%

 

XML CSX Dictionary Tables:

 

Datatype                    Changeless      Convertible       Truncation            Lossy

--------------------- ---------------- ---------------- ---------------- ----------------

VARCHAR2                             0                0                0                0

CHAR                                 0                0                0                0

LONG                                 0                0                0                0

VARRAY                               0                0                0                0

--------------------- ---------------- ---------------- ---------------- ----------------

Total                                0                0                0                0

Total in percentage              0.000%           0.000%           0.000%           0.000%

 

[Application Data Conversion Summary]

 

Datatype                    Changeless      Convertible       Truncation            Lossy

--------------------- ---------------- ---------------- ---------------- ----------------

VARCHAR2                             0                0                1                0

CHAR                                 0                0                0                0

LONG                                 0                0                0                0

VARRAY                               0                0                0                0

--------------------- ---------------- ---------------- ---------------- ----------------

Total                                0                0                1                0

Total in percentage              0.000%           0.000%         100.000%           0.000%

 

[Distribution of Convertible, Truncated and Lossy Data by Table]

 

Data Dictionary Tables:

 

USER.TABLE                                              Convertible       Truncation            Lossy

-------------------------------------------------- ---------------- ---------------- ----------------

-------------------------------------------------- ---------------- ---------------- ----------------

 

XML CSX Dictionary Tables:

 

USER.TABLE                                              Convertible       Truncation            Lossy

-------------------------------------------------- ---------------- ---------------- ----------------

-------------------------------------------------- ---------------- ---------------- ----------------

 

Application Data:

 

USER.TABLE                                              Convertible       Truncation            Lossy

-------------------------------------------------- ---------------- ---------------- ----------------

TEST.T                                                            0                1                0

-------------------------------------------------- ---------------- ---------------- ----------------

 

[Distribution of Convertible, Truncated and Lossy Data by Column]

 

Data Dictionary Tables:

 

USER.TABLE|COLUMN                                       Convertible       Truncation            Lossy

-------------------------------------------------- ---------------- ---------------- ----------------

-------------------------------------------------- ---------------- ---------------- ----------------

 

XML CSX Dictionary Tables:

 

USER.TABLE|COLUMN                                       Convertible       Truncation            Lossy

-------------------------------------------------- ---------------- ---------------- ----------------

-------------------------------------------------- ---------------- ---------------- ----------------

 

Application Data:

 

USER.TABLE|COLUMN                                       Convertible       Truncation            Lossy

-------------------------------------------------- ---------------- ---------------- ----------------

TEST.T|NAME                                                       0                1                0

-------------------------------------------------- ---------------- ---------------- ----------------

 

[Indexes to be Rebuilt]

 

USER.INDEX on USER.TABLE(COLUMN)                                                        

-----------------------------------------------------------------------------------------

（略过……）

----------------------------------------------------------------------------------------

 

 

汇总报告内容比较多，也比较全面。包括了处理数据库空间、本次扫描处理过程的信息等内容。可以作为整体分析结果加以处理。最后部分的user.index部分，是建议的转换后进行索引重建的范围。

 

6、结论

 

Ccscan工具是一种很方便的字符集转换检验工具。通过简单的分析处理，可以避免很多在迁移转换过程中的数据缺失风险。一些可以规避的错误和问题，可以在迁移规划阶段就进行处理。

 

来自 “ ITPUB博客 ” ，链接：http://blog.itpub.net/17203031/viewspace-1791005/，如需转载，请注明出处，否则将追究法律责任。

转载于:http://blog.itpub.net/17203031/viewspace-1791005/

ciqu9915
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
实验八 键盘扫描及数码管显示实验
一杯水果茶！足矣~
03-02 3155
键盘扫描及数码管显示 及扩展实验，代码及详解
使用Ccscan进行数据字符集转换验证（上）
ciqu9915的博客
09-02 137
字符集问题是IT领域各个方面都需要面对的问题。从最早网页编程乱码，到数据库报表显示乱码，搜索引擎上IT方面最流行的几个问题里面，乱码可能能排到前几名关键字。 Oracle数据库...
scan-cc-user.sh
weixin_33768481的博客
08-03 71
为什么80%的码农都做不了架构师？>>> ...
csscan安装使用指南
Teapot Oracle生活
07-14 2427
csscan安装使用指南1.概述csscan工具全程大名：Character Set Scanner（字符集扫描工具）该工具可以用来在进行字符集转换前检查所有的表是否能够进行成功转换安装请参考如下文档：9i：请参考：Installing and Configuring Cssca
DSP如何添加lib库.ae66，.a
smartvxworks的博客
11-20 1180
举例要添加imglib.ae66库 工程配置 属性->C6000 Linker->File Search Path 添加imglib.ae66全路径，含imglib.ae66 添加imglib.ae66所在的路径 具体如上图所示
汇编语言--键盘扫描及显示实验（含代码解释）
热门推荐
海到无边天作岸 山登绝顶我为峰
11-13 1万+
实验题目 将8255单元与键盘及数码管显示单元连接，编写实验程序，扫描键盘输入，并将扫描结果送数码管显示。键盘采用4X4键盘,每个数码管显示值可为0-F共16个数。 实验具体内容如下: 将键盘进行编号，记作0~F,当按下其中一一个按键时，将该按键对应的编号在一一个数码管上显示出来，当再按下一个按键时，便将这个按键的编号在下-一个数码管上显示出来,数码管上可以显示最近4次按下的按键编号。 电路图 ...
Eclipse C debug报错Can‘t find a source file at “xxxxx“Locate the file or edit the source lookup path
m0_49047167的博客
11-12 4232
笔记备忘 1、操作入下：Debug configerations进入如下界面： 双击你的放置器对应的选项，添加新的选项，在source位置记得添加如下选项。 2、解决完上面报错还提示如下：no source for main **step1、**工程右击选择properties,C/C++ Build->Setting->Debugging右侧 Debug level 下拉选择Default(-g) step2工程右击选择properties,C/C++ Build->Setting
汇编课设-电子闹钟
CSDN_Ysu的博客
02-22 8519
设计一个电子闹钟，用汇编语言编写电子闹钟程序，在唐都实验箱上实现硬件接线，通过对计数器8254，可编程并行接口芯片8255以及中断控制芯片8259的应用，实现调用显示子程序、调用闹钟子程序、调用整点报时子程序、暂停子程序、播放音乐子程序、删除闹钟子程序、时间清零子程序（秒表），其中，程序不断反复扫描小键盘的按键是否被按下，按下不同的按键将会进入不同的子程序中。在达到完成电子闹钟课设的基本要求的基础上进一步有了新的如播放音乐，清零，暂停等新的创新。关键词：电子闹钟 汇编语言 8259 8255。
微机原理与接口技术电子发声器课程设计样本.doc
12-16
2. 实现键盘扫描功能，使用 CCSCAN 子程序实现取出按键值并输入 A 口。 3. 实现 Play 输出发音子程序，使用 PLAY PROC 子程序将音频信号输出到扬声器上。 4. 实现延时子程序，使用 DALLY PROC 子程序实现延时功能，...
【redis的基本数据类型】
m0_50116974的博客
06-13 556
压缩列表的基本信息包括压缩列表的大小，压缩列表的长度以及最后一个entry的偏移，之所以要有这个偏移，是为了找到最后一个entry,而每个entry都记录上一个元素的大小，通过计算就知道上一个entry的地址，这样方便的从后向前进行遍历。的结构，其分为两部分，8字节的Redis对象元数据信息，8字节的指针，其中Redis对象的元数据信息存储了类型的LRU信息，真正的编码格式等等，而如果字符串存储的是数字类型，则复用了8字节的指针的位置。的操作，但是当列表的元素非常少的时候，其内部使用。
canal应用
qq_33816292的博客
06-12 131
canal分享模块链接。
源码编译安装LAMP
潇的博客
06-12 836
LAMP 架构是目前成熟的企业网站应用模式之一，指的是协同工作的一整套系统和相关软件，能够提供动态Web站点服务及其应用开发环境。LAMP是一个缩写词，具体包括Linux操作系统、Apache网站服务器、MySQL数据库服务器、PHP(或Perl、Python)网页编程语言。本章将以源码编译的方式搭建LAMP环境，能够满足企业定制化的需求。在构建LAMP平台时，各组件的安装顺序依次为Linux、Apache、MySQL、PHP。其中Apache和MySQL的安装并没有严格的顺序；
Django UpdateView视图
人生苦短，何妨一试
06-11 402
UpdateView是Django中的一个通用视图，用于处理对象的更新操作。它允许用户更新一个已经存在的对象。UpdateView通常与一个模型表单一起使用，这样用户就可以看到当前对象的值，并可以修改它们。
SpringBoot+MyBatis批量插入数据的三种方式
pscool的博客
06-12 822
在开发过程中，我们经常会遇到往数据库表中插入大量数据的场景，比如excel批量导入数据。那么该如何快速地插入数据呢？我们可以考虑使用批量插入来实现，实测100000条数据添加，后附具体实现代码。用一个 for 循环，把数据一条一条地插入。/*** 第一种方案，用 for语句循环插入 10万 条数据*/i < count;i++) {user.setName("方案1测试" + i);user.setGender("男");user.setUsername("方案1测试");
liquibase做数据库版本管理
weixin_44554979的博客
06-10 202
通过这个配置就会自动启动liquibase。
ORDER BY FIELD
北尘
06-15 83
ORDER BY FIELD 是MySQL中的一个特殊排序函数，它允许你基于一个自定义的值列表对查询结果进行排序。在这个例子中，所有属于’HR’部门的员工会首先列出，接着是’IT’部门的员工，然后是’Finance’部门的员工，最后是其他所有部门的员工，这些其他部门的员工将按照他们在表中原本的顺序排列。假设有一个employees表，包含name和department两列，现在你想按照特定部门顺序列出员工，部门顺序为：‘HR’, ‘IT’, ‘Finance’，其他部门按照自然顺序跟随。
简单了解MySql以及一些简单的应用MySql
weixin_63323754的博客
06-14 1138
初始MySql，能够简单地使用MySql
springboot连接多个库
sunyingboaini的博客
06-11 190
一个SpringBoot项目，同时连接两个数据库：比如一个是Mysql数据库，一个是oracle数据库（啥数据库都一样，连接两个同为oracle的数据库，或两个不同的数据库，只需要更改对应的driver-class-name和jdbc-url等即可）注意：连接什么数据库，要引入对应数据库的包。
1）Java项目笔记搭建系统梳理相关知识
最新发布
WLKUYM的博客
06-15 354
工作有年头了，学到了很多技术，收获了很多。但是对与工作相关的专业技能知识的掌握杂而乱，不够全面系统。因此做了个项目笔记来辅助梳理所掌握内容，方便需要时拿出来看看，前面做的时候，反反复复重建过好几次，目前的笔记结构较为满意（看过很多资料，没有令我满意的，别人总结的再好，终究不是自己的）事先说明，咱不是卖书的，我搞得也是电子书。毕竟实体书太沉了，贵（或许买了就是块板砖，压箱底吃灰了，浪费钱），拿着也不方便，各位可以从脚本之家（宝藏哦）搜索对应书籍下载。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值