Oracle里令人头疼的生僻字处理案例

news2025/1/16 0:47:36

事情起因

有小伙伴找到我问一下生僻字的问题，数据库是oracle 11g，字符集是zhs16gbk
 

image.png


下图里显示的？？应该是“𧿹”这个字，算是个生僻字。
 

image.png


问应用厂家就说数据库字符集建错了，要改库的字符集。what???，这库都用了好几年了，现在改库字符集也不现实啊。
检查下字典点，看表里也是？？显示

image.png

模拟测试

为了测试， 先创建个测试表，第1列是varchar2，第2列是nvarchar2
这里为了方便测试，使用scott用户

CREATE TABLE "SCOTT"."TEST_NAME" ( "BIANMA" NUMBER NOT NULL ENABLE, "VARCHAR2_NAME" VARCHAR2(200 BYTE), "NVARCHAR2_NAME" NVARCHAR2(200), CONSTRAINT "TEST_NAME_PK" PRIMARY KEY ("BIANMA") USING INDEX PCTFREE 10 INITRANS 2 MAXTRANS 255 STORAGE( INITIAL 65536 NEXT 1048576 MINEXTENTS 1 MAXEXTENTS 2147483645 PCTINCREASE 0 FREELISTS 1 FREELIST GROUPS 1 BUFFER_POOL DEFAULT FLASH_CACHE DEFAULT CELL_FLASH_CACHE DEFAULT) TABLESPACE "USERS" ENABLE ) SEGMENT CREATION DEFERRED PCTFREE 10 PCTUSED 40 INITRANS 1 MAXTRANS 255 NOCOMPRESS LOGGING STORAGE( INITIAL 65536 NEXT 1048576 MINEXTENTS 1 MAXEXTENTS 2147483645 PCTINCREASE 0 FREELISTS 1 FREELIST GROUPS 1 BUFFER_POOL DEFAULT FLASH_CACHE DEFAULT CELL_FLASH_CACHE DEFAULT) TABLESPACE "USERS" ;

创建如下图
 

image.png


这里提供几个把生僻字转换为Unicode的网址

http://unicode.wiicha.com/
https://www.bejson.com/convert/unicode_chinese/

查询一下这个字
 

image.png


\u是转换字符，用的时候去掉
查询一下

select utl_raw.cast_to_nvarchar2('d85fdff9') from dual;

image.png

在库里组合查询一下，看出来也可以显示

select utl_raw.cast_to_nvarchar2('d85fdff96307') from dual;

image.png


更新一下两个列里的内容

insert into  test_name  values (1,(select utl_raw.cast_to_nvarchar2('d85fdff96307') from dual),(select utl_raw.cast_to_nvarchar2('d85fdff96307') from dual));
commit;
select * from test_name

image.png

可以看出来，使用这种unicode转换的方式，只对nvchar2生效，varchar2还是显示乱码

关于varchar2和nvchar2

引用ASKTOM里的解答
NVARCHAR Vs. VARCHAR - Ask TOM (oracle.com)

Thanks for the question, Andrew.
Asked: September 04, 2015 - 3:00 pm UTC
Last updated: February 25, 2020 - 8:20 am UTC
Version: 12.0.2
Viewed 50K+ times! This question is 

img

You Asked
In a database with character sets defined as:
NLS_CHARACTERSET = AL32UTF8
NLS_NCHAR_CHARACTERSET = UTF8
Would there be any difference in the (language) character sets that could be stored by VARCHAR2 Vs. NVARCHAR2? As in
NAME VARCHAR2(60 CHAR)
Vs.
NAME NVARCHAR2(60 CHAR)
and Chris said…
NVARCHAR2 is a unicode-only data type. It’s useful if you want to have unicode for some columns (those that are NVARCHAR2) but have the rest of the database use a different characterset. In all other cases stick with using VARCHAR2.
In your case the only difference between UTF8 and AL32UTF8 is the AL version includes “supplementary characters”.
See also:
http://www.oracle.com/technetwork/database/database-technologies/globalization/twp-appdev-unicode-10gr2-129234.pdf
and
http://docs.oracle.com/database/121/NLSPG/ch6unicode.htm#NLSPG006

解决办法

根据以上测试的情况来看，有几个方案：
方案1、列由原来的varchar2改为nvarchar2，再插入unicode编码。
方案2、新建个utf8字符集的库，导出现有全库，再导入回去。
方案3、𧿹改写成别的可识别字符，如（足母）代替。
下面一个一个说一下几个方案：
方案1
需要停业务改表，结构，测试了一下，varchar2可以直接改成nvarchar2，但是nvarchar2改成varchar2要求必须没有数据。实际生产我也没测试过直接改列的字段类型，不知道会不会有问题。。
目前从网上收录2个操作方法
操作A
1、将表字段修改类型为：NVARCHAR2(),无论该字段是否存值都可以直接修改 alter table 表名 modify (字段名 nvarchar2(20));
注：如果想从NVARCHAR2（）改回VARCHAR2,会报错：“ORA-01439:要更改数据类型,则要修改的列必须为空”，
解决方案为：①、将该字段A改名B；②、新建表字段，命名为A，将B值更新到A；③、删除B字段
2、使用该sql将生僻字插入到表中： update 表名 set 字段名 = N’生僻字’ where …
注意set字段名字前一定要有N，且在’'外。
操作B
也有人提供一个中转的解决办法:
修改字段类型，需要先将该字段清空，如果需要保存数据，可以先建一个临时的字段存储这些数据，然后删除要修改的列，再重新创建

--临时字段
alter table test_name add TEMP nvarchar2(200);
--赋转换后的值
update test_name set TEMP=cast(VARCHAR2_NAME as nvarchar2(200));
commit;
--删除字段
alter table test_name drop column VARCHAR2_NAME;
--重建
ALTER TABLE TEST_NAME ADD (VARCHAR2_NAME NVARCHAR2(200) );
--赋值
update test_name set VARCHAR2_NAME=TEMP;
--临时字段的使命完成了
alter table test_name drop column TEMP;
select * from test_name
insert into  test_name  values (2,(select utl_raw.cast_to_nvarchar2('d85fdff96307') from dual),(select utl_raw.cast_to_nvarchar2('d85fdff96307') from dual));

image.png


方法2：
基本不可行，一是停机时间太长，再就是改了字符集再重新导入的时候也可能会遇到字段长度不够的问题。
方法3：
就是真实案例，问了一下别家医院（几个不同厂家的HIS系统）是怎么解决这个问题的，结果。。。。就是写成（足母），别笑，真的好多家都这么搞的！！
 

image.png


另1家医院也是这样

image.png

总结后记

虽然这个能有办法解决。
但是还有一点我没想明白，人名生僻字他们咋解决的？？难道人名的字段类型本来就是nvarchar2???
有知道的小伙伴可以告诉我一下，谢谢！

20240509

后来大佬们给的结果就是，在把varchar2改成nvarchar2，再重新录入。看来要整库都改生僻字是个大工程，1个1个改肯定是不好办。

image.png

 也欢迎关注我的公众号【徐sir的IT之路】，一起学习————————————————————————————
公众号：徐sir的IT之路
CSDN ：https://blog.csdn.net/xxddxhyz?type=blog
墨天轮：https://www.modb.pro/u/3605
PGFANS：https://www.pgfans.cn/user/home?userId=5568————————————————————————————

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1655924.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

LeetCode89：柠檬水找零

LeetCode89：柠檬水找零

题目描述 在柠檬水摊上，每一杯柠檬水的售价为 5 美元。顾客排队购买你的产品，（按账单 bills 支付的顺序）一次购买一杯。 每位顾客只买一杯柠檬水，然后向你付 5 美元、10 美元或 20 美元。你必须给每个顾客正确找零&a…
阅读更多...
docker容器技术篇：rancher管理平台部署kubernetes集群

docker容器技术篇：rancher管理平台部署kubernetes集群

rancher管理平台部署kubernetes集群 Rancher 是一个 Kubernetes 管理工具，让你能在任何地方和任何提供商上部署和运行集群。 Rancher 可以创建来自 Kubernetes 托管服务提供商的集群，创建节点并安装 Kubernetes，或者导入在任何地方运行的现…
阅读更多...
引领AI数据标注新纪元：景联文科技为智能未来筑基

引领AI数据标注新纪元：景联文科技为智能未来筑基

在人工智能蓬勃发展的今天，数据如同燃料，驱动着每一次技术飞跃。在这场智能革命的浪潮中，景联文科技凭借其深厚的专业实力与前瞻性的战略眼光，正站在行业前沿，为全球的人工智能企业提供坚实的数据支撑。 全国布局&…
阅读更多...
C++向函数传递对象

C++向函数传递对象

C语言中，对象作为函数的参数和返回值的传递方式有 3 种：值传递、指针传递和引用传递。 1. 对象作为函数参数 把实参对象的值复制给形参对象，这种传递是单向的，只从实参到形参。因此，函数对形参值做的改变不会影响到实…
阅读更多...
Qt 6.7功能介绍

Qt 6.7功能介绍

Qt 6.7为我们所有喜欢在构建现代应用程序和用户体验时获得乐趣的人提供了许多大大小小的改进。一些新增内容作为技术预览发布，接下来我们就一起来看看吧： 将C20与Qt一起使用 对于许多编译器工具链来说，C20仍然是可选的和实验性的，…
阅读更多...
tartiflette，一个有趣的 Python 库！

tartiflette，一个有趣的 Python 库！

更多Python学习内容：ipengtao.com 大家好，今天为大家分享一个有趣的 Python 库 - tartiflette。 Github地址：https://github.com/tartiflette/tartiflette Tartiflette是一个为Python编写的GraphQL服务器实现，它建立在现代异步编程…
阅读更多...
机器学习中线性回归算法的推导过程

机器学习中线性回归算法的推导过程

线性回归是机器学习中监督学习中最基础也是最常用的一种算法。 背景：当我们拿到一堆数据。这堆数据里有参数，有标签。我们将这些数据在坐标系中标出。我们会考虑这些数据是否具有线性关系。简单来说 我们是否可以使用一条线或者一个平面去拟合这些数据的…
阅读更多...
Android Compose 二：布局的对齐方式

Android Compose 二：布局的对齐方式

布局的对齐方式 使用Modifier 内容或者子组件居中 Text(text "Hello $name!",modifier Modifier.fillMaxSize() //设置宽高撑满.wrapContentHeight(align Alignment.CenterVertically) //设置竖直居中.wrapContentWidth(align Alignment.CenterHorizontally…
阅读更多...
相亲系统功能介绍

相亲系统功能介绍

相亲系统是一种旨在帮助单身人士寻找合适伴侣的平台，其主要功能通常包括以下几个方面： 实名认证：为了确保双方的权益保障，用户必须进行实名认证后才能使用该系统。这有助于增加系统的安全性和可信度。偏好选择：用户可…
阅读更多...
数据结构（十一）----图的应用

数据结构（十一）----图的应用

目录 一.最小生成树 1.Prim算法（普里姆） 2.Kruskal算法(克鲁斯卡尔): 二.最短路径（BFS算法） 1.单源最短路径 （1）BFS算法（无权图） （2）Dijkstra算法&…
阅读更多...
带你入门React

带你入门React

目录 前言一，基本配置1.1 环境搭建1.2 页面初始化渲染二，基础学习2.1 结构与样式开发2.2 数据展示2.3 行内样式2.4 条件渲染2.5 列表渲染2.6 点击事件 三，页面更新3.1 组件数据3.2 组件数据共享 总结 前言 笔者之前的工作经验都局限于Vue&am…
阅读更多...
CCF-Csp算法能力认证，202209-1如此编码（C++）含解析

CCF-Csp算法能力认证，202209-1如此编码（C++）含解析

前言 推荐书目，在这里推荐那一本《算法笔记》（胡明），需要PDF的话，链接如下 「链接：https://pan.xunlei.com/s/VNvz4BUFYqnx8kJ4BI4v1ywPA1?pwd6vdq# 提取码：6vdq”复制这段内容后打开手机迅雷…
阅读更多...
YOLOv8独家原创改进： 通用倒瓶颈（UIB）搜索块结合C2f二次创新 | 轻量化之王MobileNetV4

YOLOv8独家原创改进： 通用倒瓶颈（UIB）搜索块结合C2f二次创新 | 轻量化之王MobileNetV4

💡💡💡创新点：轻量化之王MobileNetV4 开源 | Top-1 精度 87%，手机推理速度 3.8ms，原地起飞！ 最主要创新：引入了通用倒瓶颈（UIB）搜索块，这是一个统一且灵活的结构，它融合了倒瓶颈（IB）、ConvNext、前馈网络（FFN）以及一种新颖的额外深度可分（ExtraDW）变体技…
阅读更多...
【大学物理】双语笔记

【大学物理】双语笔记

7.5 angular momentu(角动量)_哔哩哔哩_bilibili 6.4Energy in Rotation Motion 有质量有速度的物体有动能，是不是很有道理 international system（from French systeme international，acronym，SI）of ineria kg*m^2 转…
阅读更多...
使用Nuxt.js实现服务端渲染（SSR）

使用Nuxt.js实现服务端渲染（SSR）

Nuxt.js 是一个基于 Vue.js 的框架，它提供了服务器端渲染（SSR）和静态站点生成（SSG）的能力，使开发者能够轻松地构建高效、优雅的前端应用。Nuxt.js 集成了许多开箱即用的功能和工具，帮助开发者快…
阅读更多...
AI换脸原理(4)——人脸对齐（关键点检测）参考文献2DFAN：代码解析

AI换脸原理(4)——人脸对齐（关键点检测）参考文献2DFAN：代码解析

注意，本文属于人脸关键点检测步骤的论文，虽然也在人脸对齐的范畴下。 1、介绍 在本文中，重点介绍了以下几项创新性的成果，旨在为人脸关键点检测领域带来新的突破。 首先，成功构建了一个卓越的2D人脸关键点检测基线模型。这一模型不仅集成了目前最优的关键点检测网络结构，…
阅读更多...
动态代理，案例理解

动态代理，案例理解

动态代理：代理就是被代理者没有能力或者不愿意去完成某件事情，需要找个人代替自己去完成这件事，动态代理就是用来对业务功能（方法）进行代理的。 步骤： 1.必须有接口，实现类要实现接口&#xf…
阅读更多...
前端开发攻略---使用Sass调整颜色亮度，实现Element组件库同款按钮

前端开发攻略---使用Sass调整颜色亮度，实现Element组件库同款按钮

目录 1、演示 2、实现原理 3、实现代码 1、演示 2、实现原理 改变颜色亮度的原理是通过调整颜色的 RGB 值中的亮度部分来实现的。在 Sass 中，可以使用颜色函数来操作颜色的 RGB 值，从而实现亮度的调整。 具体来说，亮度调整函数通常会改变颜…
阅读更多...
win11个性化锁屏界面怎么关闭？

win11个性化锁屏界面怎么关闭？

win11个性化锁屏界面关闭方法对于win11用户来说，关闭个性化锁屏界面是一个常见问题。本文将由php小编苹果详细介绍如何执行此操作，分步指导并提供操作截图。继续阅读以了解具体步骤。 win11个性化锁屏界面关闭方法 第一步，点击底部Windows图…
阅读更多...
QtWindows任务栏

QtWindows任务栏

目录 引言任务栏进度右键菜单缩略图工具栏完整代码 引言 针对Windows系统的任务栏，Qt基于系统的原生接口封装有一些非常见类，如QWinTaskbarButton、QWinTaskbarButton、QWinThumbnailToolBar等，用于利用工具栏提供更多的信息，诸如…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023