MySQL 对字符排序,类通讯录

1. 要求

第一层排序:以首字符为标准,【A-Z,特殊符号|数字|emoji】分类,首字符是中文则转声母英文。
第二层排序:大类中如A中的所有字符按GBK编码排序
第三层排序:大写的数字【一二三四五六七八九十】按数字【12345678910】排序

2. 实现

GBK中对字符串中的每位字符的排序是 【空|数字|特殊字符|emoji|英文大小写】,首字符的排序需要调整这个顺序为【英文大小写|数字|特殊字符|emoji】。
首先第一位是中文换成声母英文。如下mysql函数

CREATE FUNCTION `getFirstCode`(in_string VARCHAR(255)) RETURNS varchar(255) CHARSET utf8mb4
    DETERMINISTIC
    COMMENT '获取中文首字母函数'
BEGIN

#定义临时字符串变量,用于接收函数中传递进来的字符串值,这里是in_string
DECLARE tmp_str VARCHAR(255) CHARSET gbk DEFAULT '' ; 

#定义临时字符串变量,用于存放函数中传递进来的字符串值的第一个字符
DECLARE tmp_char VARCHAR(2) CHARSET gbk DEFAULT '';

#tmp_str的长度
DECLARE tmp_loc SMALLINT DEFAULT 0;

#初始化,将in_string赋给tmp_str
SET tmp_str = in_string;

#获取tmp_str最左端的首个字符,注意这里是获取首个字符,该字符可能是汉字,也可能不是。
SET tmp_char = LEFT(tmp_str,1);

#获取字符的编码范围的位置,为了确认汉字拼音首字母是那一个,超过按首字母排序的部分,使用第一个GBK内码0xD8A1

SET tmp_loc=INTERVAL(CONV(HEX(tmp_char),16,10),
0xB0A1,0xB0C5,0xB2C1,0xB4EE,0xB6EA,0xB7A2,0xB8C1,0xB9FE,0xBBF7,0xBFA6,0xC0AC,0xC2E8,0xC4C3,0xC5B6,0xC5BE,0xC6DA,0xC8BB,0xC8F6,0xCBFA,0xCDDA ,0xCEF4,0xD1B9,0xD4D1,0xD8A1);

#判断左端首个字符是多字节还是单字节字符,要是多字节则认为是汉字且作以下拼音获取,要是单字节则不处理。
#如果是多字节字符但是不在对应的编码范围之内,即对应的不是大写字母则也不做处理,这样数字或者特殊字符就保持原样了

IF (LENGTH(tmp_char)>1 AND tmp_loc>0 AND tmp_loc<24) THEN
  SELECT ELT(tmp_loc,'A','B','C','D','E','F','G','H','J','K','L','M','N','O','P','Q','R','S','T','W','X','Y','Z','无') INTO tmp_char; #获得汉字拼音首字符
ELSEIF(tmp_loc>=24) THEN
  SELECT left(pinyin,1) INTO tmp_char FROM base_hanzi WHERE hanzi = tmp_char;
END IF;

RETURN tmp_char;#返回汉字拼音首字符
END

需要注意:

GBK编码,是对GB2312编码的扩展,因此完全兼容GB2312-80标准。

GB2312对汉字的编码排序也是按照A-Z的顺序分组编码,只有找到临界值,通过GBK内码(十六进制)与临界值的位置,就可得出声母是'A','B','C','D','E','F','G','H','J','K','L','M','N','O','P','Q','R','S','T','W','X','Y','Z'的哪一个,可是这里有个问题,GB2312只是对部分汉字进行编码,还有很多常见字没有,GBK对此扩展后,是按照其他的编排顺序,使用这个方法计算出的声母,会有错误。

原来汉字的编码只有GB 2312,只包含6763个汉字,GBK完全兼容了GB 2312的内容和顺序,并增加了一万多个汉字,但是顺序是按《康熙字典》的页码/字位排列,那些新增的汉字,编码值都比 D7F9->座(最后一个有这规律的汉字) 大,所以都识别成了Z。

在此虚构第24个声母,占位符"无",然后通过查表的方式,去确定声母,需把相关的对照表存到数据库中如本例中的base_hanzi,然后去查询获取,当然可以全部通过数据表来获取声母(如果中英文对照表足够准确和全面),但是考虑到性能问题当不属于规则范围内的汉字再去数据表中查询。
中文转为声母字符后,就可以和英文混合排序了。如下sql:

-- 拼音z排序最后的汉字:糳 utf8编码为 \xe7\xb3\xb3(即0xe7b3b3),gbk编码为BC64
-- 0x41 即十进制65 大写字母A
 -- 0xf09f9880 表示 emoji 表情😀
SELECT str_name,
convert(
  UNHEX(
    CASE
       WHEN HEX(LEFT(str_name, 1)) < HEX(0x41)
       THEN HEX(0xe7b3b3) -- 如果是少于英文字母编码则转换对应的汉字 "糳"
       WHEN LEFT(str_name, 1) >= 0xf09f9880
       THEN HEX(0xe7b3b3)  --将emoji表情转换对应的汉字 "糳"
       WHEN HEX(LEFT(str_name, 1)) > HEX("z")
       THEN HEX(getFirstCode(str_name)) -- 汉字获取声母
       ELSE HEX(LEFT(str_name,1))
    END
  )
  USING utf8
) 
as HanZi

from test_name
ORDER BY
CONVERT(HanZi USING GBK) ASC, -- 实现首字母英文|数字|字符|emoji
CONVERT(replaceNumber(str_name) USING GBK) COLLATE gbk_chinese_ci  -- 其他位数按照GBK排序
;

对于【一二三四五六七八九十】在GBK的排序中,是按声母的英文字母表的顺序,此处,写一个函数去特殊处理,转换成【123456789a】,就可以有数字的顺序了。

CREATE  FUNCTION `replaceNumber`(in_string VARCHAR(255)) RETURNS varchar(255) CHARSET utf8mb4
BEGIN

    DECLARE tmp_char VARCHAR(255) DEFAULT '';
    SET tmp_char = in_string;
  
  IF(tmp_char REGEXP '[一二三四五六七八九十]+') THEN
     SELECT REPLACE(REPLACE(REPLACE(REPLACE(REPLACE(REPLACE(REPLACE(REPLACE(REPLACE(REPLACE(
        tmp_char, '一','1'), '二','2'), '三','3'), '四','4'), '五','5'), '六','6'), '七','7'), '八','8'), '九','9'), '十','a')
     INTO tmp_char;
  END IF;

    RETURN tmp_char;

END

3. 资源

GBK 汉字内码扩展规范编码表(二)
http://ff.163.com/newflyff/gbk-list/
汉字拼音表
链接:https://pan.baidu.com/s/1JlBsC0I8LfF6YJoxvYRb9w
提取码:wjjk

参考:
https://juejin.im/post/5def87c6f265da3397729ac3
https://www.jianshu.com/p/29243714a9d3

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 213,014评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,796评论 3 386
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,484评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,830评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,946评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,114评论 1 292
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,182评论 3 412
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,927评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,369评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,678评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,832评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,533评论 4 335
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,166评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,885评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,128评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,659评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,738评论 2 351

推荐阅读更多精彩内容

  • 1. ASCII   我们知道,计算机内部是通过二进制数据进行操作的,所有的信息最终都会转换为一个二进制值,二进制...
    骑着乌龟去看海阅读 1,649评论 0 4
  • 计算机是如何表示字符的? 计算中的数据都是二进制(0和1),用一位来存储1个0或1,称为bit。8个二进制序列(8...
    公子拙阅读 4,091评论 4 17
  • 什么是字符集,什么是字符编码,它做什么用? 字符(Charcter)是文字与符号的总称,包括文字、图形符号、数学符...
    laravel阅读 306评论 0 0
  • 享受一个人的时光,最美好的方法是与喜欢的器皿一起度过。 我发自内省,真真切切地仔细思考关于生活的一切之后,觉得生活...
    可风0576阅读 399评论 0 0
  • 二月里的春雨潇洒着土豪特有的任性,全然不顾老天爷昨日的“红光满面”,说下就下。从午前的饭香下到夜幕低垂,滴...
    书逸轩阅读 195评论 0 0