资讯专栏INFORMATION COLUMN

MySQL中utf8和utf8mb4的区别

muzhuyu / 1169人阅读

摘要:包括表情是一种特殊的编码,常见于和手机上,和很多不常用的汉字,以及任何新增的字符等等。是中的一种字符集,只支持最长三个字节的字符,也就是中的基本多文本平面。中的字符串长度算的是字符数而非字节数,对于数据类型来说,需要为字符串保留足够的长。

一、简介

MySQL在5.5.3之后增加了这个utf8mb4的编码,mb4就是most bytes 4的意思,专门用来兼容四字节的unicode。好在utf8mb4是utf8的超集,除了将编码改为utf8mb4外不需要做其他转换。当然,为了节省空间,一般情况下使用utf8也就够了。

二、内容描述

那上面说了既然utf8能够存下大部分中文汉字,那为什么还要使用utf8mb4呢? 原来mysql支持的 utf8 编码最大字符长度为 3 字节,如果遇到 4 字节的宽字符就会插入异常了。三个字节的 UTF-8 最大能编码的 Unicode 字符是 0xffff,也就是 Unicode 中的基本多文种平面(BMP)。也就是说,任何不在基本多文本平面的 Unicode字符,都无法使用 Mysql 的 utf8 字符集存储。包括 Emoji 表情(Emoji 是一种特殊的 Unicode 编码,常见于 ios 和 android 手机上),和很多不常用的汉字,以及任何新增的 Unicode 字符等等。

三、问题根源

最初的 UTF-8 格式使用一至六个字节,最大能编码 31 位字符。最新的 UTF-8 规范只使用一到四个字节,最大能编码21位,正好能够表示所有的 17个 Unicode 平面。

utf8 是 Mysql 中的一种字符集,只支持最长三个字节的 UTF-8字符,也就是 Unicode 中的基本多文本平面。

Mysql 中的 utf8 为什么只支持持最长三个字节的 UTF-8字符呢?
我想了一下,可能是因为 Mysql 刚开始开发那会,Unicode 还没有辅助平面这一说呢。那时候,Unicode 委员会还做着 “65535 个字符足够全世界用了”的美梦。Mysql 中的字符串长度算的是字符数而非字节数,对于 CHAR 数据类型来说,需要为字符串保留足够的长。当使用 utf8 字符集时,需要保留的长度就是 utf8 最长字符长度乘以字符串长度,所以这里理所当然的限制了 utf8 最大长度为 3,比如 CHAR(100) Mysql 会保留 300字节长度。至于后续的版本为什么不对 4 字节长度的 UTF-8 字符提供支持,我想一个是为了向后兼容性的考虑,还有就是基本多文种平面之外的字符确实很少用到。

要在 Mysql 中保存 4 字节长度的 UTF-8 字符,需要使用 utf8mb4 字符集,但只有 5.5.3 版本以后的才支持(查看版本: select version();)。我觉得,为了获取更好的兼容性,应该总是使用 utf8mb4 而非 utf8. 对于 CHAR 类型数据,utf8mb4 会多消耗一些空间,根据 Mysql 官方建议,使用 VARCHAR 替代 CHAR。



欢迎订阅「K叔区块链」 - 专注于区块链技术学习

博客地址:http://www.jouypub.com
简书主页:https://www.jianshu.com/u/756c9c8ae984
segmentfault主页:https://segmentfault.com/blog/jouypub
腾讯云主页:https://cloud.tencent.com/developer/column/72548

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/47958.html

相关文章

  • MySQL编码utf8升级utf8mb4

    摘要:并且,不能完全支持组合的记号。这主要影响越南和俄罗斯的一些少数民族语言,如和。的最主要的特色是支持扩展,即当把一个字母看作与其它字母组合相等时。它仅能够在字符之间进行逐个比较。 上篇文章我们介绍了utf8和utf8mb4的区别,这篇文章我们主要介绍utf8升级utf8mb4的步骤 utf8升级utf8mb4具体步骤:首先将我们数据库默认字符集由utf8更改为utf8mb4,然后将表默认...

    chavesgu 评论0 收藏0
  • MYSQLCOLLATE是什么?

    摘要:是用来做什么的使用的开发可能会非常眼熟,因为其中的中文表头已经给出了答案截图所谓,其实是用来排序的规则。不过,在系统设计中,我们还是要尽量避免让系统严重依赖中文字段的排序结果,在的查询中也应该尽量避免使用中文做查询条件。 本文由horstxu发表 在mysql中执行show create table 指令,可以看到一张表的建表语句,example如下: CREATE TABLE `ta...

    LeviDing 评论0 收藏0
  • MYSQLCOLLATE是什么?

    摘要:是用来做什么的使用的开发可能会非常眼熟,因为其中的中文表头已经给出了答案截图所谓,其实是用来排序的规则。不过,在系统设计中,我们还是要尽量避免让系统严重依赖中文字段的排序结果,在的查询中也应该尽量避免使用中文做查询条件。 本文由horstxu发表 在mysql中执行show create table 指令,可以看到一张表的建表语句,example如下: CREATE TABLE `ta...

    hss01248 评论0 收藏0
  • mysql/Java服务端对emoji支持

    摘要:前言最近开发的项目因为需要用户文本的存储,自然就遇到了等表情符号如何被支持的问题。问题描述如果字符集且是服务器的话,当存储含有表情时,会抛出类似如下异常这就是字符集不支持的异常。升级步骤的最低版本支持版本为,若不是,请升级到较新版本。   前言: 最近开发的iOS项目因为需要用户文本的存储,自然就遇到了emoji等表情符号如何被mysql DB支持的问题。困扰了数日,在就要绝望放弃...

    crelaber 评论0 收藏0
  • mysql/Java服务端对emoji支持

    摘要:前言最近开发的项目因为需要用户文本的存储,自然就遇到了等表情符号如何被支持的问题。问题描述如果字符集且是服务器的话,当存储含有表情时,会抛出类似如下异常这就是字符集不支持的异常。升级步骤的最低版本支持版本为,若不是,请升级到较新版本。   前言: 最近开发的iOS项目因为需要用户文本的存储,自然就遇到了emoji等表情符号如何被mysql DB支持的问题。困扰了数日,在就要绝望放弃...

    lncwwn 评论0 收藏0

发表评论

0条评论

最新活动
阅读需要支付1元查看
<