如何在 MySQL 中存储 emoji ?
使用 erlang 存储一些特殊字符串到 MySQL 的时候,却没法读出来。经检查,这些字符串的二进制格式如下:
240,159,152,134,240,159,152,144 查看二进制的 unicode 是什么?
14 unicode:characters_to_list( 240,159,152,134,240,159,152,144 ). [128518,128528] 15 erlang:integer_to_list(128518,16).%%查看十六进制 "1F606" 16 erlang:integer_to_list(128528,16). "1F610"
明显,1F606 和 1F610 超过了常见 unicode 字符串 0000-FFFF 的表达范围。
这里引用资料:http://cenalulu.github.io/linux/character-encoding/
1F606 和 1F610 代表什么?根据 unicode 官网上的说明,这是一种 emoji(表情符号),具体的展示形式与厂商有关。
MySQL 上存储失败的原因目前来说,多数 MySQL 都是以 utf8 存储,注意 MySQL 的 utf8 和我们所说的传统 utf8 有点区别。MySQL 的 utf8 编码规定了最多只能有 3 个字节,而 emoji 的 unicode 已经超过了 3 个字节,因此 MySQL 的 utf8 无法识别与存储 emoji。
为此可以查阅 MySQL 中关于 unicode 支持的资料,从中可以得知 MySQL 在 5.5 后开始支持 utf8mb4,这种编码支持 1 ~ 4 个字节,这种编码可以表示 emoji。
另外 utf8mb4 向下兼容 utf8。
关于 unicode 与 utf8 的详细介绍,请查看:http://www.ruanyifeng.com/blog/2007/10/ascii_unicode_and_utf-8.html
将 MySQL 中对应的字段改成 utf8mb4 编码:
ALTER TABLE t1 DEFAULT CHARACTER SET utf8mb4, MODIFY col1 CHAR(10) CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci NOT NULL, MODIFY col2 CHAR(10) CHARACTER SET utf8mb4 COLLATE utf8mb4_bin NOT NULL;
参考:http://dev.mysql.com/doc/refman/5.5/en/charset-unicode-upgrading.html
将连接库的连接编码改为 utf8mb4,以 erlang 的连接库 emysql 为例:
emysql:add_pool(pool,[{size,1},{user,"user"},{password,"password"},{host,"host"},{port,3306},{encoding,utf8mb4}]). emysql:add_pool(pool,1,"user","password","host",3306,undefined, utf8mb4).
为了建表方便,可以修改 my.cnf:
# 服务器字符集 [mysql] default-character-set=utf8mb4 [mysqld] character-set-server=utf8mb4
原文发布时间为:2016-08-21
本文来自云栖社区合作伙伴“Linux中国”
Java emoji持久化mysql Java emoji持久化mysql 好久没有更新博客了,今天和大家分享一个关于emoji表情持久化问题,相信做web开发的都遇到过这样的问题,因为我们知道mysql的utf-8字符集保存不了保存不了表情字符,这是为什么呢?因为普通的字符串或者表情都是占位3个字节,所以utf8足够用了,但是移动端的表情符号占位是4个字节,普通的utf8就不够用了,为了应对无线互联网的机遇和挑战、避免 emoji 表情符号带来的问题、涉及无线相关的 MySQL 数据库建议都提前采用 utf8mb4 字符集,这必须要作为移动互联网行业的一个技术选型的要点。
最近在学习springboot,在练习做一个简单博客系统时遇到了保存emoji表情出错,搜索了半天才搞定。这里记录下来,希望能够帮助到自己或有需要的人不要踩坑。
MySQL 解决 emoji表情 的方法,使用utf8mb4 字符集(4字节 UTF-8 Unicode 编码) MySQL 解决 emoji表情 的方法,使用utf8mb4 字符集(4字节 UTF-8 Unicode 编码) 前段时间做项目遇到APP评论中有 emoji 表情符号,结果导致插入 MySQL 数据库失败,时隔好久了,现在整理一下。
微信开发 MySQL 存储 Emoji 表情 之前在开发的时候遇到 utf-8 编码无法存储 Emoji 表情,后面经过研究之后需要用到 utf-8mb4 编码,这里网上很多教程说是要把 数据库、表、字段三个都设置为 utf-8mb4 编码,甚至有的教程需要修改 mysql.conf 配置文件,还需要重启 MySQL。
相关文章
- php 版本号 整数化 mysql存储入库 比较大小【版本处理类,提供版本与数字互相转换】
- mysql 启动报错--发现系统错误2,系统找不到指定的文件。
- node+express+mysql 实现登陆注册
- 【MySQL】解决mysql的 1594 错误
- 【MySQL】常见的mysql 进程state
- linux - mysql 异常:MySQL Daemon failed to start.
- MySQL按照汉字的拼音排序,mysql汉字排序
- MYSQL错误解决:ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/var/lib/mysql/mysql.sock' (2)
- mysql查看被锁住的表,正在进行的进程,已经杀掉进程的方法
- 数据库内核月报 - 2015 / 05-MySQL · 捉虫动态 · 临时表操作导致主备不一致
- 数据库内核月报 - 2015 / 10-MySQL · 特性分析 · MySQL权限存储与管理
- mysql最大连接数试验
- MySQL存储过程(一)——存储过程理论基础
- django配置链接mysql数据库:pymysql和mysqlclient两种方案
- Atitit mysql存储过程编写指南 1. 定义变量1 1.1. 变量名以@开头用户变量 会话变量1 1.2. 以declare关键字声明 存储过程变量2 1.3. @是用户自定义变量,
- GaussDB(for MySQL)如何在存储架构设计上做到高可靠、高可用
- mysql事务 mysql事务回滚 MySQL事务死锁 如何解除死锁 资金出入账
- MySQL Study之--Mysql无法启动“mysql.host”
- mysql-定时调用存储过程
- MySQL数据库的主从同步实现及应用
- MySQL InnoDB存储引擎undo redo解析
- Groonga开源搜索引擎——列存储做聚合,没有内建分布式,分片和副本是随mysql或者postgreSQL作为存储引擎由MySQL自身来做分片和副本的
- python查询mysql以字典返回
- 如何实现MySQL表数据随机读取?从mysql表中读取随机数据
- Mysql 主键
- Mysql 问题集
- MySql 存储过程 退出
- 如何查看MySQL的当前存储引擎?
- 【MySql】MySQL索引15连问(相信大家看完肯定会有帮助)
- MySQL 一文带你详解 mysql binlog
- MySQL索引覆盖扫描(覆盖索引)
- 【Mysql异构实时同步Oracle】OGG12异构同步mysql到oracle(windows mysql实时同步数据到linux oracle)详细文档
- [MySQL] 解决办法: Error: Transaction test error: file /etc/my.cnf from install of mysql-community-server