更改MySQL数据库的编码为utf8mb4

抄自《更改MySQL数据库的编码为utf8mb4》。

utf-8 编码可能2个字节、3个字节、4个字节的字符,但是 MySQLutf8 编码只支持3字节的数据,而移动端的表情数据是4个字节的字符。如果直接往采用 utf-8 编码的数据库中插入表情数据,Java 程序中将报SQL异常:

java.sql.SQLException: Incorrect string value: ‘\xF0\x9F\x92\x94’ for column ‘name’ at row 1
at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:1073)
at com.mysql.jdbc.MysqlIO.checkErrorPacket(MysqlIO.java:3593)
at com.mysql.jdbc.MysqlIO.checkErrorPacket(MysqlIO.java:3525)
at com.mysql.jdbc.MysqlIO.sendCommand(MysqlIO.java:1986)
at com.mysql.jdbc.MysqlIO.sqlQueryDirect(MysqlIO.java:2140)
at com.mysql.jdbc.ConnectionImpl.execSQL(ConnectionImpl.java:2620)
at com.mysql.jdbc.StatementImpl.executeUpdate(StatementImpl.java:1662)
at com.mysql.jdbc.StatementImpl.executeUpdate(StatementImpl.java:1581)

可以对4字节的字符进行编码存储,然后取出来的时候,再进行解码。但是这样做会使得任何使用该字符的地方都要进行编码与解码。

utf8mb4编码是utf8编码的超集,兼容utf8,并且能存储4字节的表情字符。
采用utf8mb4编码的好处是:存储与获取数据的时候,不用再考虑表情字符的编码与解码问题。

更改数据库的编码为utf8mb4:

1. MySQL的版本

utf8mb4 的最低 MySQL 版本支持版本为 5.5.3+,若不是,请升级到较新版本。

2. MySQL驱动

5.1.34 可用,最低不能低于 5.1.13

3. 修改MySQL配置文件

修改 MySQL 配置文件 my.cnf(windows为my.ini

my.cnf一般在etc/mysql/my.cnf位置。找到后请在以下三部分里添加如下内容: 
[client] 
default-character-set = utf8mb4 
[mysql] 
default-character-set = utf8mb4 
[mysqld] 
character-set-client-handshake = FALSE 
character-set-server = utf8mb4 
collation-server = utf8mb4_unicode_ci 
init_connect='SET NAMES utf8mb4'

4. 重启数据库,检查变量

SHOW VARIABLES WHERE Variable_name LIKE 'character_set_%' OR Variable_name LIKE 'collation%';
Variable_name Value
character_set_client utf8mb4
character_set_connection utf8mb4
character_set_database utf8mb4
character_set_filesystem binary
character_set_results utf8mb4
character_set_server utf8mb4
character_set_system utf8
collation_connection utf8mb4_unicode_ci
collation_database utf8mb4_unicode_ci
collation_server utf8mb4_unicode_ci

collation_connectioncollation_databasecollation_server是什么没关系,但必须保证:

系统变量 描述
character_set_client (客户端来源数据使用的字符集)
character_set_connection (连接层字符集)
character_set_database (当前选中数据库的默认字符集)
character_set_results (查询结果字符集)
character_set_server (默认的内部操作字符集)

这几个变量必须是utf8mb4

5. 数据库连接的配置

数据库连接参数中:
characterEncoding=utf8 会被自动识别为 utf8mb4,也可以不加这个参数,会自动检测。
autoReconnect=true 是必须加上的。

6. 将数据库和已经建好的表也转换成utf8mb4

更改数据库编码:

ALTER DATABASE caitu99 CHARACTER SET `utf8mb4` COLLATE `utf8mb4_general_ci`;

更改表编码:

ALTER TABLE `TABLE_NAME` CONVERT TO CHARACTER SET `utf8mb4` COLLATE `utf8mb4_general_ci`; 

如有必要,还可以更改列的编码

可以写代码批量进行转换:

//获取所有表
Connection conn = null;
try {
  conn = DbUtilsTool.openConn("MySQL", "127.0.0.1", "3306", "caitu99", "root", "root");
  String sql = "show tables";
  QueryRunner qr = new QueryRunner();
  List<String> tblNameList= (List<String>) qr.query(conn, sql, new ColumnListHandler(1));
  sql = "ALTER DATABASE caitu99 CHARACTER SET `utf8mb4` COLLATE `utf8mb4_general_ci`";
  qr.update(conn,sql);
  for (String str:tblNameList) {
    sql = "ALTER TABLE "+str+" CONVERT TO CHARACTER SET `utf8mb4` COLLATE `utf8mb4_general_ci`";
    qr.update(conn,sql);
  }
}
catch (Exception e)  {
  e.printStackTrace();
  throw new RuntimeException(e);
}
finally {
  if(conn!=null) {
        try {
            conn.close();
        } catch (SQLException e) {
            e.printStackTrace();
        }
   }
}

DbUtilsTool类:

package com.mysql.chartest;

import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.SQLException;
import java.util.List;
import java.util.Map;

import org.apache.commons.dbutils.BasicRowProcessor;
import org.apache.commons.dbutils.BeanProcessor;
import org.apache.commons.dbutils.QueryRunner;
import org.apache.commons.dbutils.handlers.ArrayHandler;
import org.apache.commons.dbutils.handlers.ArrayListHandler;
import org.apache.commons.dbutils.handlers.BeanHandler;
import org.apache.commons.dbutils.handlers.BeanListHandler;
import org.apache.commons.dbutils.handlers.ColumnListHandler;
import org.apache.commons.dbutils.handlers.KeyedHandler;
import org.apache.commons.dbutils.handlers.MapHandler;
import org.apache.commons.dbutils.handlers.MapListHandler;
import org.apache.commons.dbutils.handlers.ScalarHandler;

public class DbUtilsTool {
  private static final QueryRunner runner = new QueryRunner();

  /* 打开数据库连接(type: MySQL,Oracle,SQLServer) */
  public static Connection openConn(String type,      //数据库类型
                                    String host,      //主机ip
                                    String port,      //主机端口
                                    String name,      //数据库名
                                    String username,  //用户名
                                    String password)//密码
   {
      Connection conn = null;
      try {
          String driver;
          String url;
          if (type.equalsIgnoreCase("MySQL")) {
              driver = "com.mysql.jdbc.Driver";
              url = "jdbc:mysql://" + host + ":" + port + "/" + name;
          } else if (type.equalsIgnoreCase("Oracle")) {
              driver = "oracle.jdbc.driver.OracleDriver";
              url = "jdbc:oracle:thin:@" + host + ":" + port + ":" + name;
          } else if (type.equalsIgnoreCase("SQLServer")) {
              driver = "com.microsoft.jdbc.sqlserver.SQLServerDriver";
              url = "jdbc:sqlserver://" + host + ":" + port + ";databaseName=" + name;
          } else {
              throw new RuntimeException();
          }
          Class.forName(driver);
          conn = DriverManager.getConnection(url, username, password);
      } catch (Exception e) {
          e.printStackTrace();
      }
      return conn;
  }

  /* 关闭数据库连接 */
  public static void closeConn(Connection conn) {
      try {
          if (conn != null) {
              conn.close();
          }
      } catch (Exception e) {
          e.printStackTrace();
      }
  }

  /* 查询(返回Array结果) */
  public static Object[] queryArray(Connection conn, String sql, Object... params) {
      Object[] result = null;
      try {
          result = runner.query(conn, sql, new ArrayHandler(), params);
      } catch (SQLException e) {
          e.printStackTrace();
      }
      return result;
  }

  /* 查询(返回ArrayList结果) */
  public static List<Object[]> queryArrayList(Connection conn, String sql, Object... params) {
      List<Object[]> result = null;
      try {
          result = runner.query(conn, sql, new ArrayListHandler(), params);
      } catch (SQLException e) {
          e.printStackTrace();
      }
      return result;
  }

  /* 查询(返回Map结果) */
  public static Map<String, Object> queryMap(Connection conn, String sql, Object... params) {
      Map<String, Object> result = null;
      try {
          result = runner.query(conn, sql, new MapHandler(), params);
      } catch (SQLException e) {
          e.printStackTrace();
      }
      return result;
  }

  /* 查询(返回MapList结果) */
  public static List<Map<String, Object>> queryMapList(Connection conn, String sql, Object... params) {
      List<Map<String, Object>> result = null;
      try {
          result = runner.query(conn, sql, new MapListHandler(), params);
      } catch (SQLException e) {
          e.printStackTrace();
      }
      return result;
  }

  /* 查询(返回Bean结果) */
  public static <T> T queryBean(Class<T> cls, Map<String, String> map, Connection conn, String sql, Object... params) {
      T result = null;
      try {
          if (map != null) {
              result = runner.query(conn, sql, new BeanHandler<T>(cls, new BasicRowProcessor(new BeanProcessor(map))), params);
          } else {
              result = runner.query(conn, sql, new BeanHandler<T>(cls), params);
          }
      } catch (SQLException e) {
          e.printStackTrace();
      }
      return result;
  }

  /* 查询(返回BeanList结果) */
  public static <T> List<T> queryBeanList(Class<T> cls, Map<String, String> map, Connection conn, String sql, Object... params) {
      List<T> result = null;
      try {
          if (map != null) {
              result = runner.query(conn, sql, new BeanListHandler<T>(cls, new BasicRowProcessor(new BeanProcessor(map))), params);
          } else {
              result = runner.query(conn, sql, new BeanListHandler<T>(cls), params);
          }
      } catch (SQLException e) {
          e.printStackTrace();
      }
      return result;
  }

  /* 查询指定列名的值(单条数据) */
  public static <T> T queryColumn(String column, Connection conn, String sql, Object... params) {
      T result = null;
      try {
          result = runner.query(conn, sql, new ScalarHandler<T>(column), params);
      } catch (SQLException e) {
          e.printStackTrace();
      }
      return result;
  }

  /* 查询指定列名的值(多条数据) */
  public static <T> List<T> queryColumnList(String column, Connection conn, String sql, Object... params) {
      List<T> result = null;
      try {
          result = runner.query(conn, sql, new ColumnListHandler<T>(column), params);
      } catch (SQLException e) {
          e.printStackTrace();
      }
      return result;
  }

  /* 查询指定列名对应的记录映射 */
  public static <T> Map<T, Map<String, Object>> queryKeyMap(String column, Connection conn, String sql, Object... params) {
      Map<T, Map<String, Object>> result = null;
      try {
          result = runner.query(conn, sql, new KeyedHandler<T>(column), params);
      } catch (SQLException e) {
          e.printStackTrace();
      }
      return result;
  }

  /* 更新(包括UPDATE、INSERT、DELETE,返回受影响的行数) */
  public static int update(Connection conn, String sql, Object... params) {
      int result = 0;
      try {
          result = runner.update(conn, sql, params);
      } catch (SQLException e) {
          e.printStackTrace();
      }
      return result;
  }
}
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 160,706评论 4 366
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 68,002评论 1 301
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 110,462评论 0 250
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,375评论 0 216
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,763评论 3 294
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,849评论 1 224
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 32,033评论 2 317
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,768评论 0 204
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,490评论 1 246
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,734评论 2 253
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,204评论 1 264
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,566评论 3 260
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,227评论 3 241
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,137评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,934评论 0 201
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,926评论 2 283
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,774评论 2 274

推荐阅读更多精彩内容

  • 转 问题描述: 如果UTF8字符集且是Java服务器的话,当存储含有emoji表情时,会抛出类似如下异常: jav...
    天上掉陷阱阅读 750评论 0 3
  • 1、引言 数据库设计过程中表、字段等的命名规范也算是设计规范的一部分,不过设计规范更多的是为了确保数据库设计的合理...
    SnowflakeCloud阅读 40,653评论 0 48
  • 摘要:在MySQL的使用过程中,了解字符集、字符序的概念,以及不同设置对数据存储、比较的影响非常重要。不少同学在日...
    暖夏未眠丶阅读 743评论 0 2
  • 书还没有读,也就没有笔记部分。 这个时间点写,一是因为有网络;二是一堆字在脑海里跟我吵:快把我写粗来、快把我写粗来...
    姜辣素阅读 283评论 0 0
  • 在你经过的路口 我搔首弄姿,我翘首以盼,我欣喜若狂 最后,装作若无其事 擦肩而过。看不见的 是我斜瞟的眼,绯红的脸...
    桐万里阅读 414评论 10 9