专栏持续更新中:MySQL详解
前言
2023年7月18日晚,MySQL官方网站正式发布了MySQL8.1.0与8.0.34版本.
一、畅谈新版本
Oracle 每季度发布一次 MySQL 更新,所以自己也一直留意的官网的动态,2023年7月18日晚,MySQL官方网站正式发布了MySQL8.1.0与8.0.34版本,8.1的应该来说是8.0版本的bug修复,这是 MySQL 变更发版模型后的第一个创新版本 (Innovation Release)。MySQL 8.0.34+ 将成为仅错误修复版本(红色)。MySQL大约每2年发布一个新的长期支持版本(如下图蓝色),一个例外是8.x LTS版本,它将在 8.0 的 EOL 之前发生,按照此规则来说,下一个(创新)版本将增加主版本号,如果 MySQL 8.4.0 是 8.x LTS 版本,那么 MySQL 9.0 将是下一个创新版本。
官方下载文档:dev.mysql.com/downloads/m...
二、8.1.0版本部署
官方的下载渠道已开放,dev.mysql.com/downloads/m...
RPM包下载选择Linux - Generic,适配对应的操作系统GCC版本。
2.1、环境准备
- 操作系统
sql
[root@jeames ~]# cat /etc/redhat-release
Red Hat Enterprise Linux release 8.1 (Ootpa)
- 关闭防火墙#
查看防火墙是状态
csharp
[root@jeames ~]# systemctl status firewalld
关闭防火墙
csharp
[root@jeames ~]# systemctl stop firewalld
取消开机自启动
perl
[root@jeames ~]# systemctl disable firewalld
Removed /etc/systemd/system/multi-user.target.wants/firewalld.service.
Removed /etc/systemd/system/dbus-org.fedoraproject.FirewallD1.service.
-
selinux关闭
修改参数文件/etc/sysconfig/selinux中SELINUX的值为disabled
csharp
[root@jeames ~]# sed -i 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/selinux/config
修改完成后需要重启服务器才生效
2.2、配置yum安装依赖
- 创建挂载路径
bash
mkdir -p /mnt/cdrom
- 挂载系统镜像光盘到指定目录
bash
#因为光盘的格式通常是iso9660,意思是/dev/sr0挂载在/mnt/cdrom目录上
mount -t iso9660 /dev/sr0 /mnt/cdrom
mount: /mnt/cdrom: WARNING: device write-protected, mounted read-only.
-
修改yum源配置文件
##编辑rhel8-local.repo文件,加入以下内容
ini
[root@jeames ~]# cd /etc/yum.repos.d
[root@jeames yum.repos.d]# rm -rf *
[root@jeames yum.repos.d]# vi rhel8-local.repo
[localREPO]
name=localhost8
baseurl=file:///mnt/cdrom/BaseOS
enable=1
gpgcheck=0
[localREPO_APP]
name=localhost8_app
baseurl=file:///mnt/cdrom/AppStream
enable=1
gpgcheck=0
- 配置好后重建本地缓存
css
yum clean all
yum makecache
yum repolist
- 安装MySQL 8.1版本二进制所需的依赖包
ini
yum -y install libncurses*
yum -y install libaio
yum -y install perl perl-devel
yum -y install autoconf
yum -y install numactl.x86_64
##通过rpm -qa可以查询是否将依赖包安装成功
[root@jeames yum.repos.d]# rpm -qa libaio perl perl-devel autoconf \ numactl.x86_64 libncurses
2.3、用户及目录创建
注:可以部署多个实例,通过端口区分root 用户操作:
bash
mkdir -p /mysql/data/mysql3306
mkdir -p /mysql/app/
mkdir -p /mysql/conf/
mkdir -p /mysql/data/mysql3306/pid/
mkdir -p /mysql/data/mysql3306/socket/
mkdir -p /mysql/data/mysql3306/log/
mkdir -p /mysql/data/mysql3306/binlog/
mkdir -p /mysql/data/mysql3306/errlog
mkdir -p /mysql/data/mysql3306/relaylog/
mkdir -p /mysql/data/mysql3306/slowlog/
mkdir -p /mysql/data/mysql3306/tmp/
2.4、创建用户及组
ruby
[root@jeames ~]# groupadd mysql
[root@jeames ~]# useradd -g mysql mysql
[root@jeames ~]# chown -R mysql:mysql /mysql
[root@jeames ~]# passwd mysql
Changing password for user mysql.
New password:
BAD PASSWORD: The password is shorter than 8 characters
Retype new password:
passwd: all authentication tokens updated successfully.
[root@jeames ~]# cat /etc/group | grep mysql
mysql❌1001:
[root@jeames ~]# cat /etc/passwd | grep mysql
mysql❌1001:1001::/home/mysql:/bin/bash
2.5、解压缩包
csharp
[root@jeames ~]# cd /opt
[root@jeames opt]# cp mysql-8.1.0-linux-glibc2.28-x86_64.tar.xz /mysql/app
[root@jeames opt]# chown -R mysql:mysql /mysql
mysql用户操作
ruby
[root@jeames ~]# su - mysql
md5 值验证,保证下载到的软件包无破损无木马
[mysql@jeames ~]$ cd /mysql/app
[mysql@jeames app]$ ll
total 457200
-rw-r--r-- 1 mysql mysql 468170248 Jul 19 15:29 mysql-8.1.0-linux-glibc2.28-x86_64.tar.xz
[mysql@jeames app]$ md5sum mysql-8.1.0-linux-glibc2.28-x86_64.tar.xz
5285185fad2b4352c878380a741e29f0 mysql-8.1.0-linux-glibc2.28-x86_64.tar.xz
解压软件包并重命名
ruby
[mysql@jeames app]$ tar xvf mysql-8.1.0-linux-glibc2.28-x86_64.tar.xz
[mysql@jeames app]$ mv mysql-8.1.0-linux-glibc2.28-x86_64 mysql8.1.0
[mysql@jeames app]$ ll
total 457200
drwxrwxr-x 9 mysql mysql 129 Jul 19 15:31 mysql8.1.0
-rw-r--r-- 1 mysql mysql 468170248 Jul 19 15:29 mysql-8.1.0-linux-glibc2.28-x86_64.tar.xz
2.6、环境变量配置
bash
##mysql用户下操作
cat >> /home/mysql/.bash_profile << "EOF"
MYSQL_HOME=/mysql/app/mysql8.1.0
PATH=P A T H : PATH:PATH:HOME/.local/bin:H O M E / b i n : HOME/bin:HOME/bin:MYSQL_HOME/bin
EOF
环境变量生效
bash
[mysql@jeames app]$ source ~/.bash_profile
[mysql@jeames app]$ which mysql
/mysql/app/mysql8.1.0/bin/mysql
2.7、创建参数文件
由于是二进制文件安装,数据库参数文件需要自己配置
ini
cat >> /mysql/conf/my3306.cnf << "EOF"
[mysqld]
server_id = 8103306
default-storage-engine= InnoDB
basedir=/mysql/app/mysql8.1.0
datadir=/mysql/data/mysql3306/data/
socket=/mysql/data/mysql3306/socket/mysql.sock
log-error=/mysql/data/mysql3306/log/mysqld.log
pid-file=/mysql/data/mysql3306/pid/mysqld.pid
port=3306
default-time_zone='+8:00'
default_authentication_plugin=mysql_native_password # 加此参数可远程登陆
transaction_isolation=READ-COMMITTED
max_connections=1500
back_log=500
wait_timeout=1800
max_user_connections=800
innodb_buffer_pool_size=1024M
innodb_log_file_size=512M
innodb_log_buffer_size=40M
slow_query_log=ON
long_query_time=5
# log settings #
slow_query_log = ON
slow_query_log_file = /mysql/data/mysql3306/slowlog/slow3306.log
log_error = /mysql/data/mysql3306/errlog/err3306.log
log_error_verbosity = 3
log_bin = /mysql/data/mysql3306/binlog/mysql_bin
log_bin_index = /mysql/data/mysql3306/binlog/mysql_binlog.index
general_log_file = /data/mysql/mysql3306/generallog/general.log
log_queries_not_using_indexes = 1
log_slow_admin_statements = 1
expire_logs_days = 90
binlog_expire_logs_seconds = 2592000 #30d
long_query_time = 2
min_examined_row_limit = 100
log_throttle_queries_not_using_indexes = 1000
innodb_flush_log_at_trx_commit=1
EOF
2.8、数据库初始化
mysql用户操作:
javascript
mysqld --defaults-file=/mysql/conf/my3306.cnf --initialize --user=mysql --basedir=/mysql/app/mysql8.1.0 --datadir=/mysql/data/mysql3306/data/
注意:以上同一行执行
2.9、启动Mysql
css
[mysql@jeames app]$ mysqld_safe --defaults-file=/mysql/conf/my3306.cnf --user=mysql &
2.10、登陆MySQL 8.1
第一次登录 MySQL 时,需要到错误日志下找初始化密码,使用 socket 加密码登录进去后,无法查询任何东西,提示先要修改 root 密码.
bash
[mysql@jeames ~]$ cat /mysql/data/mysql3306/errlog/err3306.log | grep password
[mysql@jeames ~]$ mysql -uroot -p
Enter password:
ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/tmp/mysql.sock' (2)
[mysql@jeames ~]$ mysql -uroot -p -P 3306 -S /mysql/data/mysql3306/socket/mysql.sock
mysql> status
ERROR 1820 (HY000): You must reset your password using ALTER USER statement before executing this statement.
- 修改密码
yaml
mysql> alter user root@'localhost' identified by 'root';
mysql> status
--------------
mysql Ver 8.1.0 for Linux on x86_64 (MySQL Community Server - GPL)
Connection id: 8
Current database:
Current user: root@localhost
SSL: Not in use
Current pager: stdout
Using outfile: ''
Using delimiter: ;
Server version: 8.1.0
Protocol version: 10
Connection: Localhost via UNIX socket
Server characterset: utf8mb4
Db characterset: utf8mb4
Client characterset: utf8mb4
Conn. characterset: utf8mb4
UNIX socket: /mysql/data/mysql3306/socket/mysql.sock
Binary data as: Hexadecimal
Uptime: 3 min 46 sec
Threads: 2 Questions: 8 Slow queries: 0 Opens: 398 Flush tables: 3 Open tables: 36 Queries per second avg: 0.035
- 远程登陆设置
sql
mysql> create user root@'%' identified with mysql_native_password by 'root';
Query OK, 0 rows affected (0.01 sec)
mysql> grant all on *.* to root@'%' with grant option;
Query OK, 0 rows affected (0.00 sec)
mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)
mysql> select user,host,plugin from mysql.user;
+------------------+-----------+-----------------------+
| user | host | plugin |
+------------------+-----------+-----------------------+
| root | % | mysql_native_password |
| mysql.infoschema | localhost | caching_sha2_password |
| mysql.session | localhost | caching_sha2_password |
| mysql.sys | localhost | caching_sha2_password |
| root | localhost | mysql_native_password |
+------------------+-----------+-----------------------+
5 rows in set (0.01 sec)
三、新特性
3.1、密码参数
增加了一个新的系统参数,用于限制用户改密码时的最少替换字符数。
validate_password.changed_characters_percentage
,该值是百分比。
3.2、错误日志加强
随着 MySQL 服务器、插件和组件的启动和关闭消息的增加,关闭过程的日志记录得到了增强。这些消息现在也被记录为关闭连接。
这些附加功能应该有助于故障排除和调试问题,特别是在服务器需要很长时间才能关闭的情况下。
此版本引入了一系列新的消息,这些消息会在MySQL错误日志中记录,包括以下内容:
MySQLserver的启动和关闭日志消息,包括使用--initialize参数启动时的日志。
插件关闭阶段的启动和结束日志消息。
组件关闭阶段的启动和结束日志消息。
连接关闭阶段的开始和结束日志消息。
在强制断开连接后仍然活动的线程数量和ID的日志消息,这些线程可能会导致等待情况。
sql
mysql> show variables like 'log_error';
+---------------+------------------------------------------+
| Variable_name | Value |
+---------------+------------------------------------------+
| log_error | /mysql/data/mysql3306/errlog/err3306.log |
+---------------+------------------------------------------+
3.3、二进制日志
libmysqlclient.so 共享库中添加了几个函数,使开发人员能够访问 MySQL server的二进制日志:
mysql_binlog_open()、mysql_binlog_fetch() 和 mysql_binlog_close()。
3.4、审计日志
审计日志可以指定库database存储JSON过滤表。
新增Audit_log_direct_writes系统变量,用于计算直接写入审计文件的次数。
MySQL企业审计使用临时缓冲区保存写入日志文件的查询事件数据。
然而,由于server可能无法为长查询分配额外内存,审计插件已经进行了优化,在JSON格式记录日志时,不再使用临时缓冲区。
MySQL企业审计现在支持使用调度程序组件来配置和执行定期任务,以刷新内存缓存。
mysql -u root -D database_name -p < audit_log_filter_linux_install.sql
3.5、组复制增强
添加了一些特定于组复制插件的状态变量,这些变量可以改进对网络不稳定的诊断和故障排除, 为每个组成员 (group member) 提供有关网络使用情况、控制消息和数据消息的统计信息。 作为这项工作的一部分,Performance Schema 的 replication_group_communication_information 表中添加了一个新列 MEMBER_FAILURE_SUSPICIONS_COUNT 。该列的内容被格式化为一个 JSON 数组,其键是组成员 ID,其值是该组成员被认为是可疑的次数。
3.6、废弃特性
以下功能在 MySQL 8.1 中已弃用,并且可能会在未来的系列中删除。如果显示替代方案,则应更新应用程序以使用它们。
-
mysqlpump
由于 MySQL 提供了具有相同或额外功能的 mysqldump 和 MySQL Shell 等其他方法来执行数据库转储和备份,
mysqlpump 已经变得多余,现在已弃用。现在调用这个程序会产生一个警告。您应该记住,mysqlpump 可能会在 MySQL 的未来版本中被删除。
-
binlog_format
binlog_format 服务器系统变量现已弃用,并且可能会在 MySQL 的未来版本中删除。 与此变量关联的功能(更改二进制日志记录格式)也已被弃用。
此更改的含义是,当删除 binlog_format 时,MySQL 服务器将仅支持基于行的二进制日志记录(MySQL 8.0 中的默认设置)。 因此,新安装应仅使用基于行 (Row) 的二进制日志记录,而使用基于语句或混合日志记录格式的现有安装应迁移到基于行的格式。
此更改的含义是,当删除 binlog_format 时,MySQL 服务器将仅支持基于行的二进制日志记录(MySQL 8.0 中的默认设置)。 因此,新安装应仅使用基于行 (Row) 的二进制日志记录,而使用基于语句或混合日志记录格式的现有安装应迁移到基于行的格式。
系统变量 log_bin_trust_function_creators 和 log_statements_unsafe_for_binlog 仅在基于语句的日志记录上下文中有用,现在也已弃用,因此也将在 MySQL 的未来版本中删除。 现在设置或选择刚才提到的任何变量的值都会引发警告。 (WL#13966,WL#15669)
-
mysql_native_password
mysql_native_password 身份验证插件现已弃用,并可能在 MySQL 的未来版本中删除。 如果帐户尝试使用 mysql_native_password 作为身份验证方法进行身份验证, CREATE USER、ALTER USER 和 SET PASSWORD 操作现在会在服务器错误日志中插入弃用警告。