背景：由于项目比较老，用的数据库版本也是相当低，现在业务需求需要做数据同步，使用FlinkCDC的时候报数据库版本低，查询FlinkCDC要求的最低版本后果断升级mysql~
FlinkCDC对mysql最低版要求如下图：
（从 2.2 版本开始， MySQL CDC 支持了 MySQL 5.6 版本，满足低版本的 MySQL 用户需求。）
接下来我们就对数据库的升级做好准备：
数据库升级带来的风险：
1. 不兼容的更改：MySQL 5.7.37引入了一些不兼容的更改，可能会影响到现有的应用程序。例如，MySQL 5.7.37默认使用了更严格的SQL模式，这可能会导致一些应用程序无法正常工作。要避免这个问题，可以在升级之前仔细阅读MySQL 5.7.37的发行说明，并检查应用程序是否与新版本兼容。
2. 配置文件更改：MySQL 5.7.37的配置文件可能与旧版本不同，需要进行相应的更改。要避免这个问题，可以在升级之前备份旧的配置文件，并在升级后将其与新的配置文件进行比较，以确定是否需要进行更改。
3. 数据库引擎更改：MySQL 5.7.37默认使用了InnoDB作为默认的存储引擎，而旧版本可能使用了MyISAM或其他存储引擎。要避免这个问题，可以在升级之前检查现有的数据库使用的存储引擎，并在升级后将其更改为InnoDB。
4. 安全设置更改：MySQL 5.7.37引入了一些新的安全设置，例如密码策略和加密功能。要避免这个问题，可以在升级之前仔细阅读MySQL 5.7.37的发行说明，并根据需要进行相应的更改。
为了避免这些问题，可以尝试按照以下步骤进行操作：
1. 在升级之前备份MySQL的数据和配置文件，以防止升级过程中出现意外情况导致数据丢失。
2. 仔细阅读MySQL 5.7.37的发行说明，并检查应用程序是否与新版本兼容。
3. 检查现有的数据库使用的存储引擎，并在升级后将其更改为InnoDB。
4. 在升级之前备份旧的配置文件，并在升级后将其与新的配置文件进行比较，以确定是否需要进行更改。
5. 仔细阅读MySQL 5.7.37的发行说明，并根据需要进行相应的安全设置更改。
总之，在升级MySQL之前，一定要做好充分的准备工作，以确保升级过程顺利，并且不会影响到现有的应用程序和数据。
MySQL查看默认存储引擎：SHOW VARIABLES LIKE 'default_storage_engine%';
一、环境准备（可选）：
要在Linux上安装yum，可以按照以下步骤进行操作：
1. 确认系统是否已经安装了yum。可以使用以下命令检查：
yum --version
如果系统已经安装了yum，则应该输出yum的版本信息。如果系统没有安装yum，则应该输出-bash: yum: command not found。
2. 如果系统没有安装yum，则可以使用以下命令安装：
sudo yum install yum-utils
这将安装yum及其相关工具。
3. 安装完成后，可以使用以下命令检查yum是否安装成功：
yum --version
如果yum已经成功安装，则应该输出yum的版本信息。
二、备份数据库所有数据：
要在Linux上将MySQL升级到5.7.37版本，可以按照以下步骤进行操作：
1. 备份MySQL的数据和配置文件，以防止升级过程中出现意外情况导致数据丢失。可以使用以下命令备份：
mysqldump -u root -p --all-databases > all_databases.sql
这将备份所有数据库到名为all_databases.sql的文件中。
要在Linux上查询all_databases.sql文件的位置，可以使用以下命令：
sudo find / -name all_databases.sql
将备份的数据和配置文件还原到新版本的MySQL中。可以使用以下命令还原：
mysql -u root -p < all_databases.sql
2.停止MySQL服务，并确保所有MySQL进程已经终止。可以使用以下命令停止MySQL服务
sudo systemctl stop mysql
要查询MySQL的安装目录，可以使用以下命令：
which mysql
查询mysql所有文件夹
find / -name mysql
删除文件夹
rm -rf /usr/lib64/mysql
3.下载对应版本压缩包
下载地址：https://dev.mysql.com/downloads/mysql/5.7.html#downloads
点击download进入以下页面：
https://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-5.7.37-linux-glibc2.12-x86_64.tar.gz
操作步骤：
3.1在linux运行下载速度比较快(一般放在专门存放下载文件目录)：https://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-5.7.37-linux-glibc2.12-x86_64.tar.gz
3.2然后解压文件：tar -xvf mysql-5.7.37-linux-glibc2.12-x86_64.tar.gz，重新命名文件夹名称为mysql5.7.37.
3.3把解压的文件截切到/usr/local/mysql5.7.37文件目录下(养成习惯把安装程序都按一定规则存放)：mv mysql-5.7.37-linux-glibc2.12-x86_64 /usr/local/mysql5.7.37/
3.4创建mysql用户组和用户并修改权限
groupadd mysql
useradd -r -g mysql mysql
3.5创建数据目录并赋予权限
mkdir -p /data/mysql #创建目录
chown mysql:mysql -R /data/mysql #赋予权限
3.6配置my.cnf（最好在外部先以UTF-8格式编辑好传到服务器）
vim /etc/my.cnf
内容如下：（注意空格）
[mysqld]
bind-address=0.0.0.0
port=3306
user=mysql
basedir=/usr/local/mysql5.7.37 #这里特别注意把mysql-5.7.37写成mysql会导致后面无法启动
datadir=/data/mysql
socket=/tmp/mysql.sock
log-error=/data/mysql/mysql.err
pid-file=/data/mysql/mysql.pid
#character config
character_set_server=utf8mb4
symbolic-links=0
explicit_defaults_for_timestamp=true
lower_case_table_names=1 #不区分表名大小写，统一换成小写
sql_mode='STRICT_TRANS_TABLES,NO_ENGINE_SUBSTITUTION'
log-bin=mysql-bin #开启binlog日志，不开启则不需要写以下三行
server-id=12
binlog_format=ROW
expire_logs_days=7 #清除binlog周期，天
3.7初始化数据库
进入mysql的bin目录：cd /usr/local/mysql5.7.37/bin/
初始化：./mysqld --defaults-file=/etc/my.cnf --basedir=/usr/local/mysql5.7.37/ --datadir=/data/mysql/ --user=mysql --initialize
查看密码：cat /data/mysql/mysql.err
3.8检查MySQL数据目录是否存在。可以使用以下命令检查MySQL数据目录是否存在：
ls /data/mysql
如果MySQL数据目录不存在，则可以使用以下命令创建：
mkdir /data/mysql
chown mysql:mysql /data/mysql
3.9检查MySQL数据目录的权限。可以使用以下命令检查MySQL数据目录的权限：
ls -ld /data/mysql
如果MySQL数据目录的权限不正确，则可以使用以下命令更改权限：
chmod 755 /data/mysql
3.10启动mysql，并更改root 密码
先将mysql.server放置到/etc/init.d/mysql中
cp /usr/local/mysql5.7.37/support-files/mysql.server /etc/init.d/mysql
3.11启动！！！
service mysql start
ps -ef|grep mysql
到这里说明mysql已经安装成功了！！
3.12下面修改密码：
首先登录mysql，前面的那个是随机生成的。
./mysql -u root -p #bin目录下
再执行下面三步操作，然后重新登录。
SET PASSWORD = PASSWORD('EnCanadaForEMC');
ALTER USER 'root'@'localhost' PASSWORD EXPIRE NEVER;
FLUSH PRIVILEGES;
3.13查看mysql版本：
三、必要操作
1.这个时候如果无法连接：
修改mysql的PATH环境变量bin的安装地址
1.1要修改MySQL的PATH环境变量中bin的安装地址，可以按照以下步骤进行操作：
确认MySQL的安装路径。可以使用以下命令检查MySQL的安装路径：
which mysql
这将显示MySQL的安装路径，例如/usr/local/mysql5.7.37/bin/mysql
1.2打开~/.bashrc文件。可以使用以下命令打开~/.bashrc文件：
nano ~/.bashrc
1.3在文件末尾添加以下行：
export PATH=$PATH:/path/to/mysql/bin
其中，/path/to/mysql/bin应替换为MySQL的安装路径中bin目录的路径，例如/usr/local/mysql5.7.37/bin/mysql/bin。
1.4保存并关闭文件。可以使用Ctrl+X、Y和Enter键保存并关闭文件。
1.5使更改生效。可以使用以下命令使更改生效：
source ~/.bashrc
1.6确认PATH环境变量已经更新。可以使用以下命令检查PATH环境变量是否已经更新：
echo $PATH
这将显示PATH环境变量的当前值，其中应该包含MySQL的安装路径中bin目录的路径。
2.这时候你如果使用远程连接……你会发现你无法连接。
2.1这里主要执行下面三个命令(先登录数据库)
use mysql #访问mysql库
update user set host = '%' where user = 'root'; #使root能再任何host访问
FLUSH PRIVILEGES; #刷新
注意：可以将mysql设置成（不区分大小写）
vim /etc/my.cnf
在这个配置文件下添加这个参数（不区分大小写）
lower_case_table_names = 1
2.2全局使用mysql命令
-bash: mysql: command not found #mysql命令没有找到
mysql命令没有找到，找到mysql安装目录，which mysql，也可以在上述目录查 /usr/local查找是否有mysql ,然后建立到 /usr/bin/的软链
ln -s /usr/local/mysql55/bin/mysql /usr/bin/
因为系统默认会查找/usr/bin下的命令，所以要连接到这个目录
/usr/local/mysql5.7.37/bin/mysql 是mysql的安装目录
/usr/bin/ 是软链接到的目录
3.设置开启mysql的二进制日志文件binlog。
如果要使用Flinkcdc同步MySQL，建议将二进制日志（binlog）的格式设置为ROW。这是因为ROW格式可以更准确地记录每个修改操作的行数据，从而可以更准确地重放修改操作。而且，Flinkcdc默认使用ROW格式进行数据同步，如果MySQL的二进制日志格式不是ROW，可能会导致数据同步的问题。
使用命令
SHOW VARIABLES LIKE 'log_bin';
确认MySQL是否已经启用了二进制日志。
解决方法：
要将MySQL的二进制日志格式设置为ROW，可以按照以下步骤进行操作：
1. 编辑MySQL的配置文件。可以使用以下命令编辑MySQL的配置文件：
sudo vi /etc/my.cnf
如果MySQL的配置文件不存在，则可以使用以下命令创建：
sudo cp /usr/share/mysql/my-medium.cnf /etc/my.cnf
2. 在MySQL的配置文件中添加以下内容：
[mysqld]
log-bin=mysql-bin
server-id=1
binlog_format=ROW
这将启用MySQL的二进制日志，并将二进制日志文件的前缀设置为mysql，将MySQL服务器的ID设置为1，并将二进制日志格式设置为ROW。
3. 重新启动MySQL服务。可以使用以下命令重新启动MySQL服务：
sudo systemctl restart mysqld
4. 确认MySQL已经启用了二进制日志，并且二进制日志格式为ROW。可以使用以下命令登录MySQL并执行SHOW VARIABLES LIKE 'log_bin';和SHOW VARIABLES LIKE 'binlog_format';命令：
mysql -u root -p
SHOW VARIABLES LIKE 'log_bin';
SHOW VARIABLES LIKE 'binlog_format';
如果输出的结果中Value列的值为ON，则表示MySQL已经启用了二进制日志，并且二进制日志格式为ROW。
5.设置mysql的binlog文件保存过期时间：
在MySQL的配置文件中添加以下内容：
[mysqld]
log-bin=mysql-bin
server-id=1
expire_logs_days=7 #清除binlog周期，天
四、数据库操作
1.增加数据库mysql下usr表用户：参见用户表新增sql文件
2.导出的sql文件需要去除mysql、information_schema、performance_schema三个数据库。
五、注意事项
使用sudo systemctl 会报错，但是使用service mysql start不报错：
例如： sudo systemctl status mysqld
如图：
实际数据库已经启动：
六、问题：
问题1：
mysql -u root -p
-bash: mysql: 未找到命令
解决方法：
确认MySQL的安装路径是否在系统的PATH环境变量中。可以使用以下命令检查系统的PATH环境变量：
如果MySQL的安装路径不在系统的PATH环境变量中，则可以使用以下命令将其添加到PATH环境变量中：
export PATH=$PATH:/path/to/mysql/bin
其中，/path/to/mysql/bin应替换为MySQL的安装路径。
3. 如果MySQL已经安装并且其安装路径已经在系统的PATH环境变量中，则可以尝试重新安装MySQL客户端。可以使用以下命令重新安装MySQL客户端：
sudo yum reinstall mysql
问题2：
Starting MySQL.... ERROR! The server quit without updating PID file (/data/mysql/mysql.pid).
解决方法：
这个错误提示表明在启动MySQL服务时出现了问题，导致MySQL服务器无法更新PID文件。要解决这个问题，可以按照以下步骤进行操作：
- 检查MySQL配置文件。可以使用以下命令检查MySQL配置文件是否存在：
ls /etc/my.cnf
如果MySQL配置文件不存在，则可以使用以下命令创建：
sudo cp /usr/share/mysql/my-medium.cnf /etc/my.cnf
- 检查MySQL数据目录的权限。可以使用以下命令检查MySQL数据目录的权限：
ls -ld /data/mysql
如果MySQL数据目录的权限不正确，则可以使用以下命令更改权限：
chmod 755 /data/mysql
- 检查MySQL数据目录是否存在。可以使用以下命令检查MySQL数据目录是否存在：
ls /data/mysql
如果MySQL数据目录不存在，则可以使用以下命令创建：
mkdir /data/mysql
chown mysql:mysql /data/mysql
- 启动MySQL服务。可以使用以下命令启动MySQL服务：
service mysql start
- 确认MySQL服务已经启动。可以使用以下命令检查MySQL服务是否已经启动：
ps -ef|grep mysql
systemctl status mysqld
如果MySQL服务已经启动，则应该输出active (running)。
问题3：
Failed to start MariaDB 10.3.18 database server. #MariaDB启动失败
解决方法：
如果在启动MariaDB 10.3.18数据库服务器时出现了错误，可以按照以下步骤进行操作：
1. 检查MariaDB的日志文件。可以使用以下命令检查MariaDB的日志文件：
sudo tail -f /var/log/mariadb/mariadb.log
这将显示MariaDB的日志文件的最后几行。如果有任何错误或警告消息，则应该在日志文件中显示。
2. 检查MariaDB的配置文件。可以使用以下命令检查MariaDB的配置文件是否存在：
ls /etc/my.cnf.d/server.cnf
如果MariaDB的配置文件不存在，则可以使用以下命令创建：
sudo cp /usr/share/mysql/my-medium.cnf /etc/my.cnf.d/server.cnf
3. 检查MariaDB数据目录的权限。可以使用以下命令检查MariaDB数据目录的权限：
ls -ld /var/lib/mysql
如果MariaDB数据目录的权限不正确，则可以使用以下命令更改权限：
sudo chmod 755 /var/lib/mysql
4. 检查MariaDB数据目录是否存在。可以使用以下命令检查MariaDB数据目录是否存在：
ls /var/lib/mysql
如果MariaDB数据目录不存在，则可以使用以下命令创建：
sudo mkdir /var/lib/mysql
sudo chown mysql:mysql /var/lib/mysql
5. 启动MariaDB服务。可以使用以下命令启动MariaDB服务：
sudo systemctl start mariadb
6. 确认MariaDB服务已经启动。可以使用以下命令检查MariaDB服务是否已经启动：
ps -ef|grep mariadb
如果MariaDB服务已经启动，则应该输出active (running)。
总之，要解决Failed to start MariaDB 10.3.18 database server错误提示，需要检查MariaDB的日志文件、配置文件、数据目录的权限和是否存在、MariaDB服务是否已经启动，并进行必要的更改。如果MariaDB的配置文件不存在，则需要创建。如果MariaDB数据目录的权限不正确，则需要更改权限。如果MariaDB数据目录不存在，则需要创建。如果MariaDB服务没有启动，则需要启动MariaDB服务。
问题4：
在执行SQL查询时出现了语法错误，具体原因是ORDER BY子句中的列不在GROUP BY子句中，且该列不是函数依赖于GROUP BY子句中的列，这与MySQL的sql_mode=only_full_group_by不兼容。
解决方法：
1.查询原有的sql_mode配置：
在Navicat上或服务器连接mysql以后：select @@global.sql_mode
ONLY_FULL_GROUP_BY,STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION
2.修改数据库配置（永久生效）
修改配置文件my.cnf (路径：/etc/my.cnf)
在[mysqld]模块下新增一行配置：
sql_mode='STRICT_TRANS_TABLES,NO_ENGINE_SUBSTITUTION'
运行后重启，即可生效
知识点：
binlog_format=ROW是MySQL的一个配置选项，用于指定二进制日志（binlog）的格式。当binlog_format设置为ROW时，MySQL会将每个修改操作的行数据记录到二进制日志中，而不是记录SQL语句。这意味着在进行数据恢复或复制时，可以更准确地重放修改操作，因为每个修改操作的行数据都已经记录在二进制日志中。
具体来说，当binlog_format设置为ROW时，MySQL会将每个修改操作的行数据记录到二进制日志中，包括修改前和修改后的行数据。这样，在进行数据恢复或复制时，可以使用这些行数据来重建修改操作，而不是使用SQL语句。这种方式可以更准确地重放修改操作，因为它可以避免由于SQL语句的不同而导致的数据不一致问题。
二进制日志（binlog）的格式有哪些？
MySQL支持三种二进制日志（binlog）的格式，分别是STATEMENT、ROW和MIXED。这些格式可以通过binlog_format配置选项进行指定。
1. STATEMENT格式
STATEMENT格式是MySQL的默认二进制日志格式。当binlog_format设置为STATEMENT时，MySQL会将每个修改操作的SQL语句记录到二进制日志中。这意味着在进行数据恢复或复制时，可以使用这些SQL语句来重建修改操作。
但是，STATEMENT格式存在一些限制。例如，当使用非确定性函数（如NOW()）或随机数函数（如RAND()）时，可能会导致在主从复制中数据不一致的问题。此外，当使用存储过程或触发器时，也可能会导致数据不一致的问题。
2. ROW格式
当binlog_format设置为ROW时，MySQL会将每个修改操作的行数据记录到二进制日志中，而不是记录SQL语句。这意味着在进行数据恢复或复制时，可以更准确地重放修改操作，因为每个修改操作的行数据都已经记录在二进制日志中。
但是，ROW格式可能会导致二进制日志文件变得非常大，因为它需要记录每个修改操作的行数据。此外，当修改操作涉及到大量行数据时，也可能会导致性能问题。
3. MIXED格式
MIXED格式是STATEMENT和ROW格式的混合。当binlog_format设置为MIXED时，MySQL会根据具体情况选择使用STATEMENT格式或ROW格式。例如，对于简单的修改操作，MySQL可能会选择使用STATEMENT格式，而对于复杂的修改操作，MySQL可能会选择使用ROW格式。
MIXED格式可以兼顾STATEMENT和ROW格式的优点，但也存在一些限制。例如，当使用非确定性函数或随机数函数时，可能会导致在主从复制中数据不一致的问题。
总之，MySQL支持三种二进制日志的格式，分别是STATEMENT、ROW和MIXED。这些格式可以通过binlog_format配置选项进行指定。STATEMENT格式记录SQL语句，ROW格式记录行数据，MIXED格式是STATEMENT和ROW格式的混合。在选择二进制日志格式时，需要根据具体情况进行权衡和选择。
