启动mysql服务器报错

启动mysql服务器报错

一般情况下mysql的启动错误还是很容易排查的，但是今天我们就来说一下不一般的情况。拿到一台服务器，安装完mysql后进行启动，启动错误如下：

有同学会说，哥们儿你是不是buffer pool设置太大了，设置了96G内存。这明显提示无法分配内存嘛。如果真是这样也就不在这里进行分享了，哈哈。
我的服务器内存是128G。如下图：

服务器内存使用情况：

那么问题来了，既然还剩如此多的内存，为什么提示无法分配内存？？。各位童鞋怎么看？
1. 首先想到会不会是有几条内存坏了？于是运维的同学进行了检查，给我的反馈是硬件一切正常。
2. 把mysql配置参数又检查了一遍，没有发现什么问题，线上一直就是使用这些参数。
3. 又把文件拷贝到另外一台机器，，另外一台服务器可以正常启动（2台机器硬件配置一致）。
那么如果排除硬件问题，mysql配置问题，那么剩下的就只有操作系统的内核参数配置了。于是把两台服务器进行了对比，最终发现了一个内核参数不一致。
复制代码代码如下:
vm.overcommit_memory
mysql启动正常的服务器改参数的值是0，而mysql启动错误的这台服务器该值是2。
那么问题来了，这个参数到底是什么鬼？竟然会让mysql分配内存失败，最后导致无法启动。经过查询资料知道了vm.overcommit_memory是什么鬼。
vm.overcommit_memory
默认值为：0从内核文档里得知，该参数有三个值，分别是：0：当用户空间请求更多的的内存时，内核尝试估算出剩余可用的内存。1：当设这个参数值为1时，内核允许超量使用内存直到用完为止，主要用于科学计算.2：当设这个参数值为2时，内核会使用一个决不过量使用内存的算法，即系统整个内存地址空间不能超过swap+50%的RAM值，50%参数的设定是在overcommit_ratio中设定。
vm.overcommit_ratio默认值为：50
这个参数值只有在vm.overcommit_memory=2的情况下，这个参数才会生效。
那么我们来看一下总的内存地址不能超过多少。其实是可以直接查看的。
[root@yayundeng 3306]# cat /proc/meminfo |grep -i commitCommitLimit: 70144396 kBCommitted_AS: 135196 kB[root@yayundeng 3306]#
通过查看可以得知在70G的样子。那么这个是如何计算的呢？这个就是上面提到的一个公式。swap+50%的RAM值，50%参数的设定是在overcommit_ratio中设定。
总虚拟内存 = 可用物理内存 × 百分比 + 交换分区
[root@yayundeng 3306]# cat /proc/meminfo | grep MemTotalMemTotal: 132096808 kB[root@yayundeng 3306]# [root@yayundeng 3306]# free -ktotal used free shared buffers cachedMem: 132096808 1583944 130512864 0 10240 133220-/+ buffers/cache: 1440484 130656324Swap: 4095992 0 4095992[root@yayundeng 3306]# cat /proc/sys/vm/overcommit_ratio 50[root@yayundeng 3306]#
总虚拟内存=132096808 * 50% + 4095992= 70144396 kB
那么最后的结果就是buffer pool不能超过70144396 kB - 135196 kB=70009200 KB=66G。实际上经过测试，buffer pool只能设置57G。
最后在看看总虚拟内存情况：
CommitLimit：最大可用虚拟内存
Committed_AS：已使用虚拟内存
[root@yayundeng 3306]# cat /proc/meminfo |grep -i commitCommitLimit: 70144396 kBCommitted_AS: 65539208 kB
那么如果把内核参数vm.overcommit_memory恢复为默认值0，那么将不会受到约束。
复制代码代码如下:
echo 0 > /proc/sys/vm/overcommit_memory

参考资料：
http://serverfault.com/questions/606185/how-does-vm-overcommit-memory-workhttp://linuxperf.com/?p=102
总结：
说了这么多，那么为什么要修改内核参数vm.overcommit_memory的值呢？这个是因为这台服务器之前跑过GreenPlum数据库，拿到我手上的时候没有进行重装系统，那么还是建议如果拿到的机器之前跑过其他的业务，那么保险的方法还是重装一下系统，然后再部署自己的业务，不然真的会出现莫名其妙的问题。
2018-04-04

日志显示两个错误

一是配置文件有语法错误，可以删除这个配置试试看
2015-04-13 10:37:25 12464 [ERROR] /alidata/server/mysql/bin/mysqld: unknown variable 'character_set_connection=utf8'

二是端口被占用，可以修改端口或者看看其它占用的程序
2015-04-13 10:41:18 12868 [ERROR] Can't start server: Bind on TCP/IP port: Address already in use
2015-04-13 10:41:18 12868 [ERROR] Do you already have another mysqld server running on port: 3306 ?2015-04-13

一、无法访问系统资源
MySQL 不能访问启动需要的资源是造成而 MySQL 无法启动的一个常见原因，如：文件，端口等。由于 linux 中用于启动 mysqld 进程的 mysql 用户通常是不能登陆的，可以使用类似下面的命令检查文件的访问权限。
sudo -u mysql touch /var/lib/mysql/b

找出问题后，修改对应文件或目录的权限或属主后通常可以解决问题。但有时 mysql 用户有访问文件和目录的权限，但仍然会被拒绝访问，例如下面这个例子：
mysql> system sudo -u mysql touch /home/mysql/data/a
mysql> create table t1 (
id int primary key,n varchar(10
) data directory
ERROR 1030 (HY000): Got error 168 from storage engine

测试说明 mysql 用户有这个目录的访问权限，但创建文件还是失败，这种情况让很多人困惑，这个时候通常是 mysqld 进程的访问被 linux 的 selinux 或 apparmor 给阻止了，大家可以看到创建的表不是在 mysql 的默认目录下面，因此 selinux 或 apparmor 的 policy 里面没有包含这个目录的访问权限，此时只要对应的修改 policy 就行了，当然把 selinux 或 apparmor 停了也行。
有时虽然对系统资源有访问的权限，但系统资源已经被占用：
mysqld --no-defaults --console --user mysql
2020-11-03T03:36:07.519419Z 0 [System] [MY-010116] [Server] /usr/sbin/mysqld (mysqld 8.0.19) starting as process 21171
2020-11-03T03:36:07.740347Z 1 [ERROR] [MY-012574] [InnoDB] Unable to lock ./ibdata1 error: 11

这个故障产生的原因是另外一个 mysqld 进程已经启动并占用了对应的文件。

二、参数设置错误
参数设置错误造成 MySQL 无法启动的原因也非常常见，此时先要检查 MySQL 启动时会调用的参数，下面的命令可以查询 MySQL 启动时调用参数文件的顺序：
$ mysqld --verbose --help | grep "Default options " -A 1
Default options are read from the following files in the given order:
/etc/my.cnf /etc/mysql/my.cnf ~/.my.cnf

知道了 MySQL 参数文件的调用顺序，我们就可以检查对应的参数文件，找出其中的错误，如果觉得参数文件的可读性不强，可以使用下面的命令显示 mysqld 程序将要调用的参数：
$ mysqld --print-defaults
/usr/sbin/mysqld would have been started with the following arguments:
......

注意这个命令显示完参数后就退出，不会真正运行 mysqld。这个命令和 my_print_defaults mysqld 完全是等价的，只不过后者的显示方式是一行一个参数。
然后开始对可疑的参数进行调试，我个人喜欢加的参数和顺序如下：
1. 在 mysqld 后加上第一个参数 --no-defaults ，这个参数的作用是通知 mysqld 在启动的时候不要读任何参数文件；
2. 第二个参数是 --console，这个参数会把错误信息输出到屏幕上，这个参数带来的一个弊端是所有的信息都输出到屏幕上，让屏幕显得比较乱，但对于我们调试却是很方便的；
3. 第三个参数是 --log-error-verbosity=3，这个参数会显示详细的日志；
4. 然后再在后面加上有把握的参数，可以一次只加一个参数，然后启动 mysqld，采用排除法逐步找出错误的参数。2021-02-07