浅谈innodb_buffer_pool_size的设置

June 8th, 2021

设置innodb_buffer_pool_size为可用内存的50-60%.注意可用内存应该是linux命令free下的-/+ buffers/cache行的free值；innodb_buffer_pool_size的值应该是在mysql实例没有启动情况下的值，而不是实例启动后的值。见示例。

示例：

（1）在没有对innodb_buffer_pool_size参数优化前：

SELECT sql_no_cache

N1.N_NAME AS SUPP_NATION,

N2.N_NAME AS CUST_NATION,

EXTRACT(YEAR FROM L_SHIPDATE) AS L_YEAR,

SUM(L_EXTENDEDPRICE * (1 – L_DISCOUNT)) AS REVENUE

FROM SUPPLIER,

LINEITEM,

ORDERS,

CUSTOMER,

NATION N1,

NATION N2

WHERE

S_SUPPKEY = L_SUPPKEY

AND O_ORDERKEY = L_ORDERKEY

AND C_CUSTKEY = O_CUSTKEY

AND S_NATIONKEY = N1.N_NATIONKEY

AND C_NATIONKEY = N2.N_NATIONKEY

AND (N1.N_NAME = ‘FRANCE’ AND N2.N_NAME = ‘GERMANY’ OR N1.N_NAME = ‘GERMANY’ AND N2.N_NAME = ‘FRANCE’)

AND L_SHIPDATE >= DATE ‘1995-01-01’

AND L_SHIPDATE <= DATE ‘1996-12-31’

GROUP BY

SUPP_NATION,

CUST_NATION,

L_YEAR

ORDER BY

SUPP_NATION,

CUST_NATION,

L_YEAR;

+————-+————-+——–+——————–+

+————-+————-+——–+——————–+

| FRANCE | GERMANY | 1995 | 54639732.7336 |

| FRANCE | GERMANY | 1996 | 54633083.30760003 |

| GERMANY | FRANCE | 1995 | 52531746.66970005 |

| GERMANY | FRANCE | 1996 | 52520549.022399954 |

+————-+————-+——–+——————–+

4 rows in set (2 min 0.90 sec)

查询耗费2 min 0.90 sec

（2）数据库实例启动情况下对可用内存的调整

[[email protected] ~]# free

total used free shared buffers cached

Mem: 1034708 999860 34848 0 2852 161448

-/+ buffers/cache: 835560 199148

Swap: 4192924 152 4192772

设置innodb_buffer_pool_size值为可用内存的60%

199148*60%=119M，取128M

重启数据库后再次运行上述查询语句，查看执行时间：

+————-+————-+——–+——————–+

+————-+————-+——–+——————–+

| FRANCE | GERMANY | 1995 | 54639732.7336 |

| FRANCE | GERMANY | 1996 | 54633083.30760003 |

| GERMANY | FRANCE | 1995 | 52531746.66970005 |

| GERMANY | FRANCE | 1996 | 52520549.022399954 |

+————-+————-+——–+——————–+

4 rows in set (7.55 sec)

（3）数据库实例没有启动情况下对可用内存的调整

[[email protected] ~]# service mysql stop

Shutting down MySQL…. [ OK ]

[[email protected] ~]# free

total used free shared buffers cached

Mem: 1034708 430908 603800 0 4396 353292

-/+ buffers/cache: 73220 961488

Swap: 4192924 152 4192772

设置innodb_buffer_pool_size值为可用内存的60%

961488*60%=577M，取580M

重启数据库后再次运行上述查询语句，查看执行时间：

+————-+————-+——–+——————–+

+————-+————-+——–+——————–+

| FRANCE | GERMANY | 1995 | 54639732.7336 |

| FRANCE | GERMANY | 1996 | 54633083.30760003 |

| GERMANY | FRANCE | 1995 | 52531746.66970005 |

| GERMANY | FRANCE | 1996 | 52520549.022399954 |

+————-+————-+——–+——————–+

4 rows in set (1.90 sec)

查询时间缩短为2s左右。

一、准备前工作

1.系统：centos 7.6 关闭seliunx及防火墙

关闭防火墙
systemctl disable firewalld.service #禁止firewall开机启动

关闭SELINUX

setenforce 0
或
vim /etc/selinux/config

修改

SELINUX=enforcing
改成
SELINUX=disabled

3.更新yum源这个不再叙述

4.安装cacti所依赖的环境

 yum -y install httpd mysql mysql-server mysql-devel php php-mysql zlib freetype libjpeg fontconfig libxml2 gd php-gd rrdtool net-snmp net-snmp-utils

注意的事项,这块如果执行上面安装mysql是安装不上的
安装完成却发现mysql安装缺失，在网上找原因，原来是因为CentOS 7上把MySQL从默认软件列表中移除了，用MariaDB来代替，所以这导致我们必须要去官网上进行下载，找到链接，用wget打开：

wget http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm
rpm -ivh mysql-community-release-el7-5.noarch.rpm
yum -y install mysql mysql-server mysql-devel

mysql安装成功。

5.启动对所需服务及设置成开机启动

#启动服务
systemctl restart httpd.service
systemctl restart snmpd.service
systemctl restart mysqld.service
#设置开机启动
systemctl enable httpd.service
systemctl enable snmpd.service
systemctl enable mysqld.service

6.编辑httpd的配置文件
vim /var/www/html/index.php

<?php
phpinfo();
?>

二、cacti搭建
1.登陆cacti官网

这里我们使用1.2.2最新稳定版本，下载tar包

wget https://www.cacti.net/downloads/cacti-1.2.2.tar.gz
tar -zxvf cacti-1.2.2.tar.gz -C /var/www/html/ #解压到http服务目录
mv cacti-1.2.2.tar.gz/ cacti #重命名目的 简化访问目录路径
mv cacti /var/www/html/
chown -R root:root /var/www/html/cacti/
chmod -R 777 /var/www/html/cacti/
useradd cacti
chown -R cacti:cacti /var/www/html/cacti/log/
chown -R cacti:cacti /var/www/html/cacti/rra/

2.编辑web页面数据配置文件
vim /var/www/html/cacti/include/config.php 自定义修改用户和密码

这里主要修改一下database用户名和密码
3.创建mysql数据库相关存储信息

mysql
mysql> create database cacti default character set utf8;    #创建数据库设置字符集
mysql> grant all on cacti.* to 'cacti'@'localhost' identified by 'cacti'; 赋权
mysql> flush privileges;  #刷新
mysql> exit

4.登陆并创建cacti的sql文件和php配置：
vim /etc/php.ini

date.timezone = Asia/Shanghai

mysql -ucacti -pcacti cacti < /var/www/html/cacti/cacti.sql #此处提示明文密码登陆风险  忽略

5.打浏览器输入：10.0.1.44/cacti/install 向导界面
这块若有提示错误如图:

日志无法写入问题

解决办法：
a.确认检查seliunx 是否关闭
b.创建日志

touch /var/www/html/cacti/log/cacti.log
chmod -R 777 /var/www/html/cacti/log
chmod -R 777 /var/www/html/cacti/log/cacti.log

确认添加好权限访问 10.0.1.44/cacti/install

正常向导界面

输入用户admin密码admin后提示修改密码

image.png
选择主题及语言后点击开始

检查安装是否完整未安装请再次进行未安装环境（php模块及其他），安装后重启httpd服务

仍有问题修改 /etc/php.ini 文件相关参数并重启httpd服务
mysql时区问题

mysql

解决MySQL TimeZone database is not populated问题

mysql_tzinfo_to_sql /usr/share/zoneinfo | mysql -u root mysql -p

 /usr/local/mysql/bin/mysql_tzinfo_to_sql /usr/share/zoneinfo/ | mysql -uroot -p mysql       ##二进制免编译与源码包解决办法

 /usr/bin/mysql_tzinfo_to_sql /usr/share/zoneinfo/ | mysql -uroot -p mysql                             ##yum安装解决办法

三、重置密码解决MySQL for Linux错误 ERROR 1045 (28000): Access denied for user ‘root’@’localhost’ (using password: NO)

一般这个错误是由密码错误引起，解决的办法自然就是重置密码。

假设我们使用的是root账户。

1.重置密码的第一步就是跳过MySQL的密码认证过程，方法如下：

vim /etc/my.cnf(注：windows下修改的是my.ini)

在文档内搜索mysqld定位到[mysqld]文本段：
/mysqld(在vim编辑状态下直接输入该命令可搜索文本内容)

在[mysqld]后面任意一行添加“skip-grant-tables”用来跳过密码验证的过程，如下图所示：

image

保存文档并退出：

:wq

2.接下来我们需要重启MySQL：

/etc/init.d/mysql restart(有些用户可能需要使用/etc/init.d/mysqld restart)

image

3.重启之后输入#mysql即可进入mysql。

image

4.接下来就是用sql来修改root的密码

mysql> use mysql;
update user set password=password('123') where user='root'; 
mysql> flush privileges;
mysql> quit

到这里root账户就已经重置成新的密码了。

5.编辑my.cnf,去掉刚才添加的内容，然后重启MySQL。大功告成！

image

网上有很多关于这个问题的解决说明，很多刚接触的朋友可能比较迷惑的是在自己的平台上找不到my.cnf或者my.ini文件，如果你是Linux,使用如下方式可以搜索到：

image

四、继续完成未检测项目

1.修改 /etc/my.cnf 在[mysqld]后添加如下内容

skip-grant-tables
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
max_allowed_packet = 16777216
max_heap_table_size = 128M
tmp_table_size = 128M
join_buffer_size = 256M
innodb_buffer_pool_size = 1901M
innodb_flush_log_at_timeout = 3
innodb_read_io_threads = 32
innodb_write_io_threads = 16
innodb_buffer_pool_instances =16

2.重启mysql 刷新cacti界面 check所有项目通过

3.下一页–新的服务器-check通过-下一页

check完成下一页

选择配置下一页

根据提示做出对应修改

修改/etc/my.cnf 加入如下

character-set-server=utf8mb4
collation-server=utf8mb4_unicode_ci

修改mysql排序

mysql> ALTER DATABASE cacti CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;

安装

安装完成开始使用

主界面

五、被监控端
1.配置snmp协议

基于centos7.7安装最新cacti1.2.15

June 8th, 2021

第一步安装编译工具

yum install gcc gcc-c++ make automake autoconf ncurses-devel libtool libxml2-devel wget

第二步安装lamp

第二.一.一步yum安装lamp

yum install httpd httpd-devel mysql mysql-server mysql-devel php php-pdo php-gd php-snmp php-mysql gd-devel

第二.一.二步配置开机启动

第二.一.三步重启服务

第二.二步安装lamp.org集成环境包

# wget lnmp.org/*.tar.gz

# tar zxvf lnmp*.tar.gz

# cd lnmp*.tar.gz

# ./install.sh lamp or lnmp –根据需要选择安装apache还是nginx

# 根据需要选择对应的版本

第三步安装snmp

yum install lm_sensors net-snmp net-snmp-utils net-snmp-libs net-snmp-devel

第四步安装rrdtool

yum install rrdtool rrdtool-devel perl-plRPC perl-DBI perl-rrdtool perl-DBD-MySQL

第五步安装cacti依赖环境

yum install zlib libpng freetype libart_lgpl libart_lgpl-devel libxml* pango*

第六步安装cacti

wget http://www.cacti.net –请自行选择安装版本

tar -zxvf cacti.*.tar.gz /var/www/html/cacti –yum安装lamp请解压至该目录

chown -R apache:apache /var/www/html/cacti

chmod -R 755 /var/www/html/cacti

chmod 777 /var/www/html/cacti/log/

chmod 777 /var/www/html/cacti/rra/

tar -zxvf cacti.*.tar.gz /home/wwwroot/default/cacti –lnmp.org编译安装请解压至该目录

chown -R www:www /home/wwwroot/default/cacti

chmod -R 755 /home/wwwroot/default/cacti

chmod 777 /home/wwwroot/default/cacti/log/

chmod 777 /home/wwwroot/default/cacti/rra/

第七步配置数据库

mysqladmin -uroot password ‘root’ –root的密码 –修改root密码:set password = password(‘root’);

mysql -uroot -proot

mysql>create database cacti default character set utf8;

mysql>alter database cacti character set utf8mb4 collate utf8mb4_unicode_ci;

mysql>grant all on cacti.* to [email protected] identified by ‘cacti’;

mysql>grant select on mysql.time_zone_name to [email protected] identified by ‘cacti’;

mysql>flush privileges;

第八步加载时区到mysql数据库

/usr/local/mysql/bin/mysql_tzinfo_to_sql /usr/share/zoneinfo/ | mysql -uroot -proot mysql

第十步导入数据库并配置定时任务

mysql -uroot -proot cacti < cacti.sql

# crontab -e

*/5 * * * * /usr/bin/php /var/www/html/cacti/poller.php > /dev/null 2>&1 –yum安装配这条

*/5 * * * * /usr/local/php/etc/php /home/wwwroot/default/cacti/poller.php > /dev/null 2>&1 –lnmp安装配这条

第十一步修改cacti配置文件

vi include/config.php &&　vi include/global.php –修改databases_username OR database_password 字段配置

第十二步配置snmp和php

vi /etc/snmp/snmpd.conf

–修改41行 default改为监控服务器ip public为复杂的秘钥

–修改62行 systemview改为all,供所有snmp访问权限

–修改85行将#注释符号去掉 view all include .1 80

vi /usr/local/php/etc/php.ini

–根据提示禁用需要禁用的模块

–根据提示加载需要加载的模块

———————————————————————————————–

错误解决:

mysql – 时区支持

error:您的mysql timezone数据库未被填充,请在继续之前填入此数据库。

mysql> grant select on mysql.time_zone_name to [email protected] identified by ‘cacti’;

mysql> flush privileges;

/usr/local/mysql/bin/mysql_tzinfo_to_sql /usr/share/zoneinfo/ | mysql -uroot -p mysql

mysql内存超出 mysqld: Out of memory 解决办法

April 22nd, 2021

自己配置的XWAMP环境，默认下没有详细配置mysql的my.ini，一方面不同服务器的配置不一样，另一方面按照默认为空的方式也一直没有出现过问题。不过最近服务器挂掉了，出现的症状是：

网站不能打开，动态的。静态的可以。
不能远程桌面。

强制重启服务器后查看系统日志发现了这个错误：

mysqld: Out of memory (Needed 129040 bytes)

于是找到了mariadb根目录中有几个推荐配置文件：

my-small.ini：内存小于64M。

my-medium.ini：内存在32M – 64M之间。

my-large.ini：内存为512M。

my-huge.ini：内存在1G-2G之间

my-innodb-heavy-4G.ini：内存4GB，仅使用innodb存储引擎。

挂掉的服务器是2核(CPU)2GB(内存)，选择了my-large.ini的推荐配置，增加了如下配置(放在[mysqld]下)：

skip-external-locking
key_buffer_size = 256M
max_allowed_packet = 1M
table_open_cache = 256
sort_buffer_size = 1M
read_buffer_size = 1M
read_rnd_buffer_size = 4M
myisam_sort_buffer_size = 64M
thread_cache_size = 8
query_cache_size= 16M
thread_concurrency = 4

如何添加swap分区

April 22nd, 2021

mysqld: Out of memory (Needed 128917504 bytes)mysql安装后，启动不起来

1、查看报错

tail -n 100 /var/log/mariadb/mariadb.log

2、在使用 free -m 查看内存信息时，发现 swap 分区大小为 0。难怪说数据库服务器无法启动呢，在内存不够用的情况下，又无法使用 swap 分区，自然崩溃了

3、使用下面的命令创建 swapfile,自己创建交换分区：
第一步：创建一个大小为1000M的文件：
count=1 bs=1440k (即块大小为1.44M)
bs=1024 (指定块大小为1k)
确定硬盘的最佳块大小，自己选：
bs=1024 count=1000000
bs=2048 count=500000
bs=4096 count=250000
bs=8192 count=125000

dd if=/dev/zero of=/swapfile bs=1024 count=1048576

使用下面的命令配置 swap 文件：

mkswap /swapfile

接下来，使用下面的命令立即启用 swapfile，这样就不用等到下次重启时自动启用：

swapon /swapfile

最后，我们在 /etc/fstab 中添加下面一行，这样可以在系统下次重启时自动生效创建的 swapfile：

vi /etc/fstab

/swapfile swap swap defaults 0 0

使用 cat /proc/swaps 或 free -m 查看 swapfile 的生效情况，如下图所示：

cat /proc/swaps
free -m

proxmox去除登录订阅提示

March 29th, 2021

修改文件/usr/share/pve-manager/js/pvemanagerlib.js，大概37959行

Proxmox.Utils.checked_command(function() {}); // display subscription status
改成
 //Proxmox.Utils.checked_command(function() {}); // display subscription status

修改完后systemctl restart pveproxy

注销重新登录

PVE添加cpu温度显示

March 29th, 2021

一、安装lm-sensors

apt-get install lm-sensors

安装成功后，可以通过命令查看cpu温度：

[email protected]:~# sensors
acpitz-virtual-0
Adapter: Virtual device
temp1:        +27.8°C  (crit = +74.0°C)
temp2:        +29.8°C  (crit = +74.0°C)
 
coretemp-isa-0000
Adapter: ISA adapter
Package id 0:  +38.0°C  (high = +68.0°C, crit = +73.0°C)
Core 0:        +36.0°C  (high = +68.0°C, crit = +73.0°C)
Core 1:        +35.0°C  (high = +68.0°C, crit = +73.0°C)
Core 2:        +34.0°C  (high = +68.0°C, crit = +73.0°C)
Core 3:        +38.0°C  (high = +68.0°C, crit = +73.0°C)

星际蜗牛的暴力风扇虽然吵，但是不得不佩服散热能力确实强。

二、编辑修改文件
1、/usr/share/perl5/PVE/API2/Nodes.pm

搜索my $dinfo = df(‘/’, 1);
以pve5.4.3为例，在296行：

    293         $res->{pveversion} = PVE::pvecfg::package() . "/" .
    294             PVE::pvecfg::version_text();
    295 
    296         my $dinfo = df('/', 1);     # output is bytes
    297

添加：$res->{thermalstate} = `sensors`;
修改后：

        $res->{pveversion} = PVE::pvecfg::package() . "/" .
            PVE::pvecfg::version_text();
 
        $res->{thermalstate} = `sensors`;
 
        my $dinfo = df('/', 1);     # output is bytes

2、/usr/share/pve-manager/js/pvemanagerlib.js

2.1、搜索PVE.panel.StatusView，修改height为320

  16876 Ext.define('PVE.node.StatusView', {
  16877     extend: 'PVE.panel.StatusView',
  16878     alias: 'widget.pveNodeStatus',
  16879 
  16880     height: 300,
  16881     bodyPadding: '20 15 20 15',
  16882 
  16883     layout: {
  16884         type: 'table',
  16885         columns: 2,
  16886         tableAttrs: {
  16887             style: {
  16888                 width: '100%'
  16889             }
  16890         }
  16891     },

2.2、搜索PVE Manager Version

  16990         {
  16991             itemId: 'version',
  16992             colspan: 2,
  16993             printBar: false,
  16994             title: gettext('PVE Manager Version'),
  16995             textField: 'pveversion',
  16996             value: ''
  16997         }

在后面添加一个item，修改后为

        {
            itemId: 'version',
            colspan: 2,
            printBar: false,
            title: gettext('PVE Manager Version'),
            textField: 'pveversion',
            value: ''
        },
        {
            itemId: 'thermal',
            colspan: 2,
            printBar: false,
            title: gettext('CPU温度'),
            textField: 'thermalstate',
            renderer:function(value){
                const c0 = value.match(/Core 0.*?\+([\d\.]+)Â/)[1];
                const c1 = value.match(/Core 1.*?\+([\d\.]+)Â/)[1];
                const c2 = value.match(/Core 2.*?\+([\d\.]+)Â/)[1];
                const c3 = value.match(/Core 8.*?\+([\d\.]+)Â/)[1];
                return `核0: ${c0} ℃ | 核1: ${c1} ℃ | 核2: ${c2} ℃ | 核3: ${c3} ℃`
            }
        }

三、重启pve web管理服务

systemctl restart pveproxy

至此，就已经成功添加了pve web管理端cpu温度显示。

Page 5 of 38...3 456 7 ...

体操服、小短裤．酒吞童子～这就是夏天应该有的样子啊！

浅谈innodb_buffer_pool_size的设置

cacti 监控搭建

一、准备前工作

关闭SELINUX

date.timezone = Asia/Shanghai

三、重置密码解决MySQL for Linux错误 ERROR 1045 (28000): Access denied for user ‘root’@’localhost’ (using password: NO)

vim /etc/my.cnf(注：windows下修改的是my.ini)

:wq

四、继续完成未检测项目

基于centos7.7安装最新cacti1.2.15

兽耳少女身穿丝白死库水，有被诱惑到吗？

微胖“黑贞”简直犯规级别的性感啊！！！

mysql内存超出 mysqld: Out of memory 解决办法

如何添加swap分区

mysqld: Out of memory (Needed 128917504 bytes)mysql安装后，启动不起来

proxmox去除登录订阅提示

PVE添加cpu温度显示

一、准备前工作

关闭SELINUX

date.timezone = Asia/Shanghai

三 、重置密码解决MySQL for Linux错误 ERROR 1045 (28000): Access denied for user ‘root’@’localhost’ (using password: NO)

vim /etc/my.cnf(注：windows下修改的是my.ini)

:wq

四、继续完成未检测项目

mysqld: Out of memory (Needed 128917504 bytes)mysql安装后，启动不起来

三、重置密码解决MySQL for Linux错误 ERROR 1045 (28000): Access denied for user ‘root’@’localhost’ (using password: NO)