今日早上一起来就看到钉钉上有一堆报错信息,全都是job平台的.格式如下

总计20多个,心一下就凉了.立马处理这个问题.

问题排错

既然是命令运行失败,那我们就先手动来运行一次命令.so.我就来手动执行一次命令

命令执行成功.什么情况.既然命令没有问题,那会不会是其他问题呢.查看job日志得到如下结果

数据库链接出现问题.数据库链接出现问题无非如下.

数据库链接

既然是数据库链接过多,那我们就来查看一下

得到结果为200.在查看当时系统日志,cpu才运行到40%,内存才10%都不到,很明显.不是这个.

MYSQL.SOCK

既然不是连接数过多,那就应该是mysql.sock不在了.造成文件不在的两个原因第一,因为mysql.sock文件是在系统挂载盘,如果挂载盘出现问题了,sock文件也会不在.但是我们的网站文件也在挂载盘,如果掉了,那网站也会出现问题,显然不是.那就是mysql服务挂了.查看内容日志

果然,在第一行就提示apparmor在限制文件的访问.后面几次访问都不能进行访问了.在查看系统日志.

得到结果如下

由于在自动更新,所以停止mysql服务.至此,问题原因被查到.

解决

因为mysql服务被停止了,所以mysql相关的服务都挂了.由于在自动更新,所以我们就需要禁止掉自动更新,由于系统是ubuntu.所以解决方案如下.

至此，就解决掉了.

扩展DDOS,DOS解决方案

同时在demsg查到如下.

由于cookie溢出,被怀疑有Dos或者DDos攻击,解决方案如下

转自:http://rainwang.iteye.com/blog/742749

1、查看apache当前并发访问数：
　netstat -an | grep ESTABLISHED | wc -l

对比httpd.conf中MaxClients的数字差距多少。

2、查看有多少个进程数：
ps aux|grep httpd|wc -l

3、可以使用如下参数查看数据
server-status?auto

#ps -ef|grep httpd|wc -l
1388
统计httpd进程数，连个请求会启动一个进程，使用于Apache服务器。
表示Apache能够处理1388个并发请求，这个值Apache可根据负载情况自动调整。

#netstat -nat|grep -i “80”|wc -l
4341
netstat -an会打印系统当前网络链接状态，而grep -i “80”是用来提取与80端口有关的连接的，wc -l进行连接数统计。
最终返回的数字就是当前所有80端口的请求总数。

#netstat -na|grep ESTABLISHED|wc -l
376
netstat -an会打印系统当前网络链接状态，而grep ESTABLISHED 提取出已建立连接的信息。 然后wc -l统计。
最终返回的数字就是当前所有80端口的已建立连接的总数。

netstat -nat||grep ESTABLISHED|wc – 可查看所有建立连接的详细记录

查看Apache的并发请求数及其TCP连接状态：
　　Linux命令：
netstat -n | awk ‘/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}’

（这条语句是从 新浪互动社区事业部 新浪互动社区事业部技术总监王老大那儿获得的，非常不错）返回结果示例：
　　LAST_ACK 5
　　SYN_RECV 30
　　ESTABLISHED 1597
　　FIN_WAIT1 51
　　FIN_WAIT2 504
　　TIME_WAIT 1057
　　其中的
SYN_RECV表示正在等待处理的请求数；
ESTABLISHED表示正常数据传输状态；
TIME_WAIT表示处理完毕，等待超时结束的请求数。

1、先查看是否有中文语言环境

locale -a
结果会显示你的电脑已经安装的语言环境：
en_US.ISO-8859-1

zh_CN.GBK

2、安装语言环境（root权限）：

dpkg-reconfigure locales

3、安装中文字体

apt-get install ttf-wqy-zenhei

apt-get install xfonts-intl-chinese wqy*

        设置innodb_buffer_pool_size为可用内存的50-60%.注意可用内存应该是linux命令free下的-/+ buffers/cache行的free值；innodb_buffer_pool_size的值应该是在mysql实例没有启动情况下的值，而不是实例启动后的值。见示例。

示例：

（1）在没有对innodb_buffer_pool_size参数优化前：

SELECT sql_no_cache

N1.N_NAME AS SUPP_NATION,

N2.N_NAME AS CUST_NATION,

EXTRACT(YEAR FROM L_SHIPDATE) AS L_YEAR,

SUM(L_EXTENDEDPRICE * (1 – L_DISCOUNT)) AS REVENUE

FROM    SUPPLIER,

LINEITEM,

ORDERS,

CUSTOMER,

NATION N1,

NATION N2

WHERE

        S_SUPPKEY = L_SUPPKEY

    AND O_ORDERKEY = L_ORDERKEY

    AND C_CUSTKEY = O_CUSTKEY

    AND S_NATIONKEY = N1.N_NATIONKEY

    AND C_NATIONKEY = N2.N_NATIONKEY

    AND (N1.N_NAME = ‘FRANCE’ AND N2.N_NAME = ‘GERMANY’ OR N1.N_NAME = ‘GERMANY’ AND N2.N_NAME = ‘FRANCE’)

    AND L_SHIPDATE >= DATE ‘1995-01-01’

    AND L_SHIPDATE <= DATE ‘1996-12-31’

GROUP BY

SUPP_NATION,

CUST_NATION,

L_YEAR

ORDER BY

SUPP_NATION,

CUST_NATION,

L_YEAR;

+————-+————-+——–+——————–+

| SUPP_NATION | CUST_NATION | L_YEAR | REVENUE            |

+————-+————-+——–+——————–+

| FRANCE      | GERMANY     |   1995 |      54639732.7336 |

| FRANCE      | GERMANY     |   1996 |  54633083.30760003 |

| GERMANY     | FRANCE      |   1995 |  52531746.66970005 |

| GERMANY     | FRANCE      |   1996 | 52520549.022399954 |

+————-+————-+——–+——————–+

4 rows in set (2 min 0.90 sec)

查询耗费2 min 0.90 sec

（2）数据库实例启动情况下对可用内存的调整

[[email protected] ~]# free

             total       used       free     shared    buffers     cached

Mem:       1034708     999860      34848          0       2852     161448

-/+ buffers/cache:     835560     199148

Swap:      4192924        152    4192772

设置innodb_buffer_pool_size值为可用内存的60%

199148*60%=119M，取128M

重启数据库后再次运行上述查询语句，查看执行时间：

+————-+————-+——–+——————–+

| SUPP_NATION | CUST_NATION | L_YEAR | REVENUE            |

+————-+————-+——–+——————–+

| FRANCE      | GERMANY     |   1995 |      54639732.7336 |

| FRANCE      | GERMANY     |   1996 |  54633083.30760003 |

| GERMANY     | FRANCE      |   1995 |  52531746.66970005 |

| GERMANY     | FRANCE      |   1996 | 52520549.022399954 |

+————-+————-+——–+——————–+

4 rows in set (7.55 sec)

（3）数据库实例没有启动情况下对可用内存的调整

[[email protected] ~]# service mysql stop

Shutting down MySQL….                                    [  OK  ]

[[email protected] ~]# free

             total       used       free     shared    buffers     cached

Mem:       1034708     430908     603800          0       4396     353292

-/+ buffers/cache:      73220     961488

Swap:      4192924        152    4192772

设置innodb_buffer_pool_size值为可用内存的60%

961488*60%=577M，取580M

重启数据库后再次运行上述查询语句，查看执行时间：

+————-+————-+——–+——————–+

| SUPP_NATION | CUST_NATION | L_YEAR | REVENUE            |

+————-+————-+——–+——————–+

| FRANCE      | GERMANY     |   1995 |      54639732.7336 |

| FRANCE      | GERMANY     |   1996 |  54633083.30760003 |

| GERMANY     | FRANCE      |   1995 |  52531746.66970005 |

| GERMANY     | FRANCE      |   1996 | 52520549.022399954 |

+————-+————-+——–+——————–+

4 rows in set (1.90 sec)

查询时间缩短为2s左右。