LNMP Keepalived Haproxy 笔记-白红宇

LNMP Keepalived Haproxy 笔记

阅读量：5890 次

发布时间：2019-06-19

本文共 14109 字，大约阅读时间需要 47 分钟。

以下内容只是本人实验的记录笔记。以下内容是参照某真实案例中的部分内容所攒写，当然本人对Linux各应用系统不是很熟悉，大家将就看看，有错的请指出。由于本人是在VMWare上仿照生产网络环境搭建的架构，为贪图方便，故所有服务器IP都同一网络，在生产环境中管理、应用等都是不同网段并且是从实体网络设备上隔离，下图大概的架构图。

Haproxy 安装

# cd /home

# tar haproxy-1.5.8.tar.gz

# cd haproxy-1.5.8

# make TARGET=linux26 ARCH=x86_64 -->TARGET是指定内核版本，ARCH指定CPU架构，我使用的是64bit系统

# make install

# mkdir /etc/haproxy

# cp examples/haproxy.cfg /etc/haproxy

# cp examples/haproxy.init /etc/init.d/haproxy

# chmod +x /etc/init.d/haproxy

# ln -s /usr/local/sbin/haproxy /usr/sbin/

# mkdir /usr/share/haproxy

编辑配置文件(两台haproxy配置文件相同)

# this config needs haproxy-1.5.8

global

log 127.0.0.1 local0 #日志输出配置，所有日志都记录在本机，通过local0输出

log 127.0.0.1 local1 notice

#log loghost local0 info

maxconn 4096 #最大连接数

chroot /usr/share/haproxy #改变当前工作目录。

uid 99 #所属用户的uid

gid 99 #所属运行的gid

daemon #以后台形式运行haproxy

#debug

#quiet

defaults

log global

mode http #默认的模式mode { tcp|http|health }，tcp是4层，http是7层，health只会返回OK

# option httplog

option dontlognull

retries 3 #两次连接失败就认为是服务器不可用

option redispatch #当serverId对应的服务器挂掉后，强制定向到其他健康的服务器

option abortonclose #当服务器负载很高的时候，自动结束掉当前队列处理比较久的链接

maxconn 2000 #默认的最大连接数

timeout connect 5000 #连接超时

timeout client 50000 #客户端超时

timeout server 50000 #服务器超时

timeout check 5s #心跳检测超时

listen www.master.com 172.16.1.60:80 #设定对外服务器的名称或是IP,对外服务器时使用80 Port

# option httpchk *

balance leastconn #banlance roundrobin 轮询，balance source 保存session值，支持static-rr，leastconn，first，uri等参数

option httplog

cookie SERVERID insert indirect nocache

server slave2 172.16.1.52:80 cookie server01 check inter 2000 fall 3

server slave3 172.16.1.53:80 cookie server02 check inter 2000 fall 3

server slave4 172.16.1.54:80 cookie server03 check inter 2000 fall 3

capture cookie ASPSESSION len 32

timeout server 20000

option httpclose # disable keep-alive

option checkcache # block response if set-cookie & cacheable

rspidel ^Set-cookie:\ IP= # do not let this cookie tell our internal IP address

listen admin_stats #haproxy服务状态

bind 172.16.1.60:8888

option httplog

stats auth admin:admin

stats uri /stats

stats admin if TRUE

stats hide-version

stats refresh 5s

listen HA-Mysql 172.16.1.60:23306 # Mysql高可用性服务

mode tcp

option mysql-check user haproxy # 需要在被监控的机器上的mysql新建一个无密码用户haproxy(此可以随便建: create user 'haproxy'@'%' identified by ''; )

balance roundrobin

server slave2db01 172.16.1.52:3306 weight 1 check inter 12000 rise 3 fall 2

server slave3db02 172.16.1.53:3306 weight 1 check inter 12000 rise 3 fall 2

server slave3db03 172.16.1.54:3306 weight 1 check inter 12000 rise 3 fall 2

option tcpka

启动haproxy服务，查看状态： service haproxy start

HAProxy故障说明：

[ALERT] 164/110030 (11606) : Starting proxy linuxyw.com: cannot bind socket

这个问题，其实就是因为你的haproxy没有得到VIP的原因，而你的配置文件又绑定了VIP地址，所以会提示以上错误。当然，你也要确保你的haproxy服务器做了hearbeat或keepalived，绑定VIP，要不就无法高可用了。

解决方法：

修改内核参数： /etc/sysctl.conf

net.ipv4.ip_nonlocal_bind=1

保存结果，使结果生效

sysctl -p

或者使用echo进去，前提是sysctl.conf文件中没有本条参数：

echo 'net.ipv4.ip_nonlocal_bind = 1'>>/etc/sysctl.conf

net.ipv4.ip_nonlocal_bind=1 意思是启动haproxy的时候，允许忽视VIP的存在

－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－

keepalive 安装与配置

安装与配置keepalived (wget http://www.keepalived.org/software/keepalived1.2.22.tar.gz )

[root@master keepalived-1.2.22]# cp /usr/local/etc/rc.d/init.d/keepalived /etc/init.d/

[root@master keepalived-1.2.22]# cp /usr/local/etc/sysconfig/keepalived /etc/sysconfig/

[root@master keepalived-1.2.22]# mkdir /etc/keepalived -p

[root@master keepalived-1.2.22]# cp /usr/local/etc/keepalived/keepalived.conf /etc/keepalived/

[root@master keepalived-1.2.22]# cp /usr/local/sbin/keepalived /usr/sbin/

[root@master keepalived-1.2.22]# /etc/init.d/keepalived start

global_defs {

notification_email {

55858814@qq.com

}

notification_email_from Alexandre.Cassen@firewall.loc

smtp_server 172.16.1.25

smtp_connect_timeout 30

router_id LVS_7

}

vrrp_instance VI_1 {

state MASTER #设置为主服务器

interface eth0 #监听网络接口

virtual_router_id 55 #主、备必须一样相当于VR(虚拟路由器）ID

priority 150 #(主、备机取不同的优先级，主机值较大，备份机值较小,值越大优先级越高)

advert_int 1 #VRRP Multicast广播周期秒数

authentication {

auth_type PASS #VRRP认证方式，主备必须一致

auth_pass 1111 #(密码)

}

virtual_ipaddress {

172.16.1.60/24 #VRRP HA虚拟地址

}

vrrp_instance VI_2 {

state BACKUP

interface eth0

virtual_router_id 56

priority 200

advert_int 1

authentication {

auth_type PASS

auth_pass 1111

}

virtual_ipaddress {

172.16.1.61/24

}

查看状态

--------------------------------------------------------------------------------------

Nginx安装

#tarzxvf nginx-1.6.2.tar.gz

#cd nginx-1.6.2

#useradd -s/sbin/nologin nginx -->创建不登录用户

# ./configure--user=nginx --group=nginx --prefix=/opt/nginx

# make && makeinstall

/opt/nginx/conf/nginx.conf 文件配置如下(三台Web服务配置文件相同)：

[root@slave2 conf]#cat nginx.conf

#user nobody;

worker_processes 2;

error_log logs/error.log;

pid logs/nginx.pid;

events {

worker_connections 1024;

}

http {

include mime.types;

default_type application/octet-stream;

log_format main '$remote_addr - $remote_user [$time_local]"$request" '

'$status$body_bytes_sent "$http_referer" '

'"$http_user_agent" "$http_x_forwarded_for"';

access_log logs/access.log main;

sendfile on;

tcp_nopush on;

keepalive_timeout 65;

#gzip on;

server {

listen 80;

server_name master.com;

root html/www;

index index.html index.htm;

rewrite ^/(.*)http://www.master.com/$1 permanent; #ip防问301跳转第二种方法，permanent永久跳转;

}

server{

listen 80;

server_name www.master.com master.com; #第一个虚拟服务器,增加master.com别名实现跳转(第一种方法)

root html/www;

index index.html index.htm;

}

server{

listen 80;

server_name bbs.master.com; #第二个虚拟服务器

root html/bbs;

index index.html index.htm;

}

server{

listen 80;

server_name blog.master.com; #第三个虚拟服务器

root html/blog;

index index.html index.htm;

}

######################################################################################

# 第二第配置nginx.conf写法

#mkdir/opt/nginx/conf/extra -->建立extra文件夹用于存放各类server.confserver

# 修改nginx.conf配置如下：

[root@slave2 conf]#cat nginx.conf

#user nobody;

worker_processes 2;

error_log logs/error.log;

#error_log logs/error.log notice;

#error_log logs/error.log info;

pid logs/nginx.pid;

events {

worker_connections 1024;

}

http {

include mime.types;

default_type application/octet-stream;

log_format main '$remote_addr - $remote_user [$time_local]"$request" '

'$status$body_bytes_sent "$http_referer" '

'"$http_user_agent" "$http_x_forwarded_for"';

access_log logs/access.log main;

sendfile on;

#tcp_nopush on;

keepalive_timeout 65;

#gzip on;

include extra/www.conf;-->加载配置文件

include extra/blog.conf;-->加载配置文件

include extra/bbs.conf;-->加载配置文件

}

#nginx 增加对PHP支持需安装如下软件:

libmcrypt-2.5.8.tar.gz

mhash-0.9.9.9.tar.gz

libiconv-1.14.tar.gz

php-fpm-5.3.3-47.el6.x86_64.rpm-->此为nginx需用php-fpm，端口为9000,启动命令 service php-fpm start

php-fpm的配置文件/etc/php-fpm.d/www.conf

#各类配置如下：

备注:1). 原配置文件对php支持语句为:fastcgi_param SCRIPT_FILENAME /scripts$fastcgi_script_name;

2). 必须改为:fastcgi_param SCRIPT_FILENAME $document_root$fastcgi_script_name;

3). 通过location指令，将所有以php为后缀的文件都给给127.0.0.1:9000来处理，而这里的ip address和端口就是FastCGI进程监听的IP Address和端口；

　*如果没有php-fpm没有或是启动 nginx对PHP文件报File not found.错

#####################################################################################

#/opt/nginx/sbin/nginx-s reload -->重新加载服务器

#/opt/nginx/sbin/nginx->服务器启动

#/opt/nginx/sbin/nginx-t ->检查语法

# ps -ef | grep nginx/ # lsof -i :80 / #netstat -lntcp | grep 80

-------------------------------------------------------------------

Mysql主从服务器

1.主从服务器分别作以下操作：

1.1、版本一致

1.2、初始化表，并在后台启动mysql

1.3、修改root的密码

2、修改主服务器master:

#vi /etc/my.cnf

[mysqld]

log_bin=mysql-bin //[必须]启用二进制日志

server-id=222 //[必须]服务器唯一ID，默认是1，一般取IP最后一段

3、修改从服务器slave:

#vi /etc/my.cnf

[mysqld]

log_bin=mysql-bin //[不是必须]启用二进制日志

server-id=226 //[必须]服务器唯一ID，默认是1，一般取IP最后一段

4、重启两台服务器的mysql

/etc/init.d/mysql restart

5、在主服务器上建立帐户并授权slave:

GRANTREPLICATION SLAVE ON *.* TO 'slave'@'172.16.1.53' IDENTIFIED BY 'password';

GRANTREPLICATION SLAVE ON *.* TO 'slave'@'172.16.1.52' IDENTIFIED BY 'password';

6、登录主服务器的mysql，查询master的状态

mysql>show masterstatus;

7、配置从服务器Slave：

mysql> CHANGEMASTER TO MASTER_HOST='172.16.1.54',

master_user ='slave',

master_password ='password',

master_log_file ='mysql-bin.00002',

master_log_pos = 191;

8、检查从服务器复制功能状态：

mysql>show slave status \G

9.Mysql开启远程登录

(1)通过MySQL用户去限制访问

权限系统目的:

MySQL基于安全考虑root账户一般只能本地访问，但是在开发过程中可能需要打开root的远程访问权限，今天介绍的就是如何开启和关闭Mysql远程访问

MySQL权限系统的主要功能是证实连接到一台给定主机的用户，并且赋予该用户在数据库上的SELECT、INSERT、UPDATE和DELETE权限。

附加的功能包括有匿名的用户并对于MySQL特定的功能例如LOAD DATA INFILE进行授权及管理操作的能力。

权限系统原理:

MySQL权限系统保证所有的用户只执行允许做的事情。当你连接MySQL服务器时，你的身份由你从那儿连接的主机和你指定的用户名来决定。

连接后发出请求后，系统根据你的身份和你想做什么来授予权限。

MySQL在认定身份中考虑你的主机名和用户名字，是因为几乎没有原因假定一个给定的用户在因特网上属于同一个人。

例如，从office.com连接的用户joe不一定和从elsewhere.com连接的joe是同一个人。

MySQL通过允许你区分在不同的主机上碰巧有同样名字的用户来处理它：你可以对joe从office.com进行的连接授与一个权限集，而为joe从elsewhere.com的连接授予一个不同的权限集。

阶段1：服务器检查是否允许你连接。

阶段2：假定你能连接，服务器检查你发出的每个请求。看你是否有足够的权限实施它。

例如，如果你从数据库表中选择(select)行或从数据库删除表，服务器确定你对表有SELECT权限或对数据库有DROP权限。如果连接时你的权限被更改了(通过你和其它人)，这些更改不一定立即对你发出的下一个语句生效。MySQL权限是保存在cache中，这个时候就你需要执行

flush privileges;

开启远程访问:

- 更新用户

mysql>use mysql;

mysql>update userset host = "%" where user = "root";

mysql>flushprivileges;

- 添加用户

mysql>use mysql;

mysql>insert intouser(host, user, password) values("%", "root",password("yourpassword"))

mysql>grant all privilegeson *.* to 'root'@'%' with grant option #赋予任何主机访问数据库权限

mysql>flush privileges;

-关闭远程访问:

mysql> use mysql;

mysql>update userset host = "localhost" where user = "root" and host="%";

mysql> flushprivileges;

- 查看用户权限:

mysql> useinformation_schema;

mysql> select *from user_privileges;

查看当前mysql用户:

mysql>use mysql;

mysql>select user, hostfrom user;

更新用户:

mysql> updatemysql.user set password=password('新密码') whereUser="phplamp" and Host="localhost";

mysql> flushprivileges;

删除用户:

mysql> DELETEFROM user WHERE User="phplamp" and Host="localhost";

mysql> flushprivileges;

user host指定方法:

Host值可以是主机名或IP号，或’localhost’指出本地主机。

你可以在Host列值使用通配符字符“%”和“_”。

host值’%’匹配任何主机名，空Host值等价于’%’。它们的含义与LIKE操作符的模式匹配操作相同。例如，’%’的Host值与所有主机名匹配，而’%.mysql.com’匹配mysql.com域的所有主机。

##############################################################################################

MySQL从5.1升级至5.6会出现　Mysql创建用户出错：ERROR1054 (42S22): Unknown column 'plugin' in 'mysql.user'

mysql> create userqzwx identified by 'qzwx';

ERROR 1054 (42S22):Unknown column 'plugin' in 'mysql.user'

经排查，发现是5.16版本mysql.user表的没有plugin，而升级数据库的时候，mysql.user表没有升级，才导致字段缺少，可以通过以下方法修改mysql.user表：

mysql>use mysql;

mysql>ALTER TABLEuser ADD Create_tablespace_priv ENUM('N','Y') NOT NULL DEFAULT 'N' AFTERTrigger_priv;

mysql>ALTER TABLEuser ADD plugin CHAR(64) NULL AFTER max_user_connections;

mysql>ALTER TABLEuser ADD authentication_string TEXT NULL DEFAULT NULL AFTER plugin;

mysql>ALTER TABLEuser ADD password_expired ENUM('N','Y') NOT NULL DEFAULT 'N' AFTERauthentication_string;

############################################################################################

MYSQL5.1升级至5.6

备份数据库，升级MySQL通常不会丢失数据，但保险起见，我们需要做这一步。输入命令: mysqldump -u xxx -h xxx -P 3306 -p --all-databases > databases.sql

停止MySQL服务：service mysqld stop

卸载旧版MySQL，输入命令 yum remove mysql mysql-* -y

移除命令执行后，可再看看是否有残余的mysql，输入命令：yum list installed | grep mysql

如果有，可输入命令删除：rum remove mysql－libs

下载安装最新的rpm文件: rpm -Uvh http://repo.mysql.com/mysql-community-release-el6-5.noarch.rpm

安装MySQL，输入命令：yum install mysql-community-server

检查安装完成的版本

*升级后mysql不能启动，要检查/etc/my.cnf 配置文件以及删除/var/lib/mysql下面log文件，如ibdata1 ib_logfile0 ib_logfile1

* 升级后slave主机不能连接master主机，要先重置slave配置文件以及删除/var/lib/mysql下面的log文档，命令reset slave;再重新加载连接master配置

Mysql问题解决方案

起动bin-log 日志，master不能启动并出现以下如下问题：

2016-09-07 08:45:2521038 [ERROR] Failed to open log (file './mysql-bin.000004', errno 2)

2016-09-07 08:45:2521038 [ERROR] Could not open log file

2016-09-07 08:45:2521038 [ERROR] Can't init tc log

2016-09-07 08:45:2521038 [ERROR] Aborting

解决方法：进入mysql目录删除 mysql-bin.index 文件，让系统重新建立mysql-bin.index

MySQL主从失败错误Got fatal error 1236解决方法show slave status错误:

mysql> show slave status\G

Master_Log_File: mysql-bin.000001

Read_Master_Log_Pos: 120

Slave_IO_Running: No

.....

Last_IO_Error: Got fatal error 1236 from master when reading data from binary log:

'Client requested master to start replication from impossible position'

查看Mysql　Log

[root@host03log]# cat mysqld.log

2016-09-07 10:31:3518240 [ERROR] Error reading packet from server: Could not find first log filename in binary log index file (server_errno=1236)

2016-09-07 10:31:3518240 [ERROR] Slave I/O: Got fatal error 1236 from master when reading datafrom binary log: 'Could not find first log file name in binary log index file',Error_code: 1236

2016-09-07 10:31:3518240 [Note] Slave I/O thread exiting, read up to log 'log-bin.000002',position 120

2016-09-07 10:31:3518240 [Warning] Slave SQL: If a crash happens this configuration does notguarantee that the relay log info will be consistent, Error_code: 0

2016-09-07 10:31:3518240 [Note] Slave SQL thread initialized, starting replication in log'log-bin.000002' at position 120, relay log './mysqld-relay-bin.000001'position: 4

解決方法：

[root@host03 log]#mysqlbinlog /opt/mysql/data01/mysql-bin.000001 > test.txt

[root@host03 log]#cat test.txt

/*!50530 SET@@SESSION.PSEUDO_SLAVE_MODE=1*/;

/*!40019 SET@@session.max_insert_delayed_threads=0*/;

/*!50003 SET@OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;

DELIMITER /*!*/;

# at 4

#160907 10:31:34server id 43 end_log_pos 120 CRC32 0xeec57cc1 Start:binlog v 4, server v 5.6.32-log created 160907 10:31:34 at startup

# Warning: this binlogis either in use or was not closed properly.

ROLLBACK/*!*/;

BINLOG '