<![CDATA[运维进行时]]> https://www.liuts.com/index.php zh-cn https://www.liuts.com/post/188/ <![CDATA[部署天涯LVS管理平台管理端[原创]]]> 刘天斯 <liutiansi@gmail.com> Wed, 10 Mar 2010 07:26:18 +0000 https://www.liuts.com/post/188/ 二、安装rrdtool
三、下载管理平台包
wget http://tianyalvs.googlecode.com/files/TianyaLVS.tar.gz
cd "web root"
tar -zxvf TianyaLVS.tar.gz
注意事项

1、要求webroot/TianyaLVS/LVS、webroot/TianyaLVS/images/LVS目录可写。
2、系统需.htaccess支持，除rewrite支持外apache还需添加：

修改项
cd TianyaLVS/TianyaLVSsystem/application/config
vi config.php
引用

//访问URL
$config['base_url']  = "http://localhost/";
//站点目录位置
$config['webroot']  = '/www/TianyaLVS';
//管理端应用程序位置
$config['adminroot']  = '/home/LVS';


vi database.php
引用

$db['default']['hostname'] = "localhost";
$db['default']['username'] = "dbuser";
$db['default']['password'] = "dbpass";
$db['default']['database'] = "tianyalvs";
$db['default']['dbdriver'] = "mysql";


二、下载管理脚本
cd /home
wget http://tianyalvs.googlecode.com/files/LVS_shell.tar.gz
tar -zxvf LVS_shell.tar.gz

#探测real server func状态
check.sh

#并生成图
graph-lvs.sh
根据实际情况修改参数
引用

WORKDIR="/www/TianyaLVS/LVS/$3/performance"
RRDTOOL="/usr/bin/rrdtool"
GRAPHS="/www/TianyaLVS/images/LVS/$3"


＃获取、分析rrd
LVSgraph.py
根据实际情况修改参数，与database.php保持一致
引用

LVSpath=/home/LVS
import MySQLdb
host='localhost'
user='dbuser'
passwd='dbpass'
db='tianyilvs'


＃func主模块
ModuleClass.py

＃同步配置LB脚本
Production_realserver.sh
根据实际情况修改参数
引用

realserversh=/home/LVS


#LB脚本模板
rrealserver.sh.model

#同步master的rrd文件
rsync.sh
根据实际情况修改参数
引用

KEY=/home/rsync/rsync-key
RUSER=rsyncuser
RPATH=/home/lvs-rrd/performance
LPATH=/www/TianyaLVS/LVS/$1

注：在配置该步骤前请确实已做好这一步“实践rsync+ssh实现代码同步”，实施这一步后将会有KEY、RUSER参数值。

#lVS Performance
*/1 * * * * /usr/local/bin/python /home/LVS/LVSgraph.py

四、访问http://localhost/，完成系统安装、配置。

如大家有什么疑问或感兴趣的话题可以通过weibo与我交流：http://t.qq.com/yorkoliu
Tags - , ]]> https://www.liuts.com/post/187/ <![CDATA[部署LVS+Keepalived平台[原创]]]> 刘天斯 <liutiansi@gmail.com> Wed, 10 Mar 2010 03:55:21 +0000 https://www.liuts.com/post/187/ ln -s /usr/src/kernels/2.6.9-89.0.9.EL-smp-x86_64/  /usr/src/linux
2.6.9-89.0.9.EL-smp-x86_64与uname -a内核配对。
下载
wget http://www.linuxvirtualserver.org/software/kernel-2.6/ipvsadm-1.24.tar.gz
wget http://www.keepalived.org/software/keepalived-1.1.15.tar.gz

安装
tar zxvf ipvsadm-1.24.tar.gz
cd ipvsadm-1.24
make && make install
cd ..
tar zxvf keepalived-1.1.15.tar.gz
cd keepalived-1.1.15
注意项
引用

Centos5.0以下需要修改以下configure才能通过。
vi /usr/src/linux/include/linux/types.h
/*
typedef __u16 __bitwise __sum16;
typedef __u32 __bitwise __wsum;
*/

./configure
make && make install

cp /usr/local/etc/rc.d/init.d/keepalived /etc/rc.d/init.d/
cp /usr/local/etc/sysconfig/keepalived /etc/sysconfig/
mkdir /etc/keepalived
cp /usr/local/etc/keepalived/keepalived.conf /etc/keepalived/
cp /usr/local/sbin/keepalived /usr/sbin/

service keepalived start

为了配合LVS平台，还需如下操作
1、安装RRDTOOL
2、配置master端流量rrd数据采集
cd /home
wget http://tianyalvs.googlecode.com/files/lvs-rrd.tar.gz
tar -zxvf lvs-rrd.tar.gz
vi lvs-rrd/lvs.rrd.update
根据用户实际情况来修改如下参数
引用

RRDTOOL="/usr/bin/rrdtool"
IPVSADM="/sbin/ipvsadm"
WORKDIR="/home/lvs-rrd/performance"

3、定制采集作业
*/2 * * * * /home/lvs-rrd/lvs.rrd.update 2> /dev/null > /dev/null

4、LVS管理平台端会定期来捉取performance中的*.rrd文件，用户可以通过ssh或ftp，系统默认采用rsync+ssh方式，配置可参考实践rsync+ssh实现代码同步

问题总结
1、make keepalived时提示：
make[2]: Leaving directory `/home/install/lvs/keepalived-1.1.15/keepalived/core'
make[2]: Entering directory `/home/install/lvs/keepalived-1.1.15/keepalived/check'
gcc -g -O2  -I/usr/src/linux/include -I../include -I../../lib -Wall -Wunused -Wstrict-prototypes -D_KRNL_2_6_ -D_WITH_LVS_ -D_HAVE_IPVS_SYNCD_ -D_WITHOUT_VRRP_  -c check_daemon.c
In file included from /usr/src/linux/include/linux/netlink.h:5,
                 from ../include/vrrp_netlink.h:35,
                 from check_daemon.c:40:
/usr/src/linux/include/linux/types.h:158: error: syntax error before "__sum16"
/usr/src/linux/include/linux/types.h:158: warning: type defaults to `int' in declaration of `__sum16'
/usr/src/linux/include/linux/types.h:158: warning: data definition has no type or storage class
/usr/src/linux/include/linux/types.h:159: error: syntax error before "__wsum"
/usr/src/linux/include/linux/types.h:159: warning: type defaults to `int' in declaration of `__wsum'
/usr/src/linux/include/linux/types.h:159: warning: data definition has no type or storage class
make[2]: *** [check_daemon.o] Error 1
make[2]: Leaving directory `/home/install/lvs/keepalived-1.1.15/keepalived/check'
make[1]: *** [all] Error 1
make[1]: Leaving directory `/home/install/lvs/keepalived-1.1.15/keepalived'
make: *** [all] Error 2
解决：
引用

vi /usr/src/linux/include/linux/types.h
/*
typedef __u16 __bitwise __sum16;
typedef __u32 __bitwise __wsum;
*/


2、master、backup的/var/log/messagse显示
Nov 23 17:46:41 SN2008-06-070 Keepalived_vrrp: receive an invalid ip number count associated with VRID!
Nov 23 17:46:41 SN2008-06-070 Keepalived_vrrp: bogus VRRP packet received on eth0 !!!
Nov 23 17:46:41 SN2008-06-070 Keepalived_vrrp: VRRP_Instance(VI_1) Dropping received VRRP packet...
Nov 23 17:46:42 SN2008-06-070 Keepalived_vrrp: receive an invalid ip number count associated with VRID!
Nov 23 17:46:42 SN2008-06-070 Keepalived_vrrp: bogus VRRP packet received on eth0 !!!
Nov 23 17:46:42 SN2008-06-070 Keepalived_vrrp: VRRP_Instance(VI_1) Dropping received VRRP packet...

解决：
引用

修改 virtual_router_id 的值，与网络中不能重复。


3、在/var/log/messages中Keepalived_vrrp不生效，即无vrrp日志。
解决：
引用

重新编译源码包，可能是由于修改types.h后才configure。


如大家有什么疑问或感兴趣的话题可以通过weibo与我交流：http://t.qq.com/yorkoliu
Tags - , ]]> https://www.liuts.com/post/185/ <![CDATA[LVS管理平台使用手册(第二版)[原创]]]> 刘天斯 <liutiansi@gmail.com> Wed, 10 Mar 2010 02:51:44 +0000 https://www.liuts.com/post/185/ 项目托管地址：http://code.google.com/p/tianyalvs/
welcome
点击在新窗口中浏览此图片
1、性能图表
功能说明：以小时、日、星期、月、年的图表展示LVS SERVER、VIP、SERVER等流量情况，效果图如下：
点击在新窗口中浏览此图片

2、数据中心
      功能说明：管理LVS主机，一个LVS主机就是一个数据中心节点，功能包括新建、修改、生成、重载、图表、显示该组VIP等模块。
点击在新窗口中浏览此图片
2.1新建LVS节点：
点击在新窗口中浏览此图片
全局定义块
1、 email 通知。作用：有故障，发邮件报警。这是可选项目，建议不用，用 nagios 全面监
控代替之。
2、 Lvs负载均衡器标识（lvs_id）。在一个网络内，它应该是唯一的。
3、 花括号“{}”。用来分隔定义块，因此必须成对出现。如果写漏了，keepalived运行时，不会得到预期的结果。由于定义块内存在嵌套关系，因此很容易遗漏结尾处的花括号，这点要特别注意。

VRRP 定义块
1、同步 vrrp 组 vrrp_sync_group。作用：确定失败切换（FailOver）包含的路由实个数。即在有2 个负载均衡器的场景，一旦某个负载均衡器失效，需要自动切换到另一个负载均衡器的实例是哪些？
2、实例组 group.至少包含一个 vrrp 实例。
3、Vrrp实例 vrrp_instance.实例名出自实例组 group 所包含的那些名字。
（1）实例状态 state.只有 MASTER和BACKUP 两种状态，并且需要大写这些单词。其中MASTER为工作状态，BACKUP 为备用状态。当 MASTER 所在的服务器失效时，BACKUP 所在的系统会自动把它的状态有 BACKUP 变换成 MASTER；当失效的MASTER所在的系统恢复时，BACKUP 从 MASTER 恢复到BACKUP 状态。
（2）通信接口 interface。对外提供服务的网络接口，如 eth0,eth1.当前主流的服务器都有2 个或2 个以上的接口，在选择服务接口时，一定要核实清楚。
（3）lvs_sync_daemon_inteface。 负载均衡器之间的监控接口，类似于 HA HeartBeat的心跳线。但它的机制优于 Heartbeat，因为它没有“裂脑”这个问题，它是以优先级这个机制来规避这个麻烦的。在DR 模式中，lvs_sync_daemon_inteface 与服务接口 interface 使用同一个网络接口。
（4）虚拟路由标识 virtual_router_id.这个标识是一个数字，并且同一个 vrrp 实例使用唯一的标识。即同一个 vrrp_stance,MASTER 和 BACKUP 的 virtual_router_id 是一致的，同时在整个 vrrp内是唯一的。
（5）优先级 priority.这是一个数字，数值愈大，优先级越高。在同一个vrrp_instance里，MASTER 的优先级高于 BACKUP。若 MASTER 的 priority 值为 150，那么 BACKUP的 priority 只能是140或更小的数值。
（6）同步通知间隔  advert_int  .MASTER与 BACKUP 负载均衡器之间同步检查的时间间隔，单位为秒。
（7）验证 authentication。包含验证类型和验证密码。类型主要有 PASS、AH 两种，通常使用的类型为 PASS，据说 AH 使用时有问题。验证密码为明文，同一 vrrp实例MASTER 与 BACKUP 使用相同的密码才能正常通信。

4、 虚拟 ip 地址 virtual_ipaddress . 可以有多个地址，每个地址占一行，不需要指定子网掩码。注意：这个 ip必须与我们在 lvs客户端设定的 vip 相一致！

2.2、点击在新窗口中浏览此图片生成
功能说明：在管理端生成配置文件并校验。

2.3、点击在新窗口中浏览此图片重载
功能说明：将配置文件传输到LVS节点服务器并重启Keepalived服务。

2.3、点击在新窗口中浏览此图片图表
功能说明：显示该LVS节点流量数据。

3、虚拟IP池(VIP)
功能说明：添加、修改VIP池。
点击在新窗口中浏览此图片
3.1、添加图示：
点击在新窗口中浏览此图片
虚拟服务器 virtual_server定义块

虚拟服务器定义是 keepalived框架最重要的项目了，是 keepalived.conf必不可少的部分。

1、 虚拟服务器 virtual_server.  这个 ip 来自于 vrrp 定义块的第“4”步，后面一个空格，然后加上端口号。定义一个vip，可以实现多个 tcp 端口的负载均衡功能。
（1）delay_loop。健康检查时间间隔，单位是秒。
（2）lb_algo. 负载均衡调度算法，互联网应用常使用 wlc或 rr。
（3）lb_kind. 负载均衡转发规则。一般包括 DR,NAT,TUN3 种，在我的方案中，都使用DR 的方式。
（4）persistence_timeout.会话保持时间，单位是秒。这个选项对动态网站很有用处：当用户从远程用帐号进行登陆网站时，有了这个会话保持功能，就能把用户的请求转发给同一个应用服务器。在这里，我们来做一个假设，假定现在有一个 lvs 环境，使用 DR 转发模式，真实服务器有 3 个，负载均衡器不启用会话保持功能。当用户第一次访问的时候，他的访问请求被负载均衡器转给某个真实服务器，这样他看到一个登陆页面，第一次访问完毕；接着他在登陆框填写用户名和密码，然后提交；这时候，问题就可能出现了—登陆不能成功。因为没有会话保持，负载均衡器可能会把第 2次的请求转发到其他的服务器。
（5）转发协议 protocol.一般有 tcp 和 udp两种。实话说，我还没尝试过 udp协议类的转发。
4、主机管理
功能说明：包括添加、修改、设置LB等功能模块。
点击在新窗口中浏览此图片
4.1、添加SERVER
点击在新窗口中浏览此图片
      真实服务器 real_server.也即服务器池。Real_server的值包括 ip地址和端口号。多个连续的真实 ip，转发的端口相同，是不是可以以范围表示？需要进一步实验。如写成real_server 61.135.20.1-10 80 .
（1）权重 weight.权重值是一个数字，数值越大，权重越高。使用不同的权重值的目的在于为不同性能的机器分配不同的负载，性能较好的机器，负载分担大些；反之，性能差的机器，则分担较少的负载，这样就可以合理的利用不同性能的机器资源。

4.2、点击在新窗口中浏览此图片设置LB
功能说明：设置所选服务器的LoopbackIP，只限于DR模式。
5、监控模块
功能说明：添加、删除、修改自定义监控名称。
点击在新窗口中浏览此图片
5.1、添加监控点
点击在新窗口中浏览此图片
      监控类型包括SSL_GET、HTTP_GET、TCP_CHECK、SMTP_CHECK、MISC_CHECK等，选择不同的监控类型会提示你输入不同的参数值，一般情况下选择管理员添加的类型即可满足，一些特殊应用的监控可以自定义去添加。

Sky同学写的LVS管理工具(桌面版)
http://blog.chinaunix.net/u3/102731/article_133142.html

如大家有什么疑问或感兴趣的话题可以通过weibo与我交流：http://t.qq.com/yorkoliu
Tags - , , ]]> https://www.liuts.com/post/172/ <![CDATA[LVS管理平台使用手册(第一版)[原创]]]> root <admin@yourname.com> Wed, 23 Dec 2009 01:53:52 +0000 https://www.liuts.com/post/172/ 1、性能图表
功能说明：以小时、日、星期、月、年的图表展示LVS SERVER、VIP、SERVER等流量情况，效果图如下：
点击在新窗口中浏览此图片
2、数据中心
      功能说明：管理LVS主机，一个LVS主机就是一个数据中心节点，功能包括新建、修改、生成、重载、图表、显示该组VIP等模块。
点击在新窗口中浏览此图片
2.1新建LVS节点：
点击在新窗口中浏览此图片
全局定义块
1、 email 通知。作用：有故障，发邮件报警。这是可选项目，建议不用，用 nagios 全面监
控代替之。
2、 Lvs负载均衡器标识（lvs_id）。在一个网络内，它应该是唯一的。
3、 花括号“{}”。用来分隔定义块，因此必须成对出现。如果写漏了，keepalived运行时，不会得到预期的结果。由于定义块内存在嵌套关系，因此很容易遗漏结尾处的花括号，这点要特别注意。

VRRP 定义块
1、同步 vrrp 组 vrrp_sync_group。作用：确定失败切换（FailOver）包含的路由实个数。即在有2 个负载均衡器的场景，一旦某个负载均衡器失效，需要自动切换到另一个负载均衡器的实例是哪些？
2、实例组 group.至少包含一个 vrrp 实例。
3、Vrrp实例 vrrp_instance.实例名出自实例组 group 所包含的那些名字。
（1）实例状态 state.只有 MASTER和BACKUP 两种状态，并且需要大写这些单词。其中MASTER为工作状态，BACKUP 为备用状态。当 MASTER 所在的服务器失效时，BACKUP 所在的系统会自动把它的状态有 BACKUP 变换成 MASTER；当失效的MASTER所在的系统恢复时，BACKUP 从 MASTER 恢复到BACKUP 状态。
（2）通信接口 interface。对外提供服务的网络接口，如 eth0,eth1.当前主流的服务器都有2 个或2 个以上的接口，在选择服务接口时，一定要核实清楚。
（3）lvs_sync_daemon_inteface。 负载均衡器之间的监控接口，类似于 HA HeartBeat的心跳线。但它的机制优于 Heartbeat，因为它没有“裂脑”这个问题，它是以优先级这个机制来规避这个麻烦的。在DR 模式中，lvs_sync_daemon_inteface 与服务接口 interface 使用同一个网络接口。
（4）虚拟路由标识 virtual_router_id.这个标识是一个数字，并且同一个 vrrp 实例使用唯一的标识。即同一个 vrrp_stance,MASTER 和 BACKUP 的 virtual_router_id 是一致的，同时在整个 vrrp内是唯一的。
（5）优先级 priority.这是一个数字，数值愈大，优先级越高。在同一个vrrp_instance里，MASTER 的优先级高于 BACKUP。若 MASTER 的 priority 值为 150，那么 BACKUP的 priority 只能是140或更小的数值。
（6）同步通知间隔  advert_int  .MASTER与 BACKUP 负载均衡器之间同步检查的时间间隔，单位为秒。
（7）验证 authentication。包含验证类型和验证密码。类型主要有 PASS、AH 两种，通常使用的类型为 PASS，据说 AH 使用时有问题。验证密码为明文，同一 vrrp实例MASTER 与 BACKUP 使用相同的密码才能正常通信。

4、 虚拟 ip 地址 virtual_ipaddress . 可以有多个地址，每个地址占一行，不需要指定子网掩码。注意：这个 ip必须与我们在 lvs客户端设定的 vip 相一致！

2.2、点击在新窗口中浏览此图片生成
功能说明：在管理端生成配置文件并校验。

2.3、点击在新窗口中浏览此图片重载
功能说明：将配置文件传输到LVS节点服务器并重启Keepalived服务。

2.3、点击在新窗口中浏览此图片图表
功能说明：显示该LVS节点流量数据。

3、虚拟IP池(VIP)
功能说明：添加、修改VIP池。
点击在新窗口中浏览此图片
3.1、添加图示：
点击在新窗口中浏览此图片
虚拟服务器 virtual_server定义块

虚拟服务器定义是 keepalived框架最重要的项目了，是 keepalived.conf必不可少的部分。

1、 虚拟服务器 virtual_server.  这个 ip 来自于 vrrp 定义块的第“4”步，后面一个空格，然后加上端口号。定义一个vip，可以实现多个 tcp 端口的负载均衡功能。
（1）delay_loop。健康检查时间间隔，单位是秒。
（2）lb_algo. 负载均衡调度算法，互联网应用常使用 wlc或 rr。
（3）lb_kind. 负载均衡转发规则。一般包括 DR,NAT,TUN3 种，在我的方案中，都使用DR 的方式。
（4）persistence_timeout.会话保持时间，单位是秒。这个选项对动态网站很有用处：当用户从远程用帐号进行登陆网站时，有了这个会话保持功能，就能把用户的请求转发给同一个应用服务器。在这里，我们来做一个假设，假定现在有一个 lvs 环境，使用 DR 转发模式，真实服务器有 3 个，负载均衡器不启用会话保持功能。当用户第一次访问的时候，他的访问请求被负载均衡器转给某个真实服务器，这样他看到一个登陆页面，第一次访问完毕；接着他在登陆框填写用户名和密码，然后提交；这时候，问题就可能出现了—登陆不能成功。因为没有会话保持，负载均衡器可能会把第 2次的请求转发到其他的服务器。
（5）转发协议 protocol.一般有 tcp 和 udp两种。实话说，我还没尝试过 udp协议类的转发。
4、主机管理
功能说明：包括添加、修改、设置LB等功能模块。
点击在新窗口中浏览此图片
4.1、添加SERVER
点击在新窗口中浏览此图片
      真实服务器 real_server.也即服务器池。Real_server的值包括 ip地址和端口号。多个连续的真实 ip，转发的端口相同，是不是可以以范围表示？需要进一步实验。如写成real_server 61.135.20.1-10 80 .
（1）权重 weight.权重值是一个数字，数值越大，权重越高。使用不同的权重值的目的在于为不同性能的机器分配不同的负载，性能较好的机器，负载分担大些；反之，性能差的机器，则分担较少的负载，这样就可以合理的利用不同性能的机器资源。

4.2、点击在新窗口中浏览此图片设置LB
功能说明：设置所选服务器的LoopbackIP，只限于DR模式。
5、监控模块
功能说明：添加、删除、修改自定义监控名称。
点击在新窗口中浏览此图片
5.1、添加监控点
点击在新窗口中浏览此图片
点击在新窗口中浏览此图片
      监控类型包括SSL_GET、HTTP_GET、TCP_CHECK、SMTP_CHECK、MISC_CHECK等，选择不同的监控类型会提示你输入不同的参数值，一般情况下选择管理员添加的类型即可满足，一些特殊应用的监控可以自定义去添加。

如大家有什么疑问或感兴趣的话题可以通过weibo与我交流：http://t.qq.com/yorkoliu
Tags - , ]]>