仓酷云

标题: 给大家带来CentOS6.5 heartbeat高可用集群的详解及事情流程 [打印本页]

作者: 冷月葬花魂 时间: 2015-1-14 20:33
标题: 给大家带来CentOS6.5 heartbeat高可用集群的详解及事情流程
欢迎大家来到仓酷云论坛！LinuxHACluster高可用办事器集群，所谓的高可用不是主机的高可用，而是办事的高可用。

甚么叫高可用：一个办事器down失落的大概性多种多样，任何一个大概坏了都有大概带来风险，而办事器离线一般带来的价值是很年夜的，特别是web站点，以是当某一台供应办事的的办事器down失落不至于办事停止的就叫高可用。

甚么叫心跳：就是将多台办事器用收集毗连起来，尔后每台办事器都一直的将本人仍然在线的信息很冗长很小的公告给统一个收集中的备用办事器的主机，告知实在主机本人仍然在线，别的办事器收到这个心跳信息就以为本机是在线的，特别是主办事器。

心跳信息怎样发送，由谁来收，实在就是历程中的通讯两台主机是没法通讯的，只能使用收集功效，经由过程历程监听在某一套接字上，完成数据发送，数据哀求，以是多台办事器就得运转一律的历程，这两个历程一直的举行通讯，主节点(主办事器)一直的向对方一律的节点发送本人的心跳信息，那这个软件就叫高可用的集群的基准条理，也叫心跳信息传送层和事物信息的传送层，这是运转在集群中的各节点上的历程，这个历程是个办事软件，关机后必要将其启动起来，主机间才能够传送信息的，通常为主节点传给备节点。

所谓的资本：以web为例，vip是资本，web办事也是资本，另有网页面也是资本，一个办事包含多个资本，而像web的同享存储也是资本等等，分歧的办事所必要的资本也是分歧的，而同享存储是高可用集群中最难明决的成绩。

如是主节点挂了，多个备节点怎样来选择一个备节点来做为供应办事的一个节点呢，而这类应当选择哪一个备用节点来做为供应办事的机制就叫做集群事物决议的历程。

ha_aware：假如一个使用步伐本人可以使用底层心跳信息传送层的功效完成集群事物决议的历程的软件就叫ha_aware。

DC：DesignatedCoordinator选定的和谐员，当DC地点的主机挂了就会先选出一个DC，再由DC做失事物的决议。注重：在高可用集群中最中心的、最底层的办理的单元叫资本，把资本组合在一同来组分解一个办事。

高可用集群中任何资本都不该该自行启动，而是由CRM办理启动启动的；
CRM：ClusterResourcesManager集群资本办理，真正做出决议的是CRM。

heartbeatv1版时就有了资本办理的观点，而v1版的资本就是heartbeat自带的，叫haresources，这个文件是个设置文件；而这个设置文件接口就叫haresources；
当heartbeatv2第二版的时分，heartbeat被做了很年夜的改善，本人能够做为一个自力历程来运转，并而能够经由过程它吸收用户哀求，它就叫crm，在运转时它必要在各节点上运转一个叫crmd的历程，这个历程一般要监听在一个套接字上，端口就是5560，以是办事器端叫crmd，而客户端叫crm(能够称为crmshell)，是个下令行接口，经由过程这个下令行接口就能够跟办事器真个crm通讯了，heartbeat也有它的图形化界面工具，就叫heartbeat-GUI工具，经由过程这个界面就能够设置举行。
第三版heartbeatv3，被自力成三个项目heartbeat、pacemaker(心脏起博器)、cluster-glue(集群的贴合器)，架构分别开来了，能够分离别的的组件事情了。

RA：resourceagent资本代办署理，实在就是可以吸收CRM的调剂用于完成在节点上对某一个资本完成办理的工具，这个办理的工具一般是剧本，以是我们一般称为资本代办署理。任何资本代办署理都要利用统一种作风，吸收四个参数：{start|stop|restart|status}，包含设置IP地点的也是。每一个种资本的代办署理都要完成这四个参数据的输入。
当某一个节点呈现妨碍时，其下面的资本被主动转移到别的一般的备用节点上并启动的这个历程叫妨碍转移，也称为生效转移(failover)。
假如呈现妨碍的节点又返来的，那我们就要把这个节点增加返来，那这个增加返来的历程我们就叫生效转回，也称妨碍转回(failback)。

资本争用、资本断绝：
万一集群产生***时，为了不不再成为集群上的节点持续利用资本而产生资本争用情形，招致有挂载文件体系的体系文件产生溃散，成为新的集群的就会给不再成为集群的节点补一枪，让不是集群节点的办事逝世透，不再吸收哀求，这就叫stonith(shoottheothernodeinthehead)，而这类功效就叫资本断绝。争用同享存储的成果长短常严峻的，轻则同享存储溃散，重则全部文件体系都溃散，数据全体丧失。

资本断绝有两种级别：
节点级别：这类就叫STONITH，这类就是不论怎样间接把对方的电源给割断，一样平常这类主机都是毗连到电源互换机上的。
资本级别：这类必要依附一些硬件装备来完成，好比毗连到同享存储的光纤互换机，把必要踢除进来的节点的光纤接口屏障了，这类就叫资本级其余断绝。
关于办事器摆布分开的这类情形一般称为脑裂(brain-split)，摆布不和谐了，在高能够用集群中制止资本争用完成资本断绝是我们在计划高可用集群中必需要考滤的成绩。

两个节点的形式下，一旦产生集群分开今后，个中一个节点产生妨碍，在我们没法判断哪一个节点不一般的时分，而一般的节点必定是能够连到互联网上往的，如许的话就申明一般的节点是能够跟前端路由通讯的，以是我们就把前端路由当做第三个节点，这里我们称为ping节点，当每一个节点接洽到对方以后先往ping前真个节点，假如能够ping通，那就申明本人是一般的，就申明该节点是有多票法定票数的节点，而前真个ping节点就叫仲裁装备，匡助节点判别哪一个节点是优越一方的，偶数节点数时就会借助于仲裁装备。
RHCS不是利用ping节点来判别的，他是利用了一个同享存储的装备，偶数个节点处于举动的节点不休的往磁盘中写数据，依照心跳信息频次每隔一个信息频次就往磁盘里写一个数据位，只需这个装备每隔一个心跳工夫距离就更新一次数据位，就申明这个装备处于举动形态的，假如发明节点屡次没有写数据位了就以为节点挂了，这类也叫仲裁装备(qdisk)。仲裁装备又有两种：分离为pingnode和qdisk；

那心跳是怎样传送的呢，在多台主机之机又是怎样相互事情优秀呢，如图：高可用主从的两个节点；

信息层(MessagingLayer)：主从两个节点的心跳信息都要基于信息层来完成，也叫底层基本架构层，用于传送心跳信息的，而可以完成这类功效的有Corosync和heartbeat，corosync是openAIS的一个组件，
资本分派层(ResourceAllocation)：也叫资本办理器层，这层的中心组件叫CRM(ClusterResourcceManager集群资本办理器)，CRM上必需有一个资本被推荐成为办理者的，叫Leader，它的事情是决议集群中的一切事物的，这里称为DC(DesignatedCoordinator指定和谐员)，任何DC上会分外运转两个历程，一个叫PE(PolicyEngine战略引擎)，所谓战略引擎就是将底层信息层搜集全部集群中一切节点上的信息在当地天生一个年夜图bigpic来战略节点运转在哪一个节点上，并关照实在节点上的资本办理器来完成资本的启动和封闭等操纵；一个叫TE(TransitionEngine传输引擎)，它次要是把PE做出的决议公告给对应节点的CRM；
集群资本办理器必需借助于MessageingLayer公告给每个节点，主动的播送或组播给每个节点，如许就包管了每个节点上的信息都是一样的，而这些数据在盘算机中又怎样来交互数据的呢，这里就要基于扩大标志言语来完成数据的格局传送的，这类叫半布局化数据基于XML的，以是在各节点之间完成设置信息保留都是经由过程XML文件保留的，而要可以了解这个XML文件保留的信息利用到一个工具叫CIB(ClusterInformationBase集群信息库)；只需能毗连到CRM上都能够往设置这个XML文件，起首它会先保留到DC的XML中，然后再由DC同步支每一个节点上的XML文件中往的；
Resources层：而PE(战略引擎)就是依据XML这个库来猎取资本的设置信息的，并经由过程MessagingLayer不猎取以后节点的举动信息，尔后做出决议，一旦做得决议就要启动资本了；以是PE借助于当地的MessagingLayer关照给实在节点的集群信息库来完成对某些资本信息的传送，好比说公告别的CRM要启动某一资本了，收到信息后CRM其实不卖力启动，转由LRM(LocalResourceManager当地资本办理)启动，每一个节点上都运转在这个LRM，而并发资本又借助于RA(ResourceAgent资本代办署理)完成资本办理，这就是它的事情道理；CRM卖力搜集信息，推荐为DC的由PE运转，PE卖力整合全部集群中的一切资本，并确保某些资本在符合的节点上运转起来，一旦做出决议就会公告给别的节点上的CRM，对应节点上的CRM收到公告今后会挪用本人的LRM，由LRM批示RA完成相干的操纵；

那上面我们来完成heartbeatv1版本的事情历程：
装置设置高可用集群：完成heartbeatv1版的历程
1、节点称号很关头，集群每一个节的称号都得能相互剖析；
用hosts文件，/etc/hosts：hosts中主机名的正反剖析了局必需跟”uname-n”的了局坚持分歧；
2、工夫必需得同步，利用收集工夫办事器同步工夫；
3、各节点间能基于ssh密钥相互认证通讯；

1)设置主机名、
第一台节点的主机名为node1.tanxw.com，第二台节点的主机名为node2.tanxw.com
#vim/etc/hosts改主机名，注重，两个节点都要增加，我几个节点就加几条剖析
172.16.249.61node1.tanxw.com
172.16.249.62node2.tanxw.com
#uname-n
#hostnamenode1.tanxw.com
#hostnamenode2.tanxw.com
#cat/etc/sysconfig/network假如这个与node1或2纷歧致就改一下，这个改设置文件包管下次体系重启时主机名仍然无效，
#假如改好了没有失效就ctrl+d刊出一下再登录就OK了。

2)两台主机或多台主机基于ssh无密钥通讯
#ssh-keygen-trsa-P‘’这个天生一个暗码为空的公钥和一个密钥，把公钥复制到对方节点上便可
#ssh-copy-id-i.ssh/id_rsa.pubroot@node2.tanxw.com对方主机名用登任命户名
两台主机都要相互能够通讯，以是两台主机都得相互天生密钥和复制公钥，互相的节点上的hosts文件是都要剖析对方的主机名，172.16.249.61node1.tanxw.com
172.16.249.62node2.tanxw.com
#sshnode2.tanxw.com‘date’;date测试一下是不是已互信
3)装置heartbeatv1版本的步伐，两个节点都要装置上heartbeat的相干步伐包
#装置这几个包，可是存在依附干系，必要办理：
heartbeat-2.1.4-12.el6.x86_64.rpm、heartbeat-pils-2.1.4-12.el6.x86_64.rpm、
heartbeat-stonith-2.1.4-12.el6.x86_64.rpm
#办理依附干系：
#yum-yinstallperl-TimeDatenet-snmp-libslibnetPyXML
#rpm-ivhheartbeat-pils-2.1.4-12.el6.x86_64.rpmheartbeat-stonith-2.1.4-12.el6.x86_64.rpmheartbeat-2.1.4-12.el6.x86_64.rpm
一个高可用集群得依附：1、信息层；2、资本办理器；3、资本代办署理
我们设置的历程就按这类条理往设置就能够了；
这里要注重的是：怎样在收集中我们希冀的节点集群成为我们所必要的节点，在集群中信息不克不及任意传送，而心跳节点是基于组播地点传送的，假如他人也装了heartbeat也毗连到这个组播地点下去，这都不宁静，基于这类情形，我们各节点这间信息传送是必要认证的，这类认证基于HMAC(动静认证码)，动静认证码是利用单向加密算动法来完成的，而单向加密一样平常有三类：crc(轮回冗余校验码)、md5(信息择要算法)、sha1。heartbeat基于udp协定，监听在694端口上；

4)设置heartbeat，它的设置文件在/etc/ha.d/的目次下，可是装置完步伐以后这个目次下没有这个设置文件，只要/usr/share/doc/heartbeat-2.1.4/目次下有ha.cf的主设置文件样本，复制到/etc下修正设置文件便可利用；另有一个authkeys的认证文件，这个文件就是我们各节点认证时所保留的认证暗码和认证机制，以是这个文件的权限相当主要，必需是600，不然启动不了办事；第三个haresources，界说资本时必要资本办理器来读取这个文件，以是这个也得有；
#cp/usr/share/doc/heartbeat-2.1.4/{ha.cf,authkeys,haresources}/etc/ha.d/
#cd/etc/ha.d/
#opensslrand-hex8天生16位随机数
ee869d3d86e1556f
#vim/etc/ha.d/authkeys
auth2这里的2与上面选项的数只需分歧就能够了，没有甚么限制
2sha1ee869d3d86e1556f
<divclass="linenumber8index7alt1"style="color:rgb(80,80,80);font-family:Consolas,BitstreamVeraSansMono,CourierNew,Courier,monospace;white-space:nowrap;font-size:1em!important;line-height:1.1em!important;padding:0px1em!important;margin:0px!important;border-top-left-radius:0px!important;border-top-right-radius:0px!important;border-bottom-right-radius:0px!important;border-bottom-left-radius:0px!important;background-image:none!important;border:0px!important;bottom:auto!important;float:none!important;left:auto!important;outline:0px!important;overflow:visible!important;position:static!important;right:auto!important;top:auto!important;vertical-align:baseline!important;width:auto!important;box-sizing:content-box!important;min-height:inherit!important;">

作者: 谁可相欹 时间: 2015-1-16 20:21
标题: 给大家带来CentOS6.5 heartbeat高可用集群的详解及事情流程
永中office2004增强版安装只需要默认安装即可使用并操作大多与win系统雷同，打印机的配置和管理，记录光盘等。

作者: 海妖 时间: 2015-1-25 17:54
熟悉系统的基本操作，Linux的图形界面直观，操作简便，多加上机练习就可熟悉操作，在Linux下学习办公软件等常用软件。

作者: 活着的死人 时间: 2015-2-3 13:24
安装一个新的软件时先看README,再看INSTALL然后看FAQ,最后才动手安装,这样遇到问题就知道为什么。如果Linux说明文档不看,结果出了问题再去论坛来找答案反而浪费时间。

作者: 第二个灵魂 时间: 2015-2-9 04:31
如果你有庞大而复杂的测试条件，尽量把它剪裁得越小越好。可能你会遇到这种情况，对于一个问题会出现不同内容回答，这时你需要通过实践来验证。

作者: 精灵巫婆 时间: 2015-2-27 00:23
放手去搞。尽量不要提问，运用搜索找答案，或者看wiki，从原理上理解操作系统的本质，而不是满足于使用几个技巧。尽量看英文资料。

作者: 飘灵儿 时间: 2015-3-8 21:48
熟悉并掌握安装Linux，安装是学习的前提。目前较常见的安装方法有二种：

作者: 简单生活 时间: 2015-3-16 23:50
任何人都可以根据自己的喜好来定制适合自己的操作系统，Linux?是抢占式多任务多用户操作系统.

作者: 爱飞 时间: 2015-3-23 11:22
学习Linux系统在服务中的配置方法及使用方法。Linux在服务器中应用相当广，应对常用的apache,samba,ftp等服务器基本配置清楚了解。[重点，应巩固学习]

欢迎光临仓酷云 (http://ckuyun.com/)