[置顶] cdh4.2 HA的安装注意事项
1、目前发布版只支持两个NNTheHDFSHAfeatureaddressestheaboveproblemsbyprovidingtheoptionofrunningtwoNameNodesinthesamecluster,inanActive/Passiveconfiguration.These...
理解 OpenStack 高可用(HA) （4）: Pacemaker 和 OpenStack Resource Agent （RA）
本系列会分析OpenStack的高可用性（HA）概念和解决方案：（1）OpenStack高可用方案概述（2）NeutronL3AgentHA-VRRP（虚拟路由冗余协议）（3）NeutronL3AgentHA-DVR（分布式虚机路由器）（4）Pacemaker和OpenStackResourceAg...
使用MYCAT作为Mysql HA的中间件（转）
记得在上一篇文章“Java集群--大型网站是怎样解决多用户高并发访问的”的结尾处本人阐述了数据库的高可用的一种方案----实现主从部署，那么今天，就让我聊聊本人关于数据库的一些所思所想吧！下面是本人对数据库的高可用性的一些看法：提出原因：当网站或运用为用户提供服务时，防止单点故障问题，并且通过一定的...
hadoop(二):hdfs HA原理及安装
早期的hadoop版本，NN是HDFS集群的单点故障点，每一个集群只有一个NN,如果这个机器或进程不可用，整个集群就无法使用。为了解决这个问题，出现了一堆针对HDFSHA的解决方案（如：LinuxHA,VMwareFT,sharedNAS+NFS,BookKeeper,QJM/QuorumJourn...
HDFS概述（5）————HDFS HA
HAWithQJM目标本指南概述了HDFS高可用性（HA）功能以及如何使用QuorumJournalManager（QJM）功能配置和管理HAHDFS集群。本文档假设读者对HDFS集群中的一般组件和节点类型有一般的了解。有关详细信息，请参阅HDFS架构指南。本指南讨论如何使用QuorumJourna...
Spark on Yarn with HA
Spark可以放到yarn上面去跑，这个毫无疑问。当Yarn做了HA的时候，网上会告诉你基本Spark测不需做太多的关注修改，实际不然。除了像spark.yarn开头的相关配置外，其中一个很重要的坑是spark-yarn依赖包的Hadoop版本问题。Spark1.6.x的spark-yarn默认的H...
Python-S13作业-day3-之编辑ha.conf配置文件
Python-S13作业-day3-之编辑ha.conf配置文件需求：让用户输入字符串类型的字典，实现对配置文件指定，backend www.oldboy.org下的内容进行*查询*增加：backend record*增加record：backend存在，只增加record思路：总共分二个函数，三...
7、基于 HA 机制的 Mycat 高可用--mycat
在实际项目中，Mycat服务也需要考虑高可用性，如果Mycat所在服务器出现宕机，或Mycat服务故障，需要有备机提供服务，需要考虑Mycat集群。 1、高可用方案使用HAProxyKeepalived配合两台Mycat搭起Mycat集群，实现高可用性。HAProxy实现了MyCat多节点的集群高可...
day_ha配置文件
流程图:代码#!/sur/bin/envpython#-*-coding:utf-8-*-#{"backend":"www.oldboy.org","record":{"server":"100.1.7.90","weight":20,"maxconn":30}}importjsonimportsy...
详解Keepalived+Nginx实现高可用（HA）
这篇文章主要介绍了详解Keepalived+Nginx实现高可用（HA），小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧
InnoSQL HA Suite的实现原理与配置说明 InnoSQL的VSR功能Virtual Sync Replication MySQL 5.5版本引入了半同步复制（semi-sync replicaiton）的功能 MySQL 5.6支持了crash safe功能
InnoSQLHASuite的实现原理与配置说明 InnoSQL的VSR功能VirtualSyncReplicationMySQL5.5版本引入了半同步复制（semi-syncreplicaiton）的功能MySQL5.6支持了crashsafe功能http://www.innomysql.net/...
Hadoop 3.1.2(HA)+Zookeeper3.4.13+Hbase1.4.9(HA)+Hive2.3.4+Spark2.4.0(HA)高可用集群搭建
目录目录目录1、前言1.1、什么是Hadoop?1.1.1、什么是YARN?1.2、什么是Zookeeper?1.3、什么是Hbase?1.4、什么是Hive1.5、什么是Spark?2、环境准备2.1、网络配置2.2、更改HOSTNAME2.3、配置SSH免密码登录登录2.4、关闭防火墙2.7、安...
CentOS7.2非HA分布式部署Openstack Pike版 （实验）
部署环境一、组网拓扑二、设备配置笔记本：联想L440处理器：i3-4000M2.40GHz内存：12G虚拟机软件：VMware®Workstation12Pro（12.5.2build-4638234）三、虚拟机配置Controller节点：系统：CentOS7.264位（最小化安装）处理器：4核内...
HA 高可用软件系统保养指南
又过了一年618，六月是公司一年一度的大促月，一般提前一个月各系统就会减少需求和功能的开发，转而更多去关注系统可用性、稳定性和管控性等方面的非功能需求。大促前的准备工作一般叫作「备战」，可以把线上运行系统想象成一辆车，大促即是它即将面临的一次严峻驾驶考验。每次去长途自驾旅行时，我会把车送去对车况做一...
apache-storm-1.0.2.tar.gz的集群搭建（3节点）（图文详解）（非HA和HA）
不多说，直接上干货！Storm的版本选取我这里，是选用apache-storm-1.0.2.tar.gzapache-storm-0.9.6.tar.gz的集群搭建（3节点）（图文详解）为什么我用过storm-0.9.6版本，我还要用storm-1.0.2？storm集群也是由主节点和从节点组成的。...
Hadoop-HA（高可用）集群搭建
Hadoop-HA集群搭建一、基础准备工作1、准备好5台Linux系统虚拟服务器或物理服务器我这里演示采用虚拟服务器搭建Hadoop-HA集群，各自功能分配如下：NameNode节点：vt-serv、vt-serv4DataNode节点：vt-serv1、vt-serv2、vt-serv3Journ...
hadoop-2.2.0 HA配置
采用的是4台真实机器：namenode：qzhong node27datanode：qzhongnode27node100node101操作系统环境：qzhong（Ubuntu-14.0）node27、node100、node101（CentOS64bits）HA配置方式：采用的是journalNo...
HA模式下历史服务器配置
笔者的集群是HA模式的(HDFS和ResourceManagerHA)。在 ”Hadoop-2.5.0-cdh5.3.2HA安装＂ 中详细讲解了关于HA模式的搭建，这里就不再赘述。但网上直接将关于HA模式下的历史服务器的配置资料却很少。笔者在思考，如果配置在mapred-site.xml中就设置一台...
spark standalone zookeeper HA部署方式
虽然sparkmaster挂掉的几率很低，不过还是被我遇到了一次。以前在sparkstandalone的文章中也介绍过standalone的ha,现在详细说下部署流程，其实也比较简单。一.机器zookeeper集群zk1:2181zk2:2181zk3:2181sparkmasterspark-m1...
IPVS-DR+HA+ldirectord高可用负载均衡集群
实验平台：virtualbox4.12操作系统：RHEL5.4实验拓扑：两台Directory都有两块网卡，都设置为静态地址，其中eth0用于网络间通信，eth1用于两台Directory监测彼此心跳信息，所以使用独立的网络进行连接，在实际应用中可以使用串行线进行连接，这里由于使用虚拟机就采用int...