项目进阶 之 集群环境搭建(一)概述

今天我们说一个不是特别新,但近期今年伴随大数据热而比較火的一个技术-集群技术。

什么是集群技术

集群(Cluster)技术是指一组相互犭虫立的计算机,利用快速通信网络组成一个计算机系统。每一个群集节点(即集群中的每台计算机)都是能够自主执行的一个犭虫立server。

这些server能够彼此通信,对网络客户机来说就像是形成了一个单一系统。协同起来向用户提供应用程序、系统资源和数据,并以单一系统的模式加以管理。简单讲就是当一个client(Client)与集群相互作用时,整个集群像是一个犭虫立的server。

集群的特点

了解了集群的概念之后。接下来我们继续讲一下集群的特点:

1、高性能计算机系统

集群的强大处理能力在于集群可以整合多台普通计算机系统,通过负载均衡、并行处理、时间片处理等多种方式将用户端请求分散到各个计算机上,从而使整个集群计算机系统完毕之后超级计算机才干完毕的工作的强大处理能力。

2、高可用性的计算机系统

集群的高可用性在于当集群计算机系统中的节点出现软件或硬件故障时。集群中的冗余计算机系统能够迅速取代发生问题的节点计算机系统,并自己主动投入应用,从而保证整个系统的不间断执行。

3、可扩展性良好的计算机系统

集群的可扩展性在于当集群系统的处理能力达到瓶颈的时候,除了通过添加集群中每一个计算机节点的单机处理能力(如通过添加CPU数量、添加内存大小等手段)外。还能够通过添加集群节点数,即通过向群集加入新的计算机节点,使整个集群系统的处理能力随着处理器的加入而伸缩,从而增大应用程序吞吐量,以达到添加系统的总体处理能力的目的。完毕系统的扩容。

因为集群系统具有高性能、高可用性和可扩展性等特点,而且其性价比相对较高,因此集群系统的应用领域很广泛,差点儿能够应用在全部的计算机领域。

所以,了解、掌握和应用集群技术,就成为了现阶段开发者和管理人员必须储备的基础技能。

接下来,我们继续解说集群相关的其它内容。

敬请期待。

时间: 2024-08-24 10:01:11

项目进阶 之 集群环境搭建(一)概述的相关文章

项目进阶 之 集群环境搭建(三)多管理节点MySQL集群

上次的博文项目进阶 之 集群环境搭建(二)MySQL集群中,我们搭建了一个基础的MySQL集群,这篇博客咱们继续讲解MySQL集群的相关内容,同时针对上一篇遗留的问题提出一个解决方案. 1.单管理节点MySQL集群和多管理节点MySQL集群 上一篇的博客中,我们搭建的MySQL集群架构中,只存在一个管理节点,这样搭建的集群可以用如下所示的结构表示. 仔细分析上图就会发现,上图所示的单管理节点MySQL集群存在当唯一的管理节点由于网络.断电.压力过大等各种原因宕机后,数据节点和SQL节点将会各自为

Storm 系列(四)—— Storm 集群环境搭建

一.集群规划 这里搭建一个 3 节点的 Storm 集群:三台主机上均部署 Supervisor 和 LogViewer 服务.同时为了保证高可用,除了在 hadoop001 上部署主 Nimbus 服务外,还在 hadoop002 上部署备用的 Nimbus 服务.Nimbus 服务由 Zookeeper 集群进行协调管理,如果主 Nimbus 不可用,则备用 Nimbus 会成为新的主 Nimbus. 二.前置条件 Storm 运行依赖于 Java 7+ 和 Python 2.6.6 +,所

Nginx1.7.4+Tomcat7+memcached集群环境搭建

这几天研究了一下Nginx和tomcat的集群环境搭建,同时支持HTTP请求和HTTPS请求,研究了一下,整理一下,分享给大家.还是有很多不足的地方,大家发现问题,希望多多指正.话不多说,上代码~ 因为研究的条件有限,我是在本机上搭建两个Tomcat进行模拟的. 一.环境准备 1.Tomcat7:http://tomcat.apache.org/download-70.cgi 2.Nginx1.7.4:http://nginx.org/en/download.html 3.Memcached:h

[转]ZooKeeper 集群环境搭建 (本机3个节点)

ZooKeeper 集群环境搭建 (本机3个节点) 是一个简单的分布式同步数据库(或者是小文件系统) --------------------------------------------------------1.建立目录server1server1/dataDirserver1/dataLogDirserver1/logsserver1/zookeeper3.4.6 server2server2/dataDirserver2/dataLogDirserver2/logsserver2/zo

solr集群环境搭建

Solr集群环境搭建 一.     准备 1.     下载: solr-4.4.0.zip   solr安装包 apache-tomcat-7.0.47.tar.gz  tomcat安装包 2.     说明: 其中集群环境采用nginx做分发(也可以使用apache),nginx的安装这里不再介绍.我们共有四台机器,分别如下 10.10.42.164 10.10.42.165 10.10.42.166 10.10.42.167 其中10.10.42.164作为主节点安装nginx,solr

Neo4j集群环境搭建

引言: Neo4j是目前主流的图数据库,它本身也提供了高可用的集群解决方案,本文将尝试搭建高可用的neo4j环境. 1. 什么是图数据库? 图形数据库(graphic database)是利用计算机将点.线.画霹图形基本元素按一定数据结同灶行存储的数据集合. 图形数据库将地图与其它类型的平面图中的图形描述为点.线.面等基本元素,并将这些图形元素按一定数据结构(通常为拓扑数据结构)建立起来的数据集合.包括两个层次:第一层次为拓扑编码的数据集合,由描述点.线.面等图形元素间关系的数据文件组成,包括多

一:Storm集群环境搭建

第一:storm集群环境准备及部署[1]硬件环境准备--->机器数量>=3--->网卡>=1--->内存:尽可能大--->硬盘:无额外需求[2]软件环境准备--->CentOS-6.0-x86_64系统环境--->三台地址--->zookeeper和storm公用物理环境 第二:节点环境查看 第三:节点之间用ip-->别名绑定/etc/hosts,然后用ping 别名 进行测试 第四:zookeeper集群环境搭建第五:Storm集群环境搭建[1

Hadoop2.6集群环境搭建

Hadoop2.6集群环境搭建(HDFS HA+YARN)原来4G内存也能任性一次. 准备工作: 1.笔记本4G内存 ,操作系统WIN7 (屌丝的配置) 2.工具VMware Workstation 3.虚拟机:CentOS6.4共四台 虚拟机设置: 每台机器:内存512M,硬盘40G,网络适配器:NAT模式 选择高级,新生成虚机Mac地址(克隆虚拟机,Mac地址不会改变,每次最后手动重新生成) 编辑虚拟机网络: 点击NAT设置,查看虚机网关IP,并记住它,该IP在虚机的网络设置中非常重要. N

ZooKeeper伪集群环境搭建

1.从官网下载程序包. 2.解压. [[email protected] software]$ tar xzvf zookeeper-3.4.6.tar.gz 3.进入zookeeper目录后创建data目录. [[email protected] software]$ cd zookeeper-3.4.6 [[email protected] software]$ mkdir data [[email protected] software]$ cd data [[email protecte