大数据学习笔记——Hbase高可用+完全分布式完整部署教程
Hbase高可用+完全分布式完整部署教程本篇博客承接上一篇sqoop的部署教程，将会详细介绍完全分布式并且是高可用模式下的Hbase的部署流程，废话不多说，我们直接开始！1. 安装准备部署Hbase时，我们使用的版本为1.2.82. 正式安装1. 将hbase-1.2.8-bin.tar.gz文件使...
docker部署Ceph分布式存储集群
1、环境准备 3台virtualbox虚拟机，用来安装ceph集群，已用docker-machine安装上了docker，每台虚拟机虚拟创建一个5G的硬盘，用于存储osd数据，例如：/dev/sdb 1台客户端manager，客户端可以扩展至多台形成swarm集群 hostname ip...
CentOS7.2 部署Ceph分布式存储
1.1 环境准备 主机名 IP地址 ceph-admin 192.168.16.220 ceph-node1,ceph-mon 192.168.16.221 ceph-node2,ceph-mon 192.168.16.222 ceph-node3,ceph-...
Ceph学习----Ceph 分布式部署
目前，公司所用的云环境在计算，网络和存储三大方面，只在计算做了虚拟化，对于网络和存储都只是用了最简单的方式，网络用linux bridge，存储用cinder直接管理NAS，为了增加弹性，应对互联网业务的冲击，就启动了存储和网络虚拟化的研究，其中我就负责存储虚拟化的项目。Ceph作为OpenStac...
CentOS 7部署 Ceph分布式存储架构
一、概述 随着OpenStack日渐成为开源云计算的标准软件栈，Ceph也已经成为OpenStack的首选后端存储。Ceph是一种为优秀的性能、可靠性和可扩展性而设计的统一的、分布式文件系统。ceph官方文档 http://docs.ceph.org.cn/ceph中文开源社区 http://cep...
ceph分布式存储手动部署教程
一、基础环境准备1、集群设备列表 10.240.240.210 client 10.240.240.211 node1 mon1 osd.0 10.240.240.212 node2 mon2 osd.1 10.240.240.213 node3 mon3 ...
Ambari安装之部署3个节点的HA分布式集群
前期博客Ambari安装之部署单节点集群其实，按照这个步骤是一样的。只是按照好3个节点后，再做下HA即可。部署3个节点的HA分布式集群（1）添加机器和添加服务的操作类似，如下图之后的添加ambari03、ambari04操作就和部署ambari02类似，可以参照前面的步骤。这里不多赘述。Ambari...
3-3 Hadoop集群完全分布式配置部署
Hadoop集群完全分布式配置部署下面的部署步骤，除非说明是在哪个服务器上操作，否则默认为在所有服务器上都要操作。为了方便，使用root用户。1.准备工作1.1 centOS6服务器3台手动指定3服务器台以下信息：hostnameIPmaskgatewayDNS备注master172.17.138....
hadoop3.1.1 HA高可用分布式集群安装部署
1、环境介绍涉及到软件下载地址：https://pan.baidu.com/s/1hpcXUSJe85EsU9ara48MsQ服务器：CentOS 6.8 其中：2 台 namenode、3 台 datanodezookeeper集群地址：192.168.67.11:2181,192.168.67....
转载：分布式文件系统 - FastDFS 在 CentOS 下配置安装部署（1）
原文：http://blog.mayongfa.cn/192.html一、安装 libfastcommon 和 FastDFS1.下载安装 libfastcommon ，这里是通过wget下载（我喜欢这种方式）。wget https://github.com/happyfish100/libfast...
Mysql分布式部署高可用集群方案
HAproxy+Mycat +MySQL主从集群高可用方案 1. HAproxy高可用方案： haproxy+keepalived，利用keepalived的VIP浮动能力，（多台haproxy对应同一个虚拟IP）实现haproxy集群高可用。 2. ...
Hadoop分布式HA的安装部署
Hadoop分布式HA的安装部署前言单机版的Hadoop环境只有一个namenode，一般namenode出现问题，整个系统也就无法使用，所以高可用主要指的是namenode的高可用，即存在两个namenode节点，一个为active状态，一个为standby状态。如下图：说明如下：HDFS的HA，...
zookeeper单机模式实现分布式，开发部署测试模式机器有限情况
ZooKeeper的部署和测试一背景zookeeper是一个开源的分布式应用程序协调服务，是Apache Hadoop 的一个子项目。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、名字服务、分布式同步、组服务等。其原理是基于google发表的《The Chubby lo...
分布式实时日志：ELK 的部署架构方案
一、概述ELK 已经成为目前最流行的集中式日志解决方案，它主要是由 Beats、Logstash、Elasticsearch、Kibana 等组件组成，来共同完成实时日志的收集，存储，展示等一站式的解决方案。本文将会介绍ELK常见的架构以及相关问题解决。Filebeat：Filebeat是一款轻量级...
ceph_deploy部署ceph分布式文件系统
1.前期准备：centos6.5 minimal版本3台选择其中一台作为一个安装节点,能无密码登录其他机器。ssh-keygenssh-keygen -i ~/.ssh/id_rsa.pub node1 node2 node32.命令：yum install cepy-deploy -y所有节点安装...
分布式服务器架构搭建和部署
192.168.74.155 zookeeper dubbo-admin web服务器（其实测试和生产环境应该 web服务器应该和zookeeper 拆开，且配置 集群，实现 高可用，但是这里我就直接部署到一台机器上） 192.168.74.156 zookeeper SOA服务器(dubb...
windows下nginx+tomcat分布式集群部署
这篇博客记录的还是很详细的。 https://www.cnblogs.com/xiaoblog/p/5960830.html
Memcache分布式部署方案
基础环境其实基于PHP扩展的Memcache客户端实际上早已经实现，而且非常稳定。先解释一些名词，Memcache是danga.com的一个开源项目，可以类比于MySQL这样的服务，而PHP扩展的Memcache实际上是连接Memcache的方式。首先，进行Memcache的安装，具体可查看博客里的...
zabbix分布式部署和主机自动发现
1.分布式部署原理1.1Zabbix分布式部署的原理传统的部署架构，是server直接监控所有的主机，全部主机的数据都是有server自己来采集和处理，server端的压力比较大，当监控主机数量很大的时候，server端可能会崩溃。并且如果监控的主机分布在不同地域、互不相同的网络上，传统的架构就不能...
第六章 Fisco Bcos 多服务器分布式部署
想了解相关区块链开发，技术提问，请加QQ群：538327407前提概要前面几章，我们通过单机部署，在单台服务器上搭建四个节点，完成FISCO BCOS 底层搭建，并完成相关合约开发、sdk 开发。本次，我们将通过多态服务器的形式，多机构、多节点分布式部署。备注：本文以下采用一键部署方式，但是想要了解...