- 综合排序
- 最热优先
- 最新优先
- 来自专栏好好学习，天天向上
Zookeeper系列(4)：搭建Zookeeper集群
Zookeeper集群中只要由半数以上的节点可用，Zookeeper集群就能正常提供服务。 集群搭建 搭建Zookeeper集群至少需要三台服务器，并且服务器应该是奇数台。 下面将介绍如何在单台机器上搭建三个Zookeeper服务组成的集群。 2：用于leader选举 server.1=localhost:2880:3881 server.2=localhost:2882:3883 server.3=localhost:2884:3885 4. STARTED 5.集群搭建完毕，可以使用客户端连接任意一台服务器进行操作： 连接服务器3，创建新的节点，连接服务器1，查看新创建的节点。 [root@localhost opt]# .
4K30发布于 2021-04-30 - 来自专栏∑小熊猫的博客
Zookeeper系列(4) —— Zookeeper 集群的搭建
Zookeeper 服务集群的搭建 Zookeeper 集群的数量推荐为奇数集群，因为 Zookeeper 集群要想持续工作，必须要保证半数以上的集群存活。 如果只有四台服务器，有两台无法工作，那么这个集群将无法正常工作，如果集群中为 5 台服务器，那么在有两台无法正常工作的情况下，zookeeper 集群依旧可以保持正常运行。 集群搭建示例 现如今我有三台虚拟机 ，其 ip 分别为 192.168.16.130，192.168.16.131，192.168.16.132 Step 1: 修改三台 linux 的 host 文件 文件 vi myid # 由于 192.168.16.132 对应的 host 为 zoo3，且 server.id 的 id 为 3 所以在myid 中输入的值为3 # 然后退出并保存 Step 4: 看到以上结果，Mode 中显示当前服务器的角色时代表 zookeeper 集群搭建成功
1K20发布于 2020-11-25 - 来自专栏后台及大数据开发
kubernetes集群搭建（4）：node节点安装
controller-manager, scheduler, and proxy find the apiserver KUBE_MASTER="--master=http://k8s-master:8080" 4. ：修改 KUBELET_HOSTNAME 中节点信息，KUBELET_POD_INFRA_CONTAINER 对应到私库地址 ， KUBELET_ARGS 配置的为dns解析信息 和master配置第4步 如果看到红色信息，表示环境搭建成功 [root@k8s-master ~]# kubectl get nodes NAME STATUS AGE k8s-node1 Ready
94020发布于 2018-08-02 - 来自专栏pangguoming
Neo4j 2.0 生产环境集群搭建
一、在windows上搭建Neo4j ha cluster的配置方法： 例如：建立集群的三台机器的ip分别为：10.230.9.91，10.230.9.92，10.230.9.93。 =HA 6、以管理员权限启动cmd控制台, 进入F:\neo4j-enterprise-2.0.0-M04-windows\neo4j-enterprise-2.0.0-M04\bin 启动集群： 在三个控制台分别输入 注：按照neo4j manual的写法，windows和linux生产环境集群，搭建后的验证方法相同。 二、在RedHat6.0上搭建Neo4j ha cluster的配置方法： 例如：建立集群的三个虚拟机的ip分别为：192.168.110.131,192.168.110.132,192.168.110.133 /neo4j start 启动集群： 在三个控制台分别输入Neo4j start，并回车。 ? 集群搭建成功的验证方法同windows。
2.2K40发布于 2018-03-07 - 来自专栏NetCore 从壹开始
微系列：4、在Centos中，搭建Zookeeper集群
开放相关端口 二、修改配置 进入Zookeeper目录下的conf目录，修改zoo_sample.cfg配置文件内容为 修改以下配置， # 数据目录 dataDir=/var/lib/zookeeper/ # 集群各节点信息 /zkServer.sh start Zookeeper会根据配置文件中的各节点信息，自动完成选举，并组建集群 四、设置开机启动 创建文件 /etc/rc.d/init.d/zookeeper 写入以下内容
66410编辑于 2023-01-09 - 来自专栏不温卜火
Spark快速入门系列(4) | Spark环境搭建—standalone(1) 集群的搭建
这里的 Standalone 是指只用 Spark 来搭建一个集群, 不需要借助其他的框架.是相对于 Yarn 和 Mesos 来说的. 一. 集群角色的简单介绍 Spark是基于内存计算的大数据并行计算框架，实际中运行计算任务肯定是使用集群模式，那么我们先来学习Spark自带的standalone集群模式了解一下它的架构及运行机制。 Standalone集群使用了分布式计算中的master-slave模型 master是集群中含有master进程的节点 slave是集群中的worker节点含有Executor进程 ? 二. 4. 在sbin/spark-config.sh中添加入JAVA_HOME变量 export JAVA_HOME=/opt/module/jdk1.8.0_144 ? 集群的启动和停止 1.
1.4K10发布于 2020-10-28 - 来自专栏DevOps
spark 集群搭建
集群规划 node01为master节点,node02,node03为worker节点 192.168.24.102 node01 192.168.24.103 node02 集群配置 以下操作以node01为操作节点 1. SCALA_HOME=/home/hadoop3/scala-2.11.7 export PATH=$PATH:$SCALA_HOME/bin source /etc/profile #配置生效 4. 搭建Spark HA 1. HADOOP_HOME，那么在HADOOP_HOME/sbin目录下也有start-all.sh和stop-all.sh这两个文件，当你执行这两个文件，系统不知道是操作hadoop集群还是spark集群
93710编辑于 2024-03-29 - 来自专栏程序员同行者
redis集群搭建
2、redis版本 ：最新稳定版3.0.6 3、安装配置 安装目录：/usr/local/src/redis-3.0.6/src/ 配置文件：/et/redis_630{0,1}.conf 二、搭建 3、创建集群 #选举规则 节点角色由启动顺序决定,先master之后是slave，本文中6300是master，6301是slave 初始化集群 [root@wh-53 etc]# /usr/local NODES 60ec356fa9e3a60d50b6b5a6c66520a8f3b63e21 192.168.1.87:6300 slave 1368481dd24815935e911c08b5a6c38c4cdc994c 0 1454326652647 7 connected 1368481dd24815935e911c08b5a6c38c4cdc994c 192.168.1.59:6301 master - 0 1454326653648 后期继续集群理论的学习。 不要让懒惰占据你的大脑，不让要妥协拖跨你的人生。青春就是一张票，能不能赶上时代的快车，你的步伐掌握在你的脚下，good luck
1.5K40发布于 2018-07-24 - 来自专栏从零开始的linux
搭建Hadoop集群
环境说明 redhat6.7 hadoop2.7 角色 主机名 IP master node01 192.168.6.71slave node02 192.168.6.72Slave node03 192.168.6.73 配置 vim /etc/hosts 192.168.6.71 node01
2.6K60发布于 2018-04-25 - 来自专栏性能与架构
Hadoop 集群搭建
目标 在3台服务器上搭建 Hadoop2.7.3 集群，然后测试验证，要能够向 HDFS 上传文件，并成功运行 mapreduce 示例程序 搭建思路 （1）准备基础设施 准备3台服务器，分别命名为 配置完成后，把 master 上的 hadoop 目录复制到 slave1 slave2 （3）启动 hadoop 在 master 中进行 hdfs 初始化，执行启动命令，打开相应网页查看状态信息 搭建过程 slave1:/home $ scp -r /home/hadoop slave2:/home 注意：如果各台服务器中JAVA_HOME位置不同，记得对 hadoop-env.sh 进行相应修改 （4） 可以正常访问的话，可以说明集群启动成功了，但不一定可以正常运行，还需要下面的实际验证 测试验证 （1）hdfs 操作 创建目录 $ hdfs dfs -mkdir -p /user/hadoop 注：在执行过程中，如果长时间处于 running 状态不动，虽然没有报错，但实际上是出错了，后台在不断重试，需要到 logs 目录下查看日志文件中的错误信息 环境搭建完成，内容较长，感谢阅读，希望对想要搭建
5.7K91发布于 2018-04-04 - 来自专栏Java工程师成长之路
ElasticSearch集群搭建
需求 用docker搭建一个ElasticSearch一主一从的集群，加一个elasticsearch-head查看集群状态 步骤 在参考了一堆博客后，我写了个固定容器ip的docker-compose.yml elasticsearch ports: - "9200:9200" - "9300:9300" networks: extnetwork: ipv4_ " links: - elasticsearch-central:elasticsearch networks: extnetwork: ipv4_ " links: - elasticsearch-central:elasticsearch networks: extnetwork: ipv4_
1K20发布于 2019-09-10 - 来自专栏学习内容
Hadoop集群搭建
遍历所有目录，挨个发送 for file in $@ do #4. 在各个节点服务器中加载环境变量(hadoop001、hadoop002、hadoop003) source /etc/profile 同步JDK、Hadoop xsync /opt/module/ 4、 集群节点资源配置 NameNode和SecondaryNameNode不要安装在同一台服务器。 如果集群是第一次启动，需要在hadoop001节点格式化NameNode。 （注意：格式化NameNode，会产生新的集群id，导致NameNode和DataNode的集群id不一致，集群找不到已往数据。
1.9K20编辑于 2023-08-10 - 来自专栏兮动人的博客
Hadoop 集群搭建
Hadoop 集群简介 Hadoop集群包括两个集群:HDFS集群、YARN集群 两个集群逻辑上分离、通常物理上在一起 两个集群都是标准的主从架构集群 ? ? 逻辑上分离 两个集群互相之间没有依赖、互不影响 物理上在一起 某些角色进程往往部署在同一台物理服务器上 MapReduce集群呢? 这里使用Hadoop3.1.4安装包，可以去官网下载 4. 集群时间同步（3台机器） yum -y install ntpdate ntpdate ntp4.aliyun.com ? JDK 1.8安装（3台机器） ? 总结 服务器基础环境 Hadoop源码编译 Hadoop配置文件修改 shell文件、4个xml文件、workers文件 配置文件集群同步
2.1K20发布于 2021-06-11 - 来自专栏JAVA同学会
kafka集群搭建
一、zookeeper集群搭建 略，请参考其他文档，这里不再赘述。 二、下载kafka 从kafka官网下载kafka_2.11-0.11.0.0.tgz，并解压。 tar -zxvf kafka_2.11-0.11.0.0 三、kafka配置修改 这里我们仅以两台kafka实例做集群。 zookeeper.connect ：将zookeeper集群的地址和端口写上。 num.partitions=1 ：每个topic的partition默认数量。 将两台机器的kafka启动，集群搭建完毕。 集群搭建就是这么简单。
1K20发布于 2019-02-25 - 来自专栏开源部署
Minio 集群搭建
具体实际的取舍可以参考官方文档，我使用的是4 node 4 driver 模式 环境机器说明 192.168.31.2 192.168.31.3 192.168.31.4 192.168.31.5 每台机器单独挂在 4块盘 data1 data2 data3 data4 minio 安装包参考github 网站 参考图 启动&&运行 配置key(实际可以直接配置到profile中) export MINIO_ACCESS_KEY /data1 http://192.168.31.2/data2 \ http://192.168.31.2/data3 http://192.168.31.2/data4 /data1 http://192.168.31.3/data2 \ http://192.168.31.3/data3 http://192.168.31.3/data4 /data1 http://192.168.31.4/data2 \ http://192.168.31.4/data3 http://192.168.31.4/data4
1.6K20编辑于 2022-07-31 - 来自专栏三丰SanFeng
zookeeper集群搭建
最近公司用到了zookeeper做集群管理，这里按步骤记录一下其中的一些经验，也给后来的同学一些参考。由于这里只有一台服务器，因此搭建的其实是伪集群，多台服务器的搭建流程类似。 集群搭建环境： 发行版：CentOS-6.6 64bit 内核：2.6.32-504.el6.x86_64 CPU：intel-i7 3.6G 内存：2G 集群搭建步骤： 1. zoo_test.cfg [root@rocket local]# cd /usr/local/zookeeper-server3/;cp conf/zoo_sample.cfg conf/zoo_test.cfg 4. 说明进程启动失败或集群未建立成功，这时需要查看对应目录中的zookeeper.out日志去找到相应的原因并去解决它。 8. 可以看到这里已经连接成功了，而且能查看节点情况，说明zookeeper集群已经开始工作了。 版权声明：本文为博主原创文章，未经博主允许不得转载。
1.3K70发布于 2018-01-16 - 来自专栏Bigdata
HBase集群搭建
ACID（Atomicity、Consistency、Isolation、Durability） * 适合结构化数据和非结构化数据 * 一般都是分布式的 * HBase不支持事务 * 不支持Join 4、 4）高并发 由于目前大部分使用Hbase的架构，都是采用的廉价PC，因此单个IO的延迟其实并不小，一般在几十到上百ms之间。这里说的高并发，主要是在并发的情况下，Hbase的单个IO延迟下降并不多。 4) MemStore 顾名思义，就是内存存储，位于内存中，用来保存当前的数据操作，所以当数据保存在WAL中之后，RegsionServer会在内存中存储键值对。 6、HBase的集群环境搭建 注意事项：HBase强依赖zookeeper和hadoop，安装HBase之前一定要保证zookeeper和hadoop启动成功，且服务正常运行 第一步：下载对应的HBase export HBASE_HOME=/export/servers/hbase-1.2.0-cdh5.14.0 export PATH=:$HBASE_HOME/bin:$PATH 第七步：HBase集群启动
1.5K00发布于 2020-12-22 - 来自专栏晓晨的专栏
Jenkins 集群搭建
一.前言 Jenkins是当下比较流行的一款功能强大的持续集成工具，它支持搭建集群，来提高多项目的构建速度，模式为主从模式，master会将任务分配到各个从节点进行并发构建，从而提高速度，下面介绍一下如何搭建 Jenkins集群。
2.6K50发布于 2018-07-12 - 来自专栏浅枫沐雪
搭建zookeeper集群
1709 3月 7 2019 ivysettings.xml -rw-rw-r-- 1 2002 2002 10742 3月 7 2019 ivy.xml drwxr-xr-x 4 4096 3月 7 2019 zookeeper-docs drwxr-xr-x 3 2002 2002 35 3月 7 2019 zookeeper-it drwxr-xr-x 4 /lib/slf4j-log4j12-1.7.25.jar:/opt/zookeeper-3.4.14/bin/.. /lib/slf4j-api-1.7.25.jar:/opt/zookeeper-3.4.14/bin/.. /lib/log4j-1.2.17.jar:/opt/zookeeper-3.4.14/bin/../lib/jline-0.9.94.jar:/opt/zookeeper-3.4.14/bin/..
86471发布于 2020-03-10 - 来自专栏python3
kafka集群搭建
数量越多，集群吞吐率越高）， 若干Consumer Group，以及一个Zookeeper 集群。 三、正式搭建 环境介绍 操作系统 docker镜像 docker ip 部署软件以及版本 ubuntu-16.04.5-server-amd64 ubuntu:16.04 172.168.0.2 zookeeper 关于zookeeper集群的搭建，请参考链接： https://www.cnblogs.com/xiao987334176/p/10103619.html 本文使用5个kafka节点，构造kafka集群 Replicas: 4 Isr: 4 ... 可以发现此时的Leader的broker.id为4，也就是第4个kafka节点。
1.5K10发布于 2020-02-21
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号