首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏毛利学Python

    Centos7搭建Kubernetes集群

    搭建Kubernetes集群 那么我们正式搭建Kubernetes集群,什么是集群,就是多个Linux服务器。其实和Hadoop,elasticsearch,CDH集群差不多。 我选用的机器是三台centos7主机,没钱买服务器。之前配置三台服务器sh免密码登录和Docker,这里不一一介绍了。 NodeName IP地址 node01 192.168.92.90 node02 192.168.92.91 node03 192.168.92.92 搭建之前,先去中文文档http://docs.kubernetes.org.cn 7.1 libnetfilter_cttimeout.x86_64 0:1.0.0-6.el7_7.1 libnetfilter_queue.x86_64 0:1.0.2-2.el7_2 socat.x86 _64 0:1.7.3.2-2.el7 完毕!

    1.2K30发布于 2020-04-30
  • 来自专栏Python

    centos7搭建ceph集群

    Ceph] name=Ceph packages for $basearch baseurl=https://mirror.tuna.tsinghua.edu.cn/ceph/rpm-mimic/el7/ ceph.bootstrap-mgr.keyring ceph.bootstrap-rgw.keyring ceph.conf ceph.mon.keyring 将配置文件和密钥复制到集群各节点 配置文件就是生成的ceph.conf,而密钥是ceph.client.admin.keyring,当使用ceph客户端连接至ceph集群时需要使用的密默认密钥,这里我们所有节点都要复制,命令如下。 used, 108 GiB / 114 GiB avail pgs: 默认情况下ceph.client.admin.keyring文件的权限为600,属主和属组为root,如果在集群内节点使用 在集群节点上面node1 admin用户下执行下面命令。

    1.5K40发布于 2020-06-19
  • 来自专栏匿名用户的日记

    centos7搭建ceph集群

    Ceph] name=Ceph packages for $basearch baseurl=https://mirror.tuna.tsinghua.edu.cn/ceph/rpm-mimic/el7/ ceph.bootstrap-mgr.keyring ceph.bootstrap-rgw.keyring ceph.conf ceph.mon.keyring 将配置文件和密钥复制到集群各节点 配置文件就是生成的ceph.conf,而密钥是ceph.client.admin.keyring,当使用ceph客户端连接至ceph集群时需要使用的密默认密钥,这里我们所有节点都要复制,命令如下。 used, 597 GiB / 600 GiB avail pgs: 默认情况下ceph.client.admin.keyring文件的权限为600,属主和属组为root,如果在集群内节点使用 在集群节点上面node1 admin用户下执行下面命令。

    2.2K30编辑于 2021-12-31
  • 来自专栏大数据入坑指南

    CentOs7搭建rabbitmq集群

    rabbitmq-erlang.repo [rabbitmq-erlang] name=rabbitmq-erlang baseurl=https://dl.bintray.com/rabbitmq/rpm/erlang/20/el/7 Server 在http://www.rabbitmq.com/install-rpm.html#install-erlang 最上方点击下载rabbitmq-server-3.7.4-1.el7. dl.bintray.com/rabbitmq/Keys/rabbitmq-release-signing-key.asc yum install rabbitmq-server-3.7.4-1.el7. 另外两个节点加入到s186中,在另外两台上执行 rabbitmqctl stop_app rabbitmqctl reset rabbitmqctl join_cluster rabbit@s186 集群搭建完毕后 ,查看集群状态 [root@s186 /var/lib/rabbitmq]#rabbitmqctl cluster_status Cluster status of node rabbit@s186

    1.4K20发布于 2020-08-21
  • 来自专栏java架构计划训练营

    zookeeper集群搭建(centos7)

    data # 配置文件保存退出后,进入data目录 cd data # 生成myid文件,指定myid服务号 echo "1" > myid 4、将zookeeper目录分发到其他节点 # 分发到其他集群节点 2 vim myid 登录bigdata03 节点: cd /data/soft/zookeeper/conf/data # 指定myid服务号为3 vim myid 编写操作zookeeper集群的脚本 /zk.sh 脚本的命令说明: # 启动集群命令 ./zk.sh start # 停止集群命令 ./zk.sh stop # 查看集群状态命令 . /zk.sh status 8、连接zookeeper集群 # 连接zookeeper集群 cd /opt/module/zookeeper ./bin/zkCli.sh

    88840编辑于 2022-12-22
  • 来自专栏开源部署

    CentOS 7下CDH搭建Hadoop集群

    CentOS7.5) Server  || Agent CPU node11 Server  || Agent 4G node12 Agent 2G node13 Agent 2G 二、系统环境搭建 [root@node11~]## systemctl start ntpd //启动ntp服务 [root@node11~]## systemctl status ntpd //查看ntp服务状态 7、 / 1、安装Cloudera Manager Server&Agent 上传到/home/tools下 (三台机器都要安装)    tar xvzf cloudera-manager-centos7- 7、Server&Agent开机自启动服务 将/opt/cm-5.15.0/etc/init.d/目录下的cloudera-scm-server服务器启动脚本和cloudera-scm-agent代理服务启动脚本复制到 mysql-connector-java.jar   到    /opt/cloudera/parcels/CDH-5.15.0-1.cdh5.15.0.p0.21/lib/hive/lib/下面 点击继续,默认集群设置

    95310编辑于 2022-07-26
  • 来自专栏丑胖侠

    aws centos7 redis 集群搭建

    redis install 如果出现: zmalloc.h:50:31: 致命错误:jemalloc/jemalloc.h:没有那个文件或目录 执行下命令: sudo make MALLOC=libc 集群配置 sudo cp /usr/local/src/redis-4.0.9/redis.conf /usr/local/redis/bin/ 修改为后台启动模式: daemonize yes 启动集群: cluster-enabled 搭建集群 构建集群的脚本需要用到Ruby来进行执行。 等待的过程中开发了16379和16380端口 集群设置密码 分别针对不同的机器,不同的服务器执行以下操作,注意端口替换。 /redis-trib.rb check 172.1.1.1:6379 [ERR] Sorry, can't connect to node 172.1.1.1:6379 找到建立集群时执行以下命令生成的

    83920发布于 2019-07-02
  • 来自专栏开源部署

    CentOS 7下简单搭建 Elasticsearch集群

    环境说明: 服务器(系统版本CentOS 7) elasticsearch版本: elasticsearch-6.2.2 elasticsearch目录: /home/soft/  192.168.33.10 /bin/elasticsearch     启动成功之后,用CURL 请求测试集群是否搭建成功。             v Elasticsearch集群的简单搭建 此时,一个简单的集群已经搭建成功,现在是node-12为master节点。 在启动过程中遇到的问题列表: 1.Elasticsearch集群的简单搭建 解决办法: vim /etc/security/limits.conf,新加两行: es soft nofile 65536 es hard nofile 65536 2.Elasticsearch集群的简单搭建 解决办法: discovery.zen.ping.unicast.hosts配置信息时把端口加上

    77820编辑于 2022-07-12
  • 来自专栏WalkingCloud

    CentOS7下搭建ClickHouse集群

    (图片可放大查看) 三、CentOS7下搭建ClickHouse集群 1、基础环境介绍 三台CentOS7.9服务器(均可以访问互联网) node1 192.168.31.121 node2 192.168.31.122 (图片可放大查看) 2、利用脚本搭建zookeeper+clickhouse集群 具体操作步骤 cd /opt rz上传clickhouse.zip unzip clickhouse.zip #所在节点执行对应的安装脚本 /bin/bash #wget -O /etc/yum.repos.d/CentOS-Base.repo https://mirrors.aliyun.com/repo/Centos-7.repo #sed yum.repos.d/CentOS-Base.repo #wget -O /etc/yum.repos.d/epel.repo http://mirrors.aliyun.com/repo/epel-7. (图片可放大查看) 可以看到 cluster_clickhouse名称的集群信息说明集群搭建成功 clickhouse集群的简单搭建就介绍到这里 公众号后台回复clickhouse获取clickhouse.zip

    1.7K41发布于 2021-02-25
  • 来自专栏大数据分享

    (一)Centos7安装搭建集群环境

    虚拟机安装 链接:https://pan.baidu.com/s/1A4zs_oY6vstDLcJaEkC63w 提取码:y8y8 centos7安装包,下载后一键安装 链接:https://pan.baidu.com ifconfig可以查看) 如果ping通了就没有问题,另外两个节点如法炮制即可 如果ifconfig命令不存在 yum upgrade yum install net-tools Centos7 最新版本默认已经安装vim,可以使用命令查看是否安装 rpm -qa|grep vim 输出结果如下,如无以下输出结果,则安装vim: vim-filesystem-7.4.160-4.el7.x86 _64 vim-minimal-7.4.160-4.el7.x86_64 vim-enhanced-7.4.160-4.el7.x86_64 vim-common-7.4.160-4.el7.x86

    1K30发布于 2020-09-21
  • 来自专栏简栈文化

    CentOS7系统上Kubernetes集群搭建

    虚拟机创建 在自己的Mac系统里面利用Parallels Desktop创建3台虚拟机,具体信息如下: CentOS7-Node1: 10.211.55.7 parallels/centos-testCentOS7 选择CentOS7-Node1机器作为Master节点。 x86_64enabled=1gpgcheck=0repo_gpgcheck=0 安装Kubernetes环境 评估下来,利用kubeadm来搭建是大家比较推荐的,而且公司的集群也是。 5m49skubeadm-config 2 5m50skubelet-config-1.16 1 5m50s 安装Node,加入集群 weave-net createdrolebinding.rbac.authorization.k8s.io/weave-net createddaemonset.apps/weave-net created 验证集群是否安装完成

    2.2K20发布于 2021-11-04
  • 来自专栏哎_小羊

    国内使用 kubeadm 在 Centos 7 搭建 Kubernetes 集群

    Kubeadm 是一个可以快速帮助我们创建稳定集群服务的工具,通过它,我们可以在虚拟机、实体机或者云端快速部署一个高可用的集群服务。 系统要求,支持的系统 Ubuntu 16.04+、 CentOS 7 、HypriotOS v1.0.1+ 内存要求,每台机器至少要有 1GB 内存,否则集群启动后,留给运行的应用可用内存就很少了。 网络要求,保证集群内所有机器之前的网络是可以互相连通的。 其实是已经初始化完成了,只不过想使用集群的话,少了上边日志输出的那一步。 CentOS Linux 7 (Core) 3.10.0-514.26.2.el7.x86_64 查看下集群所有 pod 列表,发现符合预期 Master、Node 启动服务列表。

    5K112发布于 2018-01-02
  • 来自专栏哎_小羊

    初试 Centos7 上 Ceph 存储集群搭建

    2、环境、软件准备 本次演示环境,我是在虚拟机 Linux Centos7 上操作,通过虚拟机完成存储集群搭建,以下是安装的软件及版本: Centos:release 7.4.1708 (Core) Ceph 首先要提一下的是,如果我们在安装过程中出现了问题,需要重新操作的时候,例如想清理我搭建的这个集群的话,可以使用以下命令。 $ sudo chmod +r /etc/ceph/ceph.client.admin.keyring 至此,Ceph 存储集群已经搭建完毕了,我们可以查看那一下集群是否启动成功! ,一步一步的完成整个存储集群的搭建,文档写的很详细,非常容易上手操作。 参考资料 Ceph 简介 Ceph 预检 Ceph 存储集群搭建 Ceph 体系结构

    4.7K60发布于 2018-01-02
  • 来自专栏北漂的我

    CentOS 7 中使用 Docker 方式搭建 ZooKeeper 集群

    首先 CentOS 7 中应该安装好 Docker, Docker 安装参考 2. bash # 查看容器的ip地址 cat /etc/hosts 在宿主机上分别修改zoo.cfg, 在每个zoo.cfg文件最后添加 # 这3个ip分别是三个容器的ip, 2888是ZooKeeper集群内数据通讯端口 , 3888是集群内选举端口 server.1=172.17.0.2:2888:3888 server.2=172.17.0.3:2888:3888 server.3=172.17.0.4:2888:3888 docker stop zookeeper-1 zookeeper-2 zookeeper-3 # 启动容器 docker start zookeeper-1 zookeeper-2 zookeeper-3 7.

    91120发布于 2020-04-24
  • 来自专栏后台及大数据开发

    kubernetes集群搭建(7):常见问题及处理

    6.问题现象:执行kubectl create -f xxx.yaml时提示格式不对  解决办法:yaml对格式要求相当严格,缩进时必须用空格不能用tab,key:value时,: 后面有一个空格 7.

    2.1K30发布于 2018-08-02
  • 来自专栏Throwable's Blog

    CentOS7搭建Hadoop-3.3.0集群

    前提 这篇文章是基于Linux系统CentOS7搭建Hadoop-3.3.0分布式集群的详细手记。 基本概念 Hadoop中的HDFS和YARN都是主从架构,主从架构会有一主多从和多主多从两种架构,这里为了简化搭建集群的流程,这里使用一主多从的架构。 测试集群服务器规划 测试的Hadoop集群使用了3台基于VirtualBox搭建的CentOS7虚拟机: 内网IP 主机名 用户 虚拟磁盘空间 HDFS角色 YARN角色 192.168.56.200 hadoop]$ hadoop fs -cat /test/output/part-r-00000 hadoop 1 hello 3 java 1 world 1 小结 本文花了大量时间详细记录了如何从零开始搭建一个 本文永久链接是:https://www.throwx.cn/2020/12/27/hadoop-cluster-centos7-install-guide/

    2.8K30发布于 2020-12-29
  • 来自专栏开源部署

    CentOS 7下Hadoop完全分布式集群搭建

    Hadoop集群部署,就是以Cluster mode方式进行部署。本文是基于JDK1.7.0_79,hadoop2.7.5。 The key fingerprint is: 11:b2:23:8c:e7:32:1d:4c:2f:00:32:1a:15:43:bb:de hadoop@hadoop-master The key's /usr/java/jdk1.7.0_79 3 export  HADOOP_HOME=/usr/hadoop/hadoop-2.7.5 此时hadoop安装已完成,可执行hadoop命令,后续步骤为集群部署 [hadoop@hadoop-master ~]$ 2.5 Hadoop设定 2.5.0 开放端口50070 注:centos7版本对防火墙进行 加强,不再使用原来的iptables,启用firewall

    83910编辑于 2022-07-12
  • 来自专栏开源部署

    CentOS 7 下搭建Hadoop 2.9 分布式集群

    首先说明,本文记录的是搭建的3节点的完全分布式Hadoop集群的过程,环境是CentOS 7,1个nameNode,2个dataNode,如下: 1、首先,创建好3个CentOS 7的虚拟机. 2、完成虚拟机的 Java环境的搭建,可以参考 https://www.linuxidc.com/Linux/2018-11/155296.htm 3、关闭或者禁用防火墙, systemctl  stop firewalld.service yarn.nodemanager.resource.memory-mb</name>         <value>2048</value>     </property> </configuration> 7、 如果以上都成功,那么基本上完成了hadoop集群的搭建。

    67220编辑于 2022-07-24
  • 来自专栏WalkingCloud

    CentOS7下简单搭建zookeeper+kafka集群

    如下图所示 三台CentOS7的机器来搭建zookeeper+kafka集群 192.168.31.221 node1 node1.walkingcloud.cn 192.168.31.222 node2 node2.walkingcloud.cn 192.168.31.223 node3 node3.walkingcloud.cn 一、环境搭建 1、三台机器均修改/etc/hosts 2、配置互信 kafka-server-start.sh /opt/kafka/config/server.properties 先前台的方式启动kakfa-server,后期改用后台或者服务脚本的方式启动kafka 7、

    2.2K50发布于 2020-04-27
  • 来自专栏程序员同行者

    centos7搭建kafka集群-第二篇

    好了,本篇开始部署kafka集群 Zookeeper集群搭建 注:Kafka集群是把状态保存在Zookeeper中的,首先要搭建Zookeeper集群(也可以用kafka自带的ZK,但不推荐) 1、软件环境 可以用“jps”查看zk的进程,这个是zk的整个工程的main #执行命令jps 20348 Jps 4233 QuorumPeerMain 至此Zookeeper集群搭建完毕! 下面开始kafka集群搭建 Kafka集群搭建 1、软件环境 1、linux一台或多台,大于等于2 2、已经搭建好的zookeeper集群 3、软件版本kafka_2.12-0.10.2.1.tgz 2 默认的分区数,一个topic默认1个分区数 num.recovery.threads.per.data.dir=1 log.retention.hours=168 #默认消息的最大持久化时间,168小时,7天 kafka集群搭建完毕 5、其他说明标注 5.1、日志说明 默认kafka的日志是保存在/opt/kafka/kafka_2.12-0.10.2.1/logs目录下的,这里说几个需要注意的日志 server.log

    2.4K61发布于 2018-06-22
领券