首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏大数据技术栈

    cloudera manager server 安装

    :断网 + rpm 安装 + yum本地源 以 CDH5.3.6 为例 软件下载:http://archive.cloudera.com/cm5/ 1.bin文件: http://archive.cloudera.com /cm5/redhat/6/x86_64/cm/5.3.6/RPMS/x86_64/ 3.创建“repodata” $ cd /var/www/html/cm5/redhat/6/x86_64/cm 安装 :$rpm -ivh ./*.rpm 安装 postgresql 1. 安装postgresql-server $rpm -ivh ./* 5.配置yum 源 $vi /etc/yum.repos.d/cloudera-manager.repo 输入内容: [cloudera-manager Error: Nothing to do $yum clean all $rm -rf /var/cache/yum/cloudera-* 到此为止,完成 cloudera server 的安装

    84620发布于 2019-10-30
  • 来自专栏Hadoop实操

    Cloudera Navigator介绍与安装

    内容概述 1.Navigator介绍 2.Navigator安装 3.Navigator访问 测试环境 1.操作系统RedHat7.3 2.CM和CDH版本为5.13.1 3.集群已启用Kerberos Cloudera Navigator作为Cloudera企业版的核心,还是有挺多用户在用的。它提供必要的审计和数据保护,来满足最严苛的规范限制。 ,来管理不只是Hadoop的数据生命周期 [3a9om3lpzy.jpeg] 3.Navigator安装 ---- 1.创建Navigator元数据库,这里我们使用的是MySQL数据库,建库语句如下: 3.使用管理员登录Cloudera Manager的WEB界面,进入Cloudera Management Service服务 [ls775tfnsv.jpeg] 4.点击“Instances”,进入实例界面 Navigator服务的安装

    4.7K40发布于 2018-03-30
  • 来自专栏运维前线

    Cloudera(CDH) 简介和在线安装

    Cloudera 简介 经过搜索发现Cloudera产品很适合笔者当前需求,于是开始研究Cloudera(CDH)的安装与使用,参考: Cloudera 官网:https://www.cloudera.com ;也带了Hive数据仓库工具帮助用户分析数据; 用户也能用Cloudera管理安装HBase分布式列式NoSQL数据库;Cloudera还包含了原生的Hadoop搜索引擎以及Cloudera Navigator Cloudera Manager Server与其他几个组件一起工作: agent - 安装在每台主机上。代理负责启动和停止进程,解包配置,触发安装和监视主机。 aniu.so node3 ## 注:在每台服务器配置hosts,master和node1/2/3代表服务器的主机名 # 设置swap参数 echo never > /sys/kernel/mm/transparent_hugepage 安装Cloudera Manager服务器 # 配置cloudera-cdh源和cloudera-manager源 # cloudera-manager wget http://archive.cloudera.com

    10K71发布于 2018-01-02
  • 来自专栏数据湖

    安装Grafana并使用Cloudera Manager DataSource

    本文主要讲述如何安装Grafana并使用Cloudera Manager datasource 插件。 首先来直观地感受下Grafana炫酷的Demo. 下载Grafana rpm包 wget https://dl.grafana.com/oss/release/grafana-7.2.0-1.x86_64.rpm 安装Grafana [root@cdh1 docs.grafana.org Main PID: 30699 (grafana-server) 访问Grafana web页面,默认端口为3000 首次登录用户为admin,密码可以随意,并且要求重置密码 安装 Manager 数据展示 1.设置默认的数据源 点击 Add data source > 选中 Cloudera Manager,填写配置如下,并点击Save&Test ,出现datasource tsquery,至于什么是tsquery,我们会在后面介绍 然后点击右侧的Visualization 按钮可以选择图表类型,我们选择Graph Cloudera Manager 对于集群磁盘IO的统计是数据传输率

    1.3K11发布于 2020-10-16
  • 来自专栏运维前线

    Cloudera Manager 安装 CDH5.x 心得

    Cloudera Manager 安装 CDH5.x 心得 废话不多说,先展示下这几天捣鼓的成果 Cloudera Manager 管理配置界面 Hbase 管理界面及Hbase Web UI HDFS selinux sed -i 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/selinux/config setenforce 0 # 不重启临时生效 3、 repo安装CM # 在CM节点执行 wget http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/cloudera-manager.repo -P 启动安装时会去cloudera官网找匹配的parcel安装包 重启cloudera-scm-server,查看实时日志 /etc/init.d/cloudera-scm-server restart tailf /var/log/cloudera-scm-server/cloudera-scm-server.log 通过CM管理界面安装CDH,注意事项 # CM server启动成功即可通过http

    1.3K80发布于 2018-01-02
  • 来自专栏全栈架构

    Centos7离线安装Cloudera Manager 5.14.1

    内容 版本 CentOS 7 64位 JDK 1.7 Cloudera Manager 5.14.1 本次安装一共使用3台服务器,主要用户测试。 -static set-hostname slave01 hostnamectl --static set-hostname slave02 修改hosts: vim /etc/hosts 根据自己的3台服务器 开始Cloudera Manager安装吧! 如果能访问,那证明 cloudera manager安装正常。 /cloudera-scm-server/cloudera-scm-server.log 如果是3台机器一般会出现错误: 在CM console中将副本设为2: dfs.replication=2 在所有的节点命令行执行

    4K10发布于 2018-08-15
  • 来自专栏开源部署

    Cloudera Hadoop Maven编译安装步骤详细教程

    Cloudera Hadoop Maven编译安装步骤详细教程 OS: Ubuntu 12.04 1.下载hadoop-0.20.2-cdh3u6.tar.gz源码包 http://www.cloudera.com 2.安装配置maven源 /etc/maven2/settings.xml apt-get install maven2 3.到search.maven.org上搜索下载缺少的jar包 jar包列表: 搜索方式 g:"org.apache.maven.plugins" AND a:"maven-surefire-plugin" AND v:"2.5" groupIP artifact version 4.安装 path/to/file A required class is missing: org/apache/maven/surefire/util/NestedCheckedException 需要在增加cloudera true</skipTests>             </configuration>     <version>2.16</version> </plugin> 6.编译hadoop mvn -f cloudera

    77510编辑于 2022-06-30
  • 来自专栏about云

    Cloudera 系列1:Cloudera 入门指南

    Cloudera 发行指南 本指南包含面向安装人员和管理员的版本和下载信息。它包括发行说明以及有关版本和下载的信息。 Cloudera QuickStart 本指南介绍如何快速安装 Cloudera 软件并为概念证明 (POC) 或开发创建初始部署。 它介绍如何下载和使用 QuickStart 虚拟机,它会提供开始基本安装所需的所有内容。 它还介绍如何在包含 4 个主机的群集上创建 Cloudera Manager 5、CDH5 和托管服务的全新安装。快速入门安装仅应用于演示和 POC 应用程序,不推荐用于生产。 Cloudera 安装和升级 本指南提供了 Cloudera 生产部署的软件要求和安装信息以及升级过程。本指南还提供 Cloudera 软件的特定端口信息。

    2.3K60发布于 2018-03-26
  • 来自专栏开源部署

    Cloudera Manager 安装集群遇到的问题及解决

    service mysql start #设置开机自启 chkconfig mysql on #设置数据库密码 /usr/bin/mysqladmin -u root password '123456' 3、 二、启动cloudera-scm-server 在启动cloudera-scm-server的时候报如下的错误(启来30秒左右自动关闭,查看日志文件:/opt/cm-5.11.1/log/cloudera-scm-server not open connection 错误原因: 1.缺少mysql的驱动包,检查/opt/cm-5.11.1/share/cmf/lib目录下是否有mysql的驱动; 2.检查mysql是否启动; 3. mysql本身的问题,只能卸载mysql重新安装(我就是这种方案解决的); 三、启动cloudera-scm-agent 在启动cloudera-scm-server的时候报如下的错误(启来30秒左右自动关闭 server和agent服务都是关闭的) 2.删除mysql中cmf数据库 3.删除从节点中/opt/cm-5.11.1目录 4.重新复制到从节点 scp -r /opt/cm-5.11.1 root@

    1.2K40编辑于 2022-07-24
  • 来自专栏Hadoop实操

    Cloudera Manager首页

    1.1.3.Cloudera Management Service ---- 这是一个包含Cloudera Manager Service链接的表格。 3.重置内容– 重置自定义仪表盘和预定义的一组图表,放弃任何自定义设置。 [qo59izjyf8.jpeg] 2.所有运行状况问题 ---- 按集群显示所有运行状况问题。 [uwth3mpfvo.jpeg] 1.单击“所有运行状况问题”链接以显示所有运行状况问题的详细信息。 2.默认情况下,对话框中只显示不良(Bad)的健康测试结果。 3.要通过实体或健康测试对运行状况问题进行分组,可以点击“按实体组织”或“按运行状况检查组织”。 [zdy23fy4m4.jpeg] 3.所有配置问题 ---- 按集群显示所有配置问题。 然后你就会看到Cloudera Manager的管理控制台登录界面。 2.使用管理员分配的凭据(账号/密码)登录到Cloudera Manager管理控制台。

    4.5K110发布于 2018-03-30
  • 来自专栏Lansonli技术博客

    大数据Kudu(五):Kudu基于Cloudera Manager安装及配置

    ​Kudu基于Cloudera Manager安装及配置使用Kudu一般都会和impala进行整合,impala与Hive是强依赖关系,需要安装Hive,安装Hive需要安装HDFS等,以上各个技术组件的版本都需要对应匹配 ,由于Kudu没有直接的安装包,为了方便我们可以选择基于Cloudera Manager进行安装Kudu及相关大数据组件。 #在cm1、cm2、cm3中启动ClouderaManager Agentsystemctl start cloudera-scm-agent#登录Cloudera Manager user:admin pwd:adminhttp://cm1:7180二、登录ClouderaManager平台安装Kudu三、选择Master Server 两台节点和Tablet Server 3台节点四、配置Kudu WAL目录和数据目录等待安装完成即可,可以通过Cloudera Manager 界面来访问Kudu。

    1K93编辑于 2022-12-20
  • 来自专栏Hadoop大数据运维

    深度挖掘|Cloudera安装不再难!基础环境搭建全解析

    今天,我们将带你深入探索Cloudera安装规划与系统环境搭建部署,为你的企业数据之旅铺设坚实的基石。 但在此之前,我们需要精心规划、细致部署。 接下来,我们将一步步引导你完成 Cloudera安装规划与系统环境搭建,为企业数据中心的管理变得简单直观。 系统环境准备、安装基础环境 1.选择三台已安装 Centos6 Liunx 系统的节点,分配资源 安装 CDH 节点推荐内存为64G,大部分内存被 Cloudera Management Service 12. servicentpdstart#启动ntpd服务 10.安装JDK 给每台节点安装jdk,这里我们安装的CDH版本为5.4,在官网https://www.cloudera.com/documentation 如果你想了解更多关于:Cloudera系统环境准备、基础环境安装、集群部署以及应用组件安装等全方位的技术的问题,可以关注我。

    49210编辑于 2024-09-18
  • 来自专栏大数据杂货铺

    Cloudera数据加密

    Cloudera提供了补充方法来加密静态数据,并提供了屏蔽日志文件,审核数据和SQL查询中的PII的机制。 可用的加密选项 Cloudera提供了多种机制来确保敏感数据的安全。 下图显示了使用示例部署: Cloudera透明HDFS加密可加密HDFS上存储的数据 Navigator Encrypt对与Cloudera Manager,Cloudera Navigator,Hive Cloudera集群的数据整理 编辑是一个使数据模糊的过程。 数据编辑与Cloudera 加密技术分开工作,Cloudera 加密技术不会阻止对集群具有完全访问权限的管理员查看敏感的用户数据。 为了安全地存储所需的加密密钥,Cloudera建议将Cloudera Navigator密钥受托服务器与HDFS加密结合使用。

    2.9K10发布于 2020-02-11
  • 来自专栏Hadoop实操

    0707-如何安装Grafana并使用Cloudera Manager datasource插件

    通过自带的控件或者第三方可以做出非常炫酷的界面,也能非常直观的展示各项监控指标,本文主要讲述如何安装Grafana并使用Cloudera Manager datasource 插件 具体展示如下: ? 下载安装 1.Grafana 安装包下载 网页地址:https://grafana.com/grafana/download?platform=linux ? 3.访问Grafana web页面,默认端口为3000 http://192.168.0.230:3000/login ? 首次登录用户为admin,密码可以随意,并且要求重置密码 ? 安装Cloudera Manager datasource插件 1. 使用离线的方式安装Cloudera Manager datasource https://grafana.com/grafana/plugins/foursquare-clouderamanager-datasource

    2.2K41发布于 2019-09-30
  • 来自专栏Java架构师必看

    Cloudera Manager 和CDH6.0.1安装,卸载,各步骤截图

    4.2.7 安装Hue所需的Python2.7 1.安装Software Collections Library (3个节点都执行以下命令) yum install centos-release-scl 1 2.安装Software Collections utilities (3个节点都执行以下命令) yum install scl-utils 1 3.安装Python 1 2 3 4 执行完成之后,分别执行 ssh cdh1 ssh cdh2 ssh cdh3 1 2 3 如果不需要再进行密码设置,说明免密设置已经完成了 4.3 安装 1.x86_64.rpm 1 2 3 4 5 6 将以上安装文件可以放到/root目录下 关于安装: Master节点(cdh1): yum -y install cloudera-manager-agent 1 2 3 4 5 6 7 8 9 10 11 12 先安装下面的内容,因为cloudera-manager-agent依赖这些 yum install bind-utils psmisc cyrus-sasl-plain

    3.1K30发布于 2021-08-12
  • 来自专栏开源部署

    CentOS 7下Cloudera Manager及CDH 5.14.0安装过程详解

    CM Agent CM Agent NameNode DateNode DateNode Mysql 2.操作系统:CentOS 7 3.Cloudera Manager:5.14.1 4.CDH :5.14.0 5.JDK1.8 二、软件下载地址 1.Cloudera Manager 2.CDH 3.JDK和MySQL自行搜索 三、系统环境设置: 以下步骤都使用root用户操作 1.设置静态IP 五、安装Clouder Manager及CDH 所有节点操作: 1.新建目录 $ sudo mkdir /opt/cloudera-manager 2.将下载的Clouder Manager解压到此目录下 $ sudo tar xzf cloudera-manager*.tar.gz -C /opt/cloudera-manager  3.创建用户cloudera-scm 由于Cloudera Manager 管理页面,网址为:http://hserver1n:7180, 用户名和密码都是admin 11.选择Cloudera Express 12.选择主机 13.群集安装 14.安装完成后,检查主机正确性

    1.2K30编辑于 2022-07-13
  • 来自专栏大数据杂货铺

    Cloudera软件分发管理

    Cloudera Manager的主要功能是安装和升级Cloudera Runtime和其他托管服务。Cloudera Manager支持两种软件分发格式:package和parcel。 Cloudera Manager对每个受支持的OS使用原生的系统软件包管理器来安装和升级Cloudera Manager。 它们默认安装在中/opt/cloudera/parcels。相反,软件package安装在中/usr/lib。 内部一致性-所有Cloudera Runtime组件都匹配,从而消除了从不同Cloudera Runtime版本安装组件的可能性。 不使用sudo命令就可以安装Cloudera Runtime。parcel的安装由以root或另一个用户身份运行的Cloudera Manager Agent处理,因此您可以不带 sudo。

    1.2K20发布于 2020-11-25
  • 来自专栏大数据杂货铺

    Cloudera安全认证概述

    Cloudera不提供Kerberos实现。 AD绑定帐户 -创建一个将在Hue,Cloudera Manager和Cloudera Navigator中用于LDAP绑定的AD帐户。 用于基于角色访问Cloudera Manager和Cloudera Navigator的 AD组-创建AD组并将成员添加到这些组中,以便您以后可以配置对Cloudera Manager和Cloudera 04 — 使用TLS/SSL进行安全的Keytab分发 Kerberos keytab文件在Cloudera Manager集群中的主机之间,Cloudera Manager Server和Cloudera 为了确保此敏感数据的安全,请配置Cloudera Manager服务器和Cloudera Manager代理主机以使用TLS / SSL进行加密通信。

    3.8K10发布于 2020-02-11
  • 来自专栏Hadoop实操

    0603-Cloudera Flow Management和Cloudera Edge Management正式发布

    Flow Management和Edge Management以前都是隶属于HDP的相关产品,Cloudera此次官宣代表的是它们现在可以与CDH一起安装并使用,包括使用Cloudera Manager 进行简易的Parcel安装和服务监控。 3.日志摄取 - 无法从企业中的数千个应用程序或系统中摄取日志数据。 4.IoT数据处理 - 无法从数千个边缘agent中摄取企业需要的IoT数据。 3.管理和保护从边缘到企业的数据 - 全方位的流数据平台,具有统一安全和治理。 4.任意流数据的完整治理 - NiFi中的开箱即用的数据溯源跟踪 - 行业内唯一的产品。 3.通过可视化的监控和管理所有已部署的agent,简化你的运营和维护。 ?

    1.1K10发布于 2019-04-28
  • 来自专栏大数据杂货铺

    Cloudera访问授权概述

    01 — Cloudera访问授权概述 授权是任何计算环境的基本安全要求之一。其目标是确保只有适当的人员或流程才能访问,查看,使用,控制或更改特定的资源,服务或数据。 对于可能尝试访问多个文件的服务(例如MapReduce,Cloudera Search等),将为每次文件访问尝试分别确定数据访问。HDFS中的文件权限由NameNode管理。 重要 Cloudera强烈建议您不要使用Hadoop的 LdapGroupsMapping提供程序。LdapGroupsMapping仅应在无法进行OS级集成的情况下使用。 例如,ZooKeeper(由YARN,Cloudera Search和HBase等内部系统使用)和Flume(由Hadoop管理员直接配置,因此不提供用户控件)。 Manager Cloudera Manager roles Backup and Disaster Recovery N/A 来源:https://docs.cloudera.com/cloudera-manager

    1.7K10发布于 2020-02-11
领券