/kylin/apache-kylin-2.3.0/apache-kylin-2.3.0-hbase1x-bin.tar.gz 2.下载 使用命令进行下载 wget http://mirrors.shu.edu.cn /apache/kylin/apache-kylin-2.3.0/apache-kylin-2.3.0-hbase1x-bin.tar.gz 或者先在本地下载,然后上传服务器 3.解压 tar -zxvf apache-kylin-2.3.0-hbase1x-bin.tar.gz 三、kylin配置 1.配置环境变量 (1)编辑 profile 文件 vim /etc/profile (2)设置 KYLIN_HOME /start-hbase.sh 2.启动 kylin 进入 kylin 的 bin 目录,执行 . /kylin.sh start 即可启动kylin 3.访问kylin管理界面 启动kylin之后,浏览器访问:http://your_hostname:7070/kylin。
[root@compile src]# cd kylin/ # kylin版本切换 # 本文是基于HDP-3.1.4.0-315安装部署Kylin,HDP-3.1.4.0-315的Hadoop版本是 Kylin 本文基于HDP3.1大数据平台安装部署Kylin,大数据平台的安装部署参考博主的其他文章 2.2 安装部署 # 1.上传编译好的kylin安装包并解压 [admin@hdp01 apps 因为后续有可能会部署Kylin3.x,所在这里修改了metedata url,区分这里是2.x版本 kylin.metadata.url=kylin_2_metadata@hbase kylin.env.hdfs-working-dir KYLIN_HOME is set to /opt/apps/kylin # 10.设置HDFS权限,admin是Linux的普通用户 [admin@hdp01 kylin]$ sudo usermod 到这里,Kylin2.6就安装部署成功了! 3.
此篇为大家带来的是Kylin的简单介绍及安装部署。 可伸缩性和高吞吐率:单节点Kylin可实现每秒70个查询,还可以搭建Kylin的集群。 4.BI工具集成 Kylin可以与现有的BI工具集成,具体包括如下内容。 安装部署Kylin(下面的所有步骤所有虚拟机均需操作) 1.将apache-kylin-2.5.1-bin-hbase1x.tar.gz上传到Linux ? 2. // 结束Kylin [bigdata@hadoop002 kylin]$ bin/kylin.sh stop ? hadoop003:2181:2181,hadoop004:2181:2181 sessionTimeout=120000 watcher=org.apache.curator.ConnectionState@10c8f62
基于 KubeSphere 玩转 Kubernetes 第二季|ARM 版 Kylin V10 部署 KubeSphere v3.4.0 不完全指南 大家好,欢迎来到运维有术 欢迎来到云原生运维实战系列之基于 操作系统类型 [root@ks-master-1 ~]# cat /etc/os-release NAME="Kylin Linux Advanced Server" VERSION="V10 (Sword )" ID="kylin" VERSION_ID="V10" PRETTY_NAME="Kylin Linux Advanced Server V10 (Sword)" ANSI_COLOR="0;31 " 操作系统内核 [root@ks-master-1 ~]# uname -a Linux KP-Kylin-ZH-01 4.19.90-24.4.v2101.ky10.aarch64 #1 SMP Mon ,worker 18h v1.26.5 172.16.33.23 <none> Kylin Linux Advanced Server V10 (Sword) 4.19.90
的Apache社区官网,具体参考:http://kylin.apache.org/cn/,本文主要描述如何在CDH集群中部署及使用Kylin。 内容概述 1.下载Kylin 2.部署Kylin 3.Demo1 4.Demo2 测试环境 1.RedHat7.4 2.CM/CDH5.13.3 3.Apache Kylin2.1.0 4.集群未启用Kerberos 前置条件 1.CDH集群正常运行 2.Hive,HBase服务运行正常 3.安装Kylin服务的节点已经部署Hive Gateway 2.下载Kylin ---- 社区版kylin下载地址:https 3.部署Kylin ---- 这里测试只部署了一个节点,实际生产可以部署多个节点,kylin是无状态的,前端做负载均衡。 1.上传kylin包至服务器 ? 10.model创建完成 ? 11.创建cube ? 12.选择model ? 13.选择维度,这里把model中设置的维度都勾选上 ? ? 14.选择度量指标,可以添加,比如sum、Max等 ?
放弃不难,但坚持很酷~ HDP版本:3.0 Kylin版本:2.6.0 前言 本文主要讲解如何部署Kylin集群,采取多个Kylin实例共享HBase存储的模式,如果需要事先了解Kylin基本概念的朋友可以查看 一、安装启动Kylin 首先安装一个Kylin实例,然后再分析Kylin集群模式部署的注意点。 1. 解决hive用户不能访问/kylin/kylin_metadata /kylin/kylin_metadata文件主要存储同步Hive表基数的相关文件,以及存储构建cube的相关信息。 下图描绘了 Kylin 集群模式部署的一个典型场景: ? 如果您需要将多个 Kylin 节点组成集群,请确保他们使用同一个 Hadoop 集群、HBase 集群。 ,即仅有一台kylin可以配置为kylin.server.mode=all或kylin.server.mode=job,其余机器的kylin配置为kylin.server.mode=query。
1.2.1+ HBase: 1.1+ Spark (可选) 2.1.1+ Kafka (可选) 0.10.0+ JDK: 1.7+ OS: Linux -2.5.2 2,Kylin下载与安装 下载Kylin的时候,需要注意Kylin的版本,Kylin支持CDH,也有原生的版本。 下载完成后,将tar包上传到linux中,进行解压: tar -zxvf apache-kylin-2.5.2-bin-hbase1x.tar.gz 然后对解压后的目录改名: kylin.job.jar=/opt/kylin2.5.2/lib/kylin-job-2.5.2.jar kylin.coprocessor.local.jar=/opt/kylin2.5.2/lib 3,其他配置 第二部完成后,Kylin的部署工作刚完成一半,因为Kylin的边缘配置还有一些。
Kylin在部署的以后需要依赖Hadoop,Hive以及HBase等组件,最近公司内部在部署Kylin服务的时候遇到了不少问题。 主要是HBase集群是独立部署的,与Kylin部署的HDFS不是同一个,因此踩了许多坑,这里将遇到的一些问题记录下来,希望能帮助到大家。 Hadoop版本:2.7.3 Hive版本:2.1.1 HBase版本:1.2.6 Kylin版本:2.4.0和2.6.1均有 由于Kylin和HBase在两个不同的HDFS集群,因此为了让Kylin服务可以访问 kerberos的HDFS 1由于我们的Kylin所以来的HDFS是线上的,所以一般都部署了kerberos作为安全认证,但是HBase是独立部署的,因此HBase所在的HDFS是没有认证方式的,包括HBase 问题七 Kylin进程FULL GC挂掉 Kylin进程默认的JVM参数是相对比较小的,我们需要手动调大一些,在KYLIN_HOME/conf/setenv.sh中,有一个KYLIN_JVM_SETTINGS
/kylin:v10-sp3-2403#amd64架构(x86服务器)dockerpull--platform=linux/amd64docker.xuanyuan.run/macrosan/kylin dockertagdocker.xuanyuan.run/macrosan/kylin:v10-sp3-2403kylin:test⚠️生产环境禁止使用latest标签,需保持版本可追溯,避免部署一致性问题 kylin-test/data:/var/data\-v/data/kylin-test/conf:/etc/custom\-eTZ=Asia/Shanghai\--platform=linux/arm64 kylin-serviceuser:"1000:1000"#非root用户platform:linux/arm64#架构指定ports:-"5432:5432"volumes:-. :v10-sp3-2403nginx-g"daemonoff;"#示例:前台运行自定义服务dockerrun...macrosan/kylin:v10-sp3-2403/opt/app/start.shforeground4
适配arm麒麟过程中和文章格式有参考运维有术公众号相关文章 运维有术,公众号:运维有术ARM 版 Kylin V10 部署 KubeSphere v3.4.0 不完全指南 本文将详细介绍,如何基于鲲鹏CPU (arm64)和操作系统 Kylin V10 SP2/SP3,利用 KubeKey 制作 KubeSphere 和 Kubernetes 离线安装包,并实战部署 KubeSphere 3.3.1 和 Kubernetes Kylin V10 SP2 离线环境 KubeSphere/k8s-master deploy 192.168.200.7 Kunpeng-920 Kylin V10 SP3 联网主机用于制作离线包 操作系统类型 [root@localhost ~]# cat /etc/os-release NAME="Kylin Linux Advanced Server" VERSION="V10 (Halberd )" ID="kylin" VERSION_ID="V10" PRETTY_NAME="Kylin Linux Advanced Server V10 (Halberd)" ANSI_COLOR="0;
,请参考《如何在CDH中部署及使用Kylin》,文章中包含了如何在CDH上部署Kylin,以及创建cube,然后进行查询的两个demo例子。 本文主要描述如何在启用Kerberos的CDH集群中如何部署及使用Kylin。 3.部署Kylin ---- 这里测试只部署了一个节点,实际生产可以部署多个节点,kylin是无状态的,前端做负载均衡,kylin的负载均衡配置后续会有文章详细介绍。 5.创建kylin的kerberos账号,并生成kylin账号的keytab文件 ? 生成kylin账号的keytab文件 ? ? 并将kylin.keytab文件拷贝至部署Kylin的节点上 ? 10.启动kylin服务 确认主机所使用的kerberos凭证为kylin ? 执行bin/kylin.sh start命令 ? ?
天行1st,公众号:编码如写诗信创:鲲鹏(arm64)+麒麟(kylin v10)离线部署k8s和kubesphere(含离线部署新方式) 1. 离线部署 服务器配置 主机名 IP CPU OS 核数 内存 用途 master-1 192.168.10.2 Kunpeng-920 Kylin V10 SP2 32H 64GB 离线环境 KubeSphere /k8s-master master-2 192.168.10.3 Kunpeng-920 Kylin V10 SP2 32H 64GB 离线环境 KubeSphere/k8s-master master 安装k8s的依赖包,上传k8s-init-Kylin_V10-arm.tar.gz并解压后执行install.sh。 kylin V10 sp2/sp3启动nfs-server过程中如遇到错误,可通过以下方式排查。主要启动其nfs-idmapd.service依赖服务。
-2.0.0-bin-hbase1x.tar.gz hadoop-2.7.2.tar.gz hbase-1.1.9-bin.tar.gz jdk-8u144-linux-x64.tar.gz zookeeper 安装过程: 三个大步骤就可以完成环境的部署了,酒足饭饱,泡好茶客官准备开始咯: 1.更改服务器名称: 192.168.6.220 hadoop 这一行就是我们添加192.168.6.220 就是本地IP jdk-8u144-linux-x64.tar.gz zookeeper-3.4.8.tar.gz 为了整洁方便使用, 我统一解压放在根目录workspace ,jdk放在/user/java/目录下 yarn.nodemanager.remote-app-log-dir</name> <value>/YarnApp/Logs</value> </property> </configuration> slaves 由于是单机部署 样例数据且启动主角 Kylin A.导入实例数据:/workspace/kylin/bin/sample.sh B.启动Kylin :/workspace/kylin/bin/kylin.sh start
前言 网上搜索了一筐如何在Linux下安装部署Redis的文章,各种文章混搭在一起勉强安装成功了。自己也记录下,方便后续安装时候有个借鉴之处。 Redis版本 5.0.4 服务器版本 Linux CentOS 7.6 64位 下载Redis 进入官网找到下载地址 Redis 右键Download按钮,选择复制链接。 假设不添加该关键字Linux会将可执行文件存放在/usr/local/bin目录, 库文件会存放在/usr/local/lib目录。配置文件会存放在/usr/local/etc目录。 我么可以通过cat、vim、less等Linux内置的读取命令读取该文件。 也可以通过redis-cli命令进入redis控制台后通过CONFIG GET * 的方式读取所有配置项。 关于直接输入redis-server不行的问题我还怀疑是不是Linux缓存问题,我重启服务器尝试下。结果还是一样的。。。
在上一篇中鲲鹏+麒麟离线部署,有网友希望出x86+麒麟离线部署文档,故出此文档 天行1st,公众号:编码如写诗信创:鲲鹏(arm64)+麒麟(kylin v10)离线部署k8s和kubesphere(二 Hygon C86 3250 Kylin V10 SP3 联网主机用于制作离线包 实战环境涉及软件版本信息 服务器芯片:Hygon C86 3250 操作系统:麒麟 V10 SP3 x86_64 Docker 操作系统类型 [root@localhost ~]# cat /etc/os-release NAME="Kylin Linux Advanced Server" VERSION="V10 (Lance )" ID="kylin" VERSION_ID="V10" PRETTY_NAME="Kylin Linux Advanced Server V10 (Lance)" ANSI_COLOR="0;31 id: kylin version: "V10" osImage: Kylin Linux Advanced Server V10 (Halberd) repository
本文是《CDH+Kylin三部曲》系列的第二篇,上一篇《CDH+Kylin三部曲之一:准备工作》已将所需的机器和文件准备完毕,可以部署CDH和Kylin了; 执行ansible脚本部署CDH和Kylin 执行命令开始部署:ansible-playbook cm6-cdh5-kylin264-single-install.yml 整个部署过程涉及在线安装、传输大文件等耗时的操作,请耐心等待(半小时左右), 如果部署期间出错退出(例如网络问题),只需重复执行上述命令即可,ansible保证了操作的幂等性; 部署成功如下图所示: ? 启动Kylin:$KYLIN_HOME/bin/kylin.sh start 控制台输出以下内容说明启动Kylin成功: ? 至此,CDH和Kylin的部署、设置、启动都已完成,Kylin已经可用了,在下一篇文章中,我们就在此环境运行Kylin的官方demo,体验Kylin
1、平台:银河麒麟V10 (Kylin V10) 这是一款由中标软件和天津麒麟合并后的中标软件有限公司开发的商业Linux发行版,深度定制于Linux内核之上。 AllData数据中台部署到国产信创环境,查看服务器信息: kylin@kylin-pc:~$ cat /etc/*-release DISTRIB_ID=Kylin DISTRIB_RELEASE=V10 DISTRIB_CODENAME=kylin DISTRIB_DESCRIPTION="Kylin V10 SP1" DISTRIB_KYLIN_RELEASE=V10 DISTRIB_VERSION_TYPE =enterprise DISTRIB_VERSION_MODE=normal NAME="Kylin" VERSION="银河麒麟桌面操作系统V10 (SP1)" VERSION_US="Kylin Linux Desktop V10 (SP1)" ID=kylin ID_LIKE=debian PRETTY_NAME="Kylin V10 SP1" VERSION_ID="v10" HOME_URL
本文是《CDH+Kylin三部曲》的第一篇,整个系列由以下三篇组成: 准备工作:搭建CDH+Kylin环境前,将所有硬件、软件资源准备好 部署和设置:部署CDH和Kylin,再做相关设置 Kylin实战 关于CDH与Kylin Kylin的运行需要Hadoop、Hive、HBase等服务,因此用CDH来集中部署这些应用更为方便,下图来自Kylin官方,可见是支持CDH的: ? 官方说支持CDH6.0版本,但实际部署中发现Kylin2.6在CDH6.0.1环境启动会有问题,经尝试发现Kylin2.6+CDH5.16可以正常运行,本次实战就用这样的版本搭配; 部署方式 ansible 下载文件(ansible电脑) 本次实战一共要准备13个文件,这里用表格列举如下: 编号 文件名 简介 1 jdk-8u191-linux-x64.tar.gz Linux版的jdk安装包 2 mysql-connector-java -2.6.4-bin-cdh57.tar.gz kylin安装包(适配CDH版本) 9 hosts ansible用到的远程主机配置,里面记录了CDH6服务器的信息 10 ansible.cfg ansible
Linux tomcat部署War包,Linux在Tomcat部署JavaWeb项目,Linux部署War包 >>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>> ©Copyright 蕃薯耀 2017年3月6日 http://fanshuyao.iteye.com/ 一、Linux快速部署War包操作,暂时是最简单的操作 1、先关闭Tomcat /home/java/tomcat7/bin /shutdown.sh 2、进入War包存放目录(可以通过工具:SSH Secure Shell Client把War传到Linux服务器) cd /home/project 3、解压War包到部署的项目中 tomcat部署War包,Linux在Tomcat部署JavaWeb项目,Linux部署War包 http://fanshuyao.iteye.com/blog/2360423 Linux下Tomcat /blog/2359793 Linux Tomcat安装,Linux配置Tomcat,Linux Tomcat修改内存,Linux tomcat修改端 http://fanshuyao.iteye.com
⚖️部署方案对比:传统手工vs一键脚本对比项传统手工部署企业级一键脚本(阜阳云动科技)对比项传统手工一键部署操作步骤≥8步(查显卡→禁用nouveau→安装依赖→更新initramfs→重启→验证1条命令 ,全自动执行耗时15-30分钟(新手可能更久)<2分钟(自动检测与配置)出错率高(配置遗漏、权限错误、包缺失常见)极低(内置校验+异常处理)适用人群Linux高级用户普通用户运维开发者/企业IT可重复性差 ✅编译环境一键配齐自动安装gcc、g++、make、dkms、linux-headers-$(uname-r)等驱动编译必备组件。 [INFO]linux-headers-5.4.18-110-generic已安装[INFO]验证nouveau禁用状态... 配套视频教程即将上线我们将同步发布《2分钟搞定银河麒麟+NVIDIA驱动》实操演示视频,手把手教你从零部署!让国产系统+高性能GPU不再是难题阜阳云动科技——专注国产化环境下的高效开发与部署解决方案