/kylin/apache-kylin-2.3.0/apache-kylin-2.3.0-hbase1x-bin.tar.gz 2.下载 使用命令进行下载 wget http://mirrors.shu.edu.cn /apache/kylin/apache-kylin-2.3.0/apache-kylin-2.3.0-hbase1x-bin.tar.gz 或者先在本地下载,然后上传服务器 3.解压 tar -zxvf export HADOOP_HOME=/developer/hadoop-2.6.0 # 5. hbase export HBASE_HOME=/developer/hbase-1.2.0 # 6. /start-hbase.sh 2.启动 kylin 进入 kylin 的 bin 目录,执行 . /kylin.sh start 即可启动kylin 3.访问kylin管理界面 启动kylin之后,浏览器访问:http://your_hostname:7070/kylin。
[root@compile src]# cd kylin/ # kylin版本切换 # 本文是基于HDP-3.1.4.0-315安装部署Kylin,HDP-3.1.4.0-315的Hadoop版本是 Kylin 本文基于HDP3.1大数据平台安装部署Kylin,大数据平台的安装部署参考博主的其他文章 2.2 安装部署 # 1.上传编译好的kylin安装包并解压 [admin@hdp01 apps 因为后续有可能会部署Kylin3.x,所在这里修改了metedata url,区分这里是2.x版本 kylin.metadata.url=kylin_2_metadata@hbase kylin.env.hdfs-working-dir KYLIN_HOME is set to /opt/apps/kylin # 10.设置HDFS权限,admin是Linux的普通用户 [admin@hdp01 kylin]$ sudo usermod 到这里,Kylin2.6就安装部署成功了! 3.
此篇为大家带来的是Kylin的简单介绍及安装部署。 安装部署Kylin(下面的所有步骤所有虚拟机均需操作) 1.将apache-kylin-2.5.1-bin-hbase1x.tar.gz上传到Linux ? 2. // 结束Kylin [bigdata@hadoop002 kylin]$ bin/kylin.sh stop ? 6. web端查看 http://hadoop002:7070/kylin 用户名为:ADMIN,密码为:KYLIN(系统已填) ? ? 三. 安装时可能会遇见的坑 1. retry-able or retry gave up java.net.UnknownHostException: hadoop002:2181: 未知的名称或服务 at java.net.Inet6AddressImpl.lookupAllHostAddr
将zeppelin-0.8.0-bin-all.tgz上传至Linux 2. 修改名称 [bigdata@hadoop002 kylin]$ mv zeppelin-0.8.0-bin-all/ zeppelin 4. 启动zeppelin [bigdata@hadoop002 kylin]$ bin/zeppelin-daemon.sh start 5. 配置Zepplin支持Kylin 1. 点击右上角anonymous选择Interpreter 2. 搜索Kylin插件并修改相应的配置 3. 修改完成点击Save完成 三. 其他图表格式 6. 如果你想要导出 7.如果想使用zepplin运行其他的程序只需在之前加上%***即可 本次的分享就到这里了
1、首先确保Linux环境可以正常运行.Net 6网站 2、编辑服务运行文件 vim /usr/lib/systemd/system/测试.service 测试.service内容如下: [Unit] # 描述服务的类别 After=network.target [Service] WorkingDirectory=/网站部署路径 一次性进程 Type=forking # 启动当前服务的命令 ExecStart=/home/dotnet/dotnet/sdk/dotnet /网站部署路径
/cn/,本文主要描述如何在CDH集群中部署及使用Kylin。 前置条件 1.CDH集群正常运行 2.Hive,HBase服务运行正常 3.安装Kylin服务的节点已经部署Hive Gateway 2.下载Kylin ---- 社区版kylin下载地址:https 3.部署Kylin ---- 这里测试只部署了一个节点,实际生产可以部署多个节点,kylin是无状态的,前端做负载均衡。 1.上传kylin包至服务器 ? 6.访问kylin的web UI,这里的地址是http://192.168.0.198:7070/kylin,默认账号密码为:ADMIN/KYLIN ? 2.进入kylin Web界面reload metadata ? 3.查看导入模型 ? 4.构建cube ? 5.选择数据分区范围 ? 6.点击monitor,查看正在构建cube的作业 ? ?
放弃不难,但坚持很酷~ HDP版本:3.0 Kylin版本:2.6.0 前言 本文主要讲解如何部署Kylin集群,采取多个Kylin实例共享HBase存储的模式,如果需要事先了解Kylin基本概念的朋友可以查看 一、安装启动Kylin 首先安装一个Kylin实例,然后再分析Kylin集群模式部署的注意点。 1. 解决hive用户不能访问/kylin/kylin_metadata /kylin/kylin_metadata文件主要存储同步Hive表基数的相关文件,以及存储构建cube的相关信息。 下图描绘了 Kylin 集群模式部署的一个典型场景: ? 如果您需要将多个 Kylin 节点组成集群,请确保他们使用同一个 Hadoop 集群、HBase 集群。 ,即仅有一台kylin可以配置为kylin.server.mode=all或kylin.server.mode=job,其余机器的kylin配置为kylin.server.mode=query。
1.2.1+ HBase: 1.1+ Spark (可选) 2.1.1+ Kafka (可选) 0.10.0+ JDK: 1.7+ OS: Linux -2.5.2 2,Kylin下载与安装 下载Kylin的时候,需要注意Kylin的版本,Kylin支持CDH,也有原生的版本。 下载完成后,将tar包上传到linux中,进行解压: tar -zxvf apache-kylin-2.5.2-bin-hbase1x.tar.gz 然后对解压后的目录改名: kylin.job.jar=/opt/kylin2.5.2/lib/kylin-job-2.5.2.jar kylin.coprocessor.local.jar=/opt/kylin2.5.2/lib 3,其他配置 第二部完成后,Kylin的部署工作刚完成一半,因为Kylin的边缘配置还有一些。
Kylin在部署的以后需要依赖Hadoop,Hive以及HBase等组件,最近公司内部在部署Kylin服务的时候遇到了不少问题。 主要是HBase集群是独立部署的,与Kylin部署的HDFS不是同一个,因此踩了许多坑,这里将遇到的一些问题记录下来,希望能帮助到大家。 Hadoop版本:2.7.3 Hive版本:2.1.1 HBase版本:1.2.6 Kylin版本:2.4.0和2.6.1均有 由于Kylin和HBase在两个不同的HDFS集群,因此为了让Kylin服务可以访问 kerberos的HDFS 1由于我们的Kylin所以来的HDFS是线上的,所以一般都部署了kerberos作为安全认证,但是HBase是独立部署的,因此HBase所在的HDFS是没有认证方式的,包括HBase 问题七 Kylin进程FULL GC挂掉 Kylin进程默认的JVM参数是相对比较小的,我们需要手动调大一些,在KYLIN_HOME/conf/setenv.sh中,有一个KYLIN_JVM_SETTINGS
/arm64docker.xuanyuan.run/macrosan/kylin:v10-sp3-2403#amd64架构(x86服务器)dockerpull--platform=linux/amd64docker.xuanyuan.run dockertagdocker.xuanyuan.run/macrosan/kylin:v10-sp3-2403kylin:test⚠️生产环境禁止使用latest标签,需保持版本可追溯,避免部署一致性问题 |grepkylin输出类似以下内容即成功:展开代码语言:TXTAI代码解释REPOSITORYTAGIMAGEIDCREATEDSIZEmacrosan/kylinv10-sp3-2403d8f7e6a5b3c21 kylin-test/data:/var/data\-v/data/kylin-test/conf:/etc/custom\-eTZ=Asia/Shanghai\--platform=linux/arm64 用户platform:linux/arm64#架构指定ports:-"5432:5432"volumes:-.
,请参考《如何在CDH中部署及使用Kylin》,文章中包含了如何在CDH上部署Kylin,以及创建cube,然后进行查询的两个demo例子。 本文主要描述如何在启用Kerberos的CDH集群中如何部署及使用Kylin。 3.部署Kylin ---- 这里测试只部署了一个节点,实际生产可以部署多个节点,kylin是无状态的,前端做负载均衡,kylin的负载均衡配置后续会有文章详细介绍。 6.在部署kylin的节点上设置定时任务,进行kinit操作,kylin使用kylin用户去放问CDH集群的hive和hbase,所以需要kylin的凭证,通过定时执行以下脚本获取kylin用户的凭证 2.进入kylin Web界面reload metadata ? 3.查看导入模型 ? 4.构建cube ? 5.选择数据分区范围 ? 6.点击monitor,查看正在构建cube的作业 ? ?
其中Redis最常见的使用场景: 不经常变化的数据缓存 分布式session,主要是记录用户的登录状态 分布式锁,主要对独占资源的锁定 Redis有多种部署模式,本篇先介绍一下单机部署 0x01: 直接下载稳定版本 wget http://download.redis.io/releases/redis-6.0.7.tar.gz 0x02:安装Redis 编译 redis-6.x,要求 C11 specifier-qualifier-list before ‘_Atomic’ server.c:1032:31: 错误:‘struct redisServer’没有名为‘logfile’的成员 主要原因是从 redis-6.
-2.0.0-bin-hbase1x.tar.gz hadoop-2.7.2.tar.gz hbase-1.1.9-bin.tar.gz jdk-8u144-linux-x64.tar.gz zookeeper 安装过程: 三个大步骤就可以完成环境的部署了,酒足饭饱,泡好茶客官准备开始咯: 1.更改服务器名称: 192.168.6.220 hadoop 这一行就是我们添加192.168.6.220 就是本地IP localhost.localdomain localhost4 localhost4.localdomain4 ::1 localhost localhost.localdomain localhost6 localhost6.localdomain6 2.上传这些文件到服务器上。 jdk-8u144-linux-x64.tar.gz zookeeper-3.4.8.tar.gz 为了整洁方便使用, 我统一解压放在根目录workspace ,jdk放在/user/java/目录下
本文是《CDH+Kylin三部曲》的第一篇,整个系列由以下三篇组成: 准备工作:搭建CDH+Kylin环境前,将所有硬件、软件资源准备好 部署和设置:部署CDH和Kylin,再做相关设置 Kylin实战 关于CDH与Kylin Kylin的运行需要Hadoop、Hive、HBase等服务,因此用CDH来集中部署这些应用更为方便,下图来自Kylin官方,可见是支持CDH的: ? 官方说支持CDH6.0版本,但实际部署中发现Kylin2.6在CDH6.0.1环境启动会有问题,经尝试发现Kylin2.6+CDH5.16可以正常运行,本次实战就用这样的版本搭配; 部署方式 ansible 用到的配置信息 11 cm6-cdh5-kylin264-single-install.yml 部署CDH时用到的ansible脚本 12 cdh-single-start.yml 初次启动CDH时用到的 文件夹里新建名为cdh6的子文件夹; 把这八个文件放入cdh6文件夹(即剩余的八个):jdk-8u191-linux-x64.tar.gz、mysql-connector-java-5.1.34.jar
前言 网上搜索了一筐如何在Linux下安装部署Redis的文章,各种文章混搭在一起勉强安装成功了。自己也记录下,方便后续安装时候有个借鉴之处。 Redis版本 5.0.4 服务器版本 Linux CentOS 7.6 64位 下载Redis 进入官网找到下载地址 Redis 右键Download按钮,选择复制链接。 假设不添加该关键字Linux会将可执行文件存放在/usr/local/bin目录, 库文件会存放在/usr/local/lib目录。配置文件会存放在/usr/local/etc目录。 我么可以通过cat、vim、less等Linux内置的读取命令读取该文件。 也可以通过redis-cli命令进入redis控制台后通过CONFIG GET * 的方式读取所有配置项。 关于直接输入redis-server不行的问题我还怀疑是不是Linux缓存问题,我重启服务器尝试下。结果还是一样的。。。
在本章中,我们将介绍部署微服务的策略。 6.1、动机 部署单体应用程序意味着运行一个或多个相同副本的单个较大的应用程序。 更具挑战性的是尽管如此复杂,部署服务也必须快速、可靠和具有成本效益。 有几种不同的微服务部署模式。我们首先看看单主机多服务实例模式。 从多方面来讲,这是应用程序部署的传统方式。每个服务实例在一个或多个主机的标准端口上运行。主机通常被当作宠物对待。 图 6-1 展示了该模式的结构: ? 这种模式有几个变体。 图 6-2 展示了该模式的结构: ? 这是 Netflix 部署其视频流服务的主要方式。Netflix 使用 Aminator 将每个服务打包为 EC2 AMI。 图 6-3 展示了该模式的结构: ? 要使用此模式,请将您的服务打包成一个容器镜像。容器镜像是由运行服务所需的应用程序和库组成的文件系统镜像。一些容器镜像由完整的 Linux 根文件系统组成。
本文是《CDH+Kylin三部曲》系列的第二篇,上一篇《CDH+Kylin三部曲之一:准备工作》已将所需的机器和文件准备完毕,可以部署CDH和Kylin了; 执行ansible脚本部署CDH和Kylin 执行命令开始部署:ansible-playbook cm6-cdh5-kylin264-single-install.yml 整个部署过程涉及在线安装、传输大文件等耗时的操作,请耐心等待(半小时左右), 如果部署期间出错退出(例如网络问题),只需重复执行上述命令即可,ansible保证了操作的幂等性; 部署成功如下图所示: ? 启动Kylin:$KYLIN_HOME/bin/kylin.sh start 控制台输出以下内容说明启动Kylin成功: ? 至此,CDH和Kylin的部署、设置、启动都已完成,Kylin已经可用了,在下一篇文章中,我们就在此环境运行Kylin的官方demo,体验Kylin
◆ 前言 作为一名.Net菜鸟开发者,平时对Linux接触的并不多,项目部署这一块都是运维小哥顶着,但是作为混迹在云原生项目组的人咱也不能什么都不知道,该掌握的知识还是要懂的,所以借着这次机会,梳理一下项目部署这块的知识点 ,方便后续部署项目 ◆ Linux环境配置: 使用XShell或其他工具连接上我们的Linux服务器 1.配置yum 更新yum包 sudo yum update 安装yum-utils 用来管理 ◆ Docker部署.NetCore 项目 调整Dockerfile文件属性 我们先将Dockerfile文件属性复制到输出目录的方式调整为** 如果较新则复制**,方便我们部署 项目打包,拷贝至Linux 服务器上 接下来我们将项目打包,然后拷贝到linux服务器编译发布 在linux上创建一个文件夹 NetCoreProgram 然后将我们打包好的项目拷贝至文件夹中 使用linux命令rz(会弹出一个上传窗口 -d aspnetcore 查看容器是否生成成功: docker ps 接下来我们使用curl命令来访问程序: curl localhost:8805 OK,访问正常,到此我们的项目就部署完成啦
本博客介绍腾讯云服务器的Centos6系统部署JavaEE项目 安装Tomcat6 yum -y install tomcat6 tomcat6-webapps tomcat6-admin-webapps tomcat6-docs-webapp tomcat6-javadoc 安装Mysql,安装过程会有设置密码的提示,注意记住密码 yum -y install mysql mysql-server mysql-connector-odbc mysql-devel libdbi-dbd-mysql 设置Mysql、Tomcat6开机启动 chkconfig mysqld on chkconfig tomcat6 on 重启mysql和tomcat6 /etc/init.d/mysql restart /etc/init.d/tomcat6 restart 检验: 输入http://ip:8080
以下是 Qt 开发麒麟 Linux 桌面应用程序的详细流程:1.准备开发环境麒麟 Linux 系统: 确保你有一台安装了麒麟 Linux(例如 Ubuntu Kylin 或 Kylin OS)的机器。 麒麟 Linux 的仓库中通常会有 Qt5 或 Qt6 的默认版本。 部署工具:linuxdeployqt: 这是 Qt 官方推荐的 Linux 部署工具。它可以自动收集你的应用程序所需的所有 Qt 依赖库,并将它们打包到一个可分发的目录或 AppImage 文件中。 ARM 架构: 麒麟 Linux 广泛应用于国产化硬件,其中许多是基于 ARM 架构的。在编译和部署时,请确保你使用的 Qt 版本和编译器是针对目标 ARM 架构的。 通过遵循上述步骤,你可以在麒麟 Linux 系统上高效地开发和部署功能丰富且与系统深度集成的 Qt 桌面应用程序。