01 引子 鸽了好久了,终于又一次克服了拖延症,决心写点啥,起因也是因为最近刚好重做了系统,把win10从home版升级到了专业版,可以愉快的安装docker destop 而不需要借助 docker 将两个文件放到一个文件夹下,然后在环境变量里path一下 安装docker 不是主要矛盾,大家自行搜一下,只要确认好环境,再次强调最好升级一下win10,这样操作起来更方便一些,docker toolbox 容器端口 selector: app: datalookerserver # 标签选择器,这里的app=web正是我们刚才建立app 使用 minikube dashboard 命令,可以打开网页来对单机集群进行监控
书里面使用这个spark,我这里就配置一下(失败了。。。) 从这里下载 https://www.apache.org/dyn/closer.lua/spark/spark-3.1.2/spark-3.1.2-bin-hadoop3.2.tgz IDM真不是和你吹牛,飞快 本来不想用conda,可是看见都把我的环境占了 就用它 我有两个版本的Py conda install jupyter 先安装一下jupyter,conda里面没有 装好有这个 安装的速度有些慢 conda in
JavaRDD<String> javaRDD = javaSparkContext.textFile("hdfs://192.168.1.55:9999/wc/1.log"); //取10% sampling: " + sampleDataSize); //取指定数量的随机数据 List<String> list = javaRDD.takeSample(false, 10 System.out.println(list); //取排序好的指定数量的数据 List<String> orderList = javaRDD.takeOrdered(10
TiDB分布式关系型数据库单机安装,急速体验,只适合测试环境 简介 TiDB 是 PingCAP 公司设计的开源分布式 HTAP (Hybrid Transactional and Analytical 官网:https://pingcap.com/docs-cn/ 单机环境安装 wget http://download.pingcap.org/tidb-latest-linux-amd64.tar.gz
【给点个赞如果觉得有帮助,我会做的更好】 最近想梳理下基础知识,又回顾了下单机事务内容。大家可作为一个参考。
6701 - 6702 - 6703 启动zookeeper(已经安装) cd zookeeper vim conf/zoo.cfg tickTime=2000 initLimit=10
/bin/run-example SparkPi 10 shell启动: .
2.Centos7上安装RabbitMQ(单机) 官方文档: https://www.rabbitmq.com/install-rpm.html 2.1 安装erlang [root@linux- 10 /10 正在解决依赖关系 --> 正在检查事务 ---> 软件包 rabbitmq-server.noarch.0.3.8.9-1.el7 将被 安装 --> 正在处理依赖关系 socat,它被软件包 00:00:10 /usr/lib64/erlang/erts-11.1.2/bin/beam.smp -W w -K true -A 64 -MBas ageffcbf -MHas ageffcbf
二、部署单机kafka 1、部署kafka kafka服务依赖于JAVA环境,如果没有,自行安装 [root@kafka ~]# wget https://archive.apache.org/dist 192.168.171.134:9092 192.168.171.134:44388 ESTABLISHED 43326/java 由于kafka是通过zookeeper来调度的,所以,即使是单机
1. 下载 ES 安装包 地址:https://www.elastic.co/cn/downloads/elasticsearch(以 7.8.1 为例) 2. 解压安装包 tar -zxvf ./elasticsearch-7.8.1.tar.gz 3. 修改 Linux 系统限制配置,将文件创建数修改为65536个。 1. 修改系统中允许应用最多创建多少文件等的限制权限。Linux默认来说,一般限制应用最多创建的文件是65535个。但是ES至少需要65536的文件创建数的权限。 2. 修改系统中允许用户
数据库字符集 AL32UTF8 ORACLE SID orcl 数据文件目录 /oradata/orcl 3、ASM磁盘组规划 磁盘组名称 大小 冗余模式 OCR 5G EXTERNAL DATA 10G STATE -------------------- ---------- ---------- -------------------- ------------------- OCR 10 ora.cssd.type 0/5 0/5 ONLINE ONLINE s11g ora.diskmon ora....on.type 0/10 0/5 OFFLINE OFFLINE ora.evmd ora.evm.type 0/10 0/5 ONLINE ONLINE ora.cssd.type 0/5 0/5 ONLINE ONLINE s11g ora.diskmon ora....on.type 0/10
在打开的界面中,输入主机地址、端口等相关信息,点击连接: Linux系统中的安装启动和连接 目标:在Linux中部署一个单机的MongoDB,作为生产环境下使用。
``关闭SELinux # 临时关闭selinux setenforce 0 # 永久关闭selinux sed -i 's#SELINUX=enforcing#SELINUX=disabled#g' /etc/selinux/config 关闭防火墙 # 临时关闭防火墙: systemctl stop firewalld # 永久关闭防火墙: systemctl disable firewalld 1. 源码部署nginx 1.1 下载源码 # -c 是断点续传 wget -c http://
linux-x86_64.tar.gz https://artifacts.elastic.co/downloads/kibana/kibana-8.16.4-linux-x86_64.tar.gz 麒麟V10 http.port: 19200 # 增加内部通讯端口 transport.port: 19300 # 节点发现过程中的种子,默认为 ["127.0.0.1", "[::1]"] # 这里因为是单机
一、Oracle安装部署 1.1 单机环境 1.2 Oracle RAC环境 1.3 Oracle DataGuard环境 1.4 主机双机 1.5 客户端部署 二、Oracle版本升级 2.1 单机环境 RAC环境 参考随笔: Linux平台 Oracle 10gR2(10.2.0.5)RAC安装 Part1:准备工作 Linux平台 Oracle 10gR2(10.2.0.5)RAC安装 Part2 :clusterware安装和升级 Linux平台 Oracle 10gR2(10.2.0.5)RAC安装 Part3:db安装和升级 Linux平台 Oracle 11gR2 RAC安装Part1:准备工作 Oracle DataGuard环境 参考随笔: RHEL6.4 + Oracle 11g DG测试环境快速搭建参考 Oracle 11g DG配置简明版 RAC 主库配置单实例ADG Oracle 10gR2 参考文章: Step By Step: Upgrade 10gR2 RAC to 11gR2 RAC on Oracle Enterprise Linux 5 (32 bit) Platform. 2.3
创建启动脚本 vim /usr/lib/systemd/system/consul.service
学习大数据我们首先就要先接触Hadoop,上节介绍到Hadoop分为Hadoop-HDFS,Hadoop-YARN,Hadoop-Mapreduce组成,分别负责分布式文件存储,任务调度,计算处理,本机我们在单机模式下把 上面的单机模式,grep 例子读取的是本地数据,伪分布式读取的则是 HDFS 上的数据。 HADOOP_HOME/etc/hadoop/*.xml input 复制完成后,可以通过如下命令查看 HDFS 中的文件列表: hdfs dfs -ls input 伪分布式运行 MapReduce 作业的方式跟单机模式相同 ,区别在于伪分布式读取的是HDFS中的文件(可以将单机步骤中创建的本地 input 文件夹,输出结果 output 文件夹都删掉来验证这一点)。 但 YARN 主要是为集群提供更好的资源管理与任务调度,然而这在单机上体现不出价值,反而会使程序跑得稍慢些。因此在单机上是否开启 YARN 就看实际情况了。
安装jdk 安装kafka [root@localhost kafka_2.11-1.0.0]# wget http://mirrors.shuosc.org/apache/kafka/1.0.0/kafka_2.11-1.0.0.tgz [root@localhost kafka_2.11-1.0.0]# cd kafka_2.11-1.0.0/ #启动zookeeper [root@localhost kafka_2.11-1.0.0]# bin/zookeeper-server-start.sh -d
Kafka 单机部署区分集成Zookeeper 部署和Zookeeper + Kafka 部署俩总方式,如果是单机部署Kafka,集成Zookeeper 最简单,也可以选择Zookeeper + Kafka panfudong/soft/kafka/kafka_2.11-0.10.1.1/kafka-logs zookeeper.connect=localhost:2181 到此zookeeper 单机配置成功
无人值守安装Oracle 11GR2单机,只需要10分钟?没错,通过脚本静默安装,真的只需要10分钟,包括安装补丁,建库。 总耗时:10分钟。 ? ?