#4.request circuit breakerrequest circuit breaker可以阻⽌由于某个请求对应的⼀些数据结构造成的OOM(⽐如⼀个聚合请求可能会⽤jvm内存来做⼀些汇总计算) 或http层的请求所使⽤内存总量,这个内存的使⽤量就是请求⾃⼰本身的⻓度。 nodes=nodeId1,nodeId2&actions=cluster:* # task详情 GET /_tasks/<task_id> GET _tasks/oTUltX4IQMOUUVeiohTt8A actions=*search&detailed取消任务 POST _tasks/oTUltX4IQMOUUVeiohTt8A:12345/_cancel POST _tasks/_cancel? # 节点初始化主分⽚数 cluster.routing.allocation.node_initial_primaries_recoveries #默认4分⽚平衡配置群集的平衡仅取决于每个节点上的分⽚
当你的cpu为1核时,理想状态为小于等于1.00,同理推算其它不同核心的cpu。 ,表示有多少个进程目前出在run的状态 b,block的简写,这个进程被cpu以外的例如硬盘或网络(网速慢)堵死了,阻挡了。 (如果这个数据不变,代表正常,如果数据不停的变化,代表内存和交换分区不停的交换数据,同时,si,so也一定会不停的变化,内存不足) si,参照物为内存 in,有多少KB的数据块,在等待进入内存 so,参照物为内存 、(几千还是正常的,如果超过万就不正常了,被攻击了) txpck/s:trainsmission 发送的数据包、 rxkB/s:接收的数据量 (单位为KB) txkB/s:发送的数据量 (单位为KB install -y nload # nload //直观动态的看到网卡的流量动向(q 退出)左右方向键切换网卡 有攻击的话,一般进来的流量会很大!
需求背景 生产 Redis 日常运维需要。 前提 添加 Redis 可执行命令到系统环境变量中。 jiang_liheng@163.com 6Website https://jiangliheng.github.io/ 7Description Redis 日常运维脚本 jiang_liheng@163.com 11# Website https://jiangliheng.github.io/ 12# Description Redis 日常运维脚本 ================================================== 21#%名称(NAME) 22#% ${SCRIPT_NAME} - Redis 日常运维脚本 SYNOPSIS) 25#% sh ${SCRIPT_NAME} [option] <value> ... 26#% 27#%描述(DESCRIPTION) 28#% Redis 日常运维脚本
ens33 && ifup ens33 在日常的运维当中,有时候我们需要对一台服务器设定多个IP,此时我们需要用到虚拟网卡: #cd /etc/sysconfig/network-scripts/ : 然后再次重启一下网卡既可以看到咱们新建的虚拟网卡。 如果人不在机房,如何远程查看服务器有没有链接网线呢? [[email protected]02 ~]# vim /etc/hosts 127.0.0.1 localhost localhost.localdomain localhost4 localhost4 .localdomain4 ::1 localhost localhost.localdomain localhost6 localhost6.localdomain6 192.168.30.121 ) ---- 4.
yum install -y sysstat #iostat //直接查看磁盘的现状 #iostat 1 10 //和vmstat一样的功能 KB_read/s 读硬盘的速度 KB_wrtn/s 写硬盘的速度 #iotop (动态显示IO的状态) yum install -y iotop 安装所需的服务 最上面一栏可以看到实时动态的IO读写。 ---- 查看系统进程(ps) : #ps aux (静态的查看系统所有的进程,top是动态的) STAT部分说明: D 不能中断的进程(不经常看到的进程) R run状态的进程 S sleep ,处于等待的一个状态 LISTEN: 侦听状态 实用运维管理命令: 一次性查看所有的连接状态 (熟能生巧)### #netstat -an | awk '/^tcp/ {++sta[$NF]} END .cap是不可以直接cat查看的) 如果不晓得一个文件是什么类型的文件可以使用 file /tmp/1.cap #tcpdump -r /tmp/1.cap -r: 读取 实用运维管理命令: #yum
作者介绍:简历上没有一个精通的运维工程师。请点击上方的蓝色《运维小路》关注我,下面的思维导图也是预计更新的内容和当前进度(不定时更新)。 本小章内容就是Linux进阶部分的日常运维部分,掌握这些日常运维技巧或者方法在我们的日常运维过程中会带来很多方便。 主要从以下几个部分来讲解: Linux日常运维-主机名&hosts Linux日常运维-history(本章节) Linux日常运维-SSHD(一) Linux日常运维-SSHD(二) Linux日常运维 -ENV(一) Linux日常运维-ENV(二) Linux日常运维-任务计划 history 命令用于显示当前 Bash shell 会话的命令历史记录。 4.快速生成1000条的历史命令。
(三)文件系统检查 定期在整个文件系统上运行HDFS的fsck工具,主动查找丢失或者损坏的块。 建议每天执行一次。 for path /hbase/Feb2621_webpage/c23aa183c7cb86af27f15d4c2aee2795/s/30bee5fb620b4cd184412c69f70d24a7 at Sun Mar 01 20:39:35 CST 2015 /hbase/Feb2621_webpage/c23aa183c7cb86af27f15d4c2aee2795/s/30bee5fb620b4cd184412c69f70d24a7 /s/30bee5fb620b4cd184412c69f70d24a7' is HEALTHY 此命令的用法如下: [jediael@master ~]$ hadoop fsck -files Usage 均衡器是一个hadoop守护进程,它将块从忙碌的DN移动相对空闲的DN,同时坚持块复本放置策略,将复本分散到不同的机器、机架。 建议定期执行均衡器,如每天或者每周。
CPU的个数,得到每颗CPU的核数。 r 表示运行和等待cpu时间片的进程数 b 表示等待资源的进程数,比如等待I/O, 内存等 si 表示由交换区进入内存的数量 so 由内存进入交换区的数量 bi 从块设备读取数据的量(读磁盘) bo 从块设备写入数据的量(写磁盘) 4. linux系统里,您知道buffer和cache如何区分吗? 简单讲,buffer里的数据是将要写入到磁盘里的,而cache里的数据时从磁盘里读出来的。 cache用来缓存从磁盘中读取出来的数据,以方便数据下次被访问,提高数据的访问效率,避免频繁读取磁盘操作。 Linux自动地使用所有空闲的内存作为高速缓冲,当程序需要更多的内存时,它也会自动地减小缓冲的大小。
这个专题主要是一些日常运维中需要用到的命令,不定期更新~~ 1.查询表空间使用率 select a.tablespace_name,a.bytes/1024/ 1024 "Sum MB",(a.bytes-b.bytes 创建表空间 一般建议数据文件设置橙不自动扩展,日常运维注意时刻关注表空间使用率 2.1 数据文件自动扩展 create tablespace JGXT LOGGING DATAFILE '/orahdb 删除表空间 DROP TABLESPACE tablespace_name INCLUDING CONTENTS AND DATAFILES; 4.
作者介绍:简历上没有一个精通的运维工程师,下面的思维导图也是预计更新的内容和当前进度(不定时更新)。 中间件,我给它的定义就是为了实现某系业务功能依赖的软件,包括如下部分: Web服务器 代理服务器 ZooKeeper Kafka RabbitMQ(本章节) 到目前为止,我们的RabbitMQ的基本功能就算已经讲解完毕 ,本小节给RabbitMQ的常用命令做一个总结,当然很多命令也可以通过网页和http接口实现,具体用什么方式,就看个人习惯和技能的掌握程度。 默认交换机不会显示) rabbitmqctl list_exchanges [-p <vhost>] [name, type, durable, auto_delete] # 示例:列出默认虚拟主机的所有交换机
crontab -e 编辑任务计划 crontab -l(小写的L) 列出任务计划 crontab -r 删除 crontab -u [username] 指定某个用户 1-5 表示范围1到5 1,2,3 表示或者 */2 表示能被2整除的 要保证服务的启动状态 systemctl start crond.servive /var/spool/cron/[username] 用户的cron计划内容 --level 34 network off/on 控制network的等级3和4开关 --add [servicename] 增加一行服务,前提是在/etc/init.d/目录下有文件 --del [ service 系统服务 target 多个unit组成的组 device 硬件设备 mount 文件系统挂载点 automount 自动挂载点 path 文件或路径 scope 不是由systemd启动的外部进程 slice 进程组 snapshot systemd快照 socket 进程间通信套接字 swap swap文件 timer 定时器 systemctl list-units 列出所有正在运行的unit
目前这2个中间件都是基于JAVA语言的。 对于运维来说,一个正常的Kafka的集群,一般情况下我们是不需要去操作ZooKeeper来维护它的集群状态的。 我们对Kafka的操作,大部分都通过Kafka自带的脚本来操作它,下面我们就来介绍下使用较多的命令。(部分命令在前面的操作里面已经有演示)。 #下面都是默认自带的脚本 #根据环境和需求不一样,大部分我们都用不到,我们最常用就那么几个 [root@localhost ~]# ll /root/kafka_2.13-2.8.2/bin/ total kafka-console-consumer.sh --bootstrap-server <broker:port> --topic <topic_name> --group <group_id> 4. 常用子命令: # 查看 Topic 的配置 kafka-configs.sh --bootstrap-server <broker:port> --entity-type topics --entity-name
作者介绍:简历上没有一个精通的运维工程师。请点击上方的蓝色《运维小路》关注我,下面的思维导图也是预计更新的内容和当前进度(不定时更新)。 本小章内容就是Linux进阶部分的日常运维部分,掌握这些日常运维技巧或者方法在我们的日常运维过程中会带来很多方便。 主要从以下几个部分来讲解: Linux日常运维-主机名&hosts Linux日常运维-history Linux日常运维-SSHD(一) Linux日常运维-SSHD(二) Linux日常运维-ENV (一) Linux日常运维-ENV(二)(本章节) Linux日常运维-任务计划 前面讲了,Linux环境变量的基本概念,以及不同名字的环境变量大概意思,下面讲几个常用的环境变量的用法。 4.实际上以上那么多环境变量相关的配置文件,如果临时用,我就在命令行里面添加,要永久使用的,我都是写到/etc/profile这个文件里面。
作者介绍:简历上没有一个精通的运维工程师。请点击上方的蓝色《运维小路》关注我,下面的思维导图也是预计更新的内容和当前进度(不定时更新)。 本小章内容就是Linux进阶部分的日常运维部分,掌握这些日常运维技巧或者方法在我们的日常运维过程中会带来很多方便。 主要从以下几个部分来讲解: Linux日常运维-主机名&hosts Linux日常运维-history Linux日常运维-SSHD(一) Linux日常运维-SSHD(二)(本章节) Linux日常运维 -ENV(一) Linux日常运维-ENV(二) Linux日常运维-任务计划 上一节,我们讲了如何配置SSH免密登录服务器,这个在实际运维中,已经可以提升一定的安全性,但是22作为所有人都知道的ssh 4.ssh在Linux服务器里面一般涉及到2个操作:一个是作为sshd的服务端,也可以是ssh作为连接其他人的客户端命令。
作者介绍:简历上没有一个精通的运维工程师。请点击上方的蓝色《运维小路》关注我,下面的思维导图也是预计更新的内容和当前进度(不定时更新)。 本小章内容就是Linux进阶部分的日常运维部分,掌握这些日常运维技巧或者方法在我们的日常运维过程中会带来很多方便。 主要从以下几个部分来讲解: Linux日常运维-主机名&hosts Linux日常运维-history Linux日常运维-SSHD(一)(本章节) Linux日常运维-SSHD(二) Linux日常运维 -ENV(一) Linux日常运维-ENV(二) Linux日常运维-任务计划 我们前面讲了如何ssh登录,都是使用的密码,其实在ssh登录里面还有几个经常遇到的问题,比如我能否不使用ssh密码,而是用一种免密的方式登录 如果你不愿意用系统给你生成的,你也可以上传你自己定义好的公钥。 在实际运维中,部分软件是要求配置免密登录才能更好运行,甚至必须要免密才能运行。
作者介绍:简历上没有一个精通的运维工程师。请点击上方的蓝色《运维小路》关注我,下面的思维导图也是预计更新的内容和当前进度(不定时更新)。 本小章内容就是Linux进阶部分的日常运维部分,掌握这些日常运维技巧或者方法在我们的日常运维过程中会带来很多方便。 主要从以下几个部分来讲解: Linux日常运维-主机名&hosts Linux日常运维-history Linux日常运维-SSHD(一) Linux日常运维-SSHD(二) Linux日常运维-ENV (一)(本章节) Linux日常运维-ENV(二) Linux日常运维-任务计划 在Linux系统中,环境变量扮演着非常重要的角色,用于配置系统和应用程序的运行环境。 开头的文件或者目录就是隐藏文件,常规的ll或者ls都是看不到文件的,需要使用ls -a才可以看到。
那些年我们刷的运维日常 运维不易,且行且珍惜! 那些年,我们不仅维护了服务器。还锻炼了一副好身体(码代码的肯定打不过抗服务器的啦哈哈哈) 最后这位同学,你别着急,其实去蓝翔学个挖掘机更好哈!
# Modify related kernel parameters & Disable the swap. cat > /etc/sysctl.d/k8s.conf << EOF net.ipv4. ip_forward = 1 net.bridge.bridge-nf-call-ip6tables = 1 net.bridge.bridge-nf-call-iptables = 1 net.ipv4. - ip_vs modprobe -- ip_vs_rr modprobe -- ip_vs_wrr modprobe -- ip_vs_sh modprobe -- nf_conntrack_ipv4 import https://www.elrepo.org/RPM-GPG-KEY-elrepo.org rpm -Uvh https://www.elrepo.org/elrepo-release-7.0-4. [root@k8smaster01 ~]# kubectl config use-context ctx-dev #将当前运行环境设置为ctx-dev 注意:运如上设置,当前的运行环境被设置为开发组所需的环境
作者介绍:简历上没有一个精通的运维工程师。请点击上方的蓝色《运维小路》关注我,下面的思维导图也是预计更新的内容和当前进度(不定时更新)。 当我们有些任务需要在凌晨执行或者其他人工不方便执行的时间去执行的时候,应该怎么办呢?这里就引入了Linux一个非常重要的特性就是任务计划,它可以按照我们指定时间去执行对应的任务。 这些是设置和管理任务计划的基本步骤。可以根据具体的需求调整crontab任务的设置。 优先级说明 这五个时间单位的优先级从左到右依次降低。根据这五个时间单位的取值,可以设置不同的定时任务。 对应的规则可以直接是命令,也可以是脚本。 2.Linux任务计划是分用户的,尤其是多用户运维的服务器。 4.在前面讲文件搜索的时候,我们讲过Linux有自带的几个目录,里面放置的就是根据单词提示的执行任务。这里的任务,通过crontab -l命令都是看不到的。
回顾下上一篇中出现的问题,在使用ANTLR4来解析OGG的参数文件时,还有一个问题就是OGG的任务没有解析出来。这一篇也来说一下这个问题。 传送门 日常运维|OGG 查询 Lag Chkpt/Time Chkpt(一) 2 OGG任务采集模版文件解析错误排查 2.1-Q:解析特殊字符错误 line 38524:33 token recognition -4.7.2-runtime.jar升级到antlr4-4.9.1.jar,并在语言解析器模版增加#标识,由于原来的解析模版并没有增加这个字符的解析。 需要解析文件的行记录数量如下: 当然我们在程序的单元测试中可以这样子来增加我们的VM参数 在IDE的默认参数设置上,可以查看下自己IDEA的VM参数设定 4 JVM相关 JVM默认情况下,年轻代初始分配建议保持在整个堆大小的一半到四分之一之间 ;初始(和最小)分配内存为物理内存的1/64;最大分配的内存(内存池)为物理内存的1/4;线程堆栈大小取决于平台架构,例如32位320KB,64位1M。