首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏DBA随笔

    Redis开发与学习笔记---(2)

    :6379> incr counter (integer) 1 第3个窗口输入: 127.0.0.1:6379> incr counter (integer) 2 因为在redis中是单线程来处理命令的 2、非阻塞I/O,redis使用epoll作为I/O多路复用技术的实现,再加上Redis自身的时间处理模型将epoll中的连接、读写、关闭都转换为时间,不在网络I/O上浪费过多的时间。 redis的查询模型分为4步: 1、发送命令 2、排队 3、执行命令 4、返回结果 redis的慢查询只统计步骤3的时间。 慢查询的2个配置参数 对于慢查询,redis配置了2个关键参数,其中第一个是慢查询的阈值:slowlog-log-slower-than和slowlog-max-len配置来解决这两个问题。 在redis中,有2种修改参数的方法,第一种是修改配置文件,另一种是使用config set命令动态修改,如果要将redis的配置持久化到本地的配置文件,则需要执行config rewrite的命令。

    50620发布于 2020-03-31
  • 来自专栏日常工作总结

    Redis总结

    绝对路径/start.sh 【常用命令】 查看redis运行日志 cat . /logs/redis.log 查看redis当前pid cat ./pidfile/redis.pid 关闭redis kill -9 redis的pid 启动redis . /start.sh 连接redis . 设置内存分配策略 /proc/sys/vm/overcommit_memory 可选值:0、1、22, 表示内核允许分配超过所有物理内存和交换空间总和的内存 注意:redis在dump数据的时候,会fork出一个子进程,理论上child进程所占用的内存和parent是一样的,比如parent占用的内存为

    1.3K40发布于 2018-07-25
  • 来自专栏kafka专栏

    2.【kafka】ConfigCommand脚本(2)

    文章目录 ConfigCommand 1 查询配置 Topic配置查询 其他配置/clients/users/brokers/broker-loggers 的查询 查询kafka版本信息 2 增删改 默认配置 附件 More 日常 、问题排查 怎么能够少了滴滴开源的 滴滴开源LogiKM一站式Kafka监控与管控平台 ConfigCommand Config相关操作; 动态配置可以覆盖默认的静态配置 sh bin/kafka-configs.sh --describe --bootstrap-server xxxx:9092 --version 所有可配置的动态配置 请看最后面的 附件 部分 2 增删改 配置 --alter –alter 删除配置: --delete-config k1=v1,k2=v2 添加/修改配置: --add-config k1,k2 选择类型: --entity-type value 示例 consumer_byte_rate producer_byte_rate request_percentage More Kafka专栏持续更新中…(源码、原理、实战、

    1.7K30发布于 2021-08-03
  • 来自专栏叨叨软件测试

    Redis 日常脚本

    需求背景 生产 Redis 日常需要。 前提 添加 Redis 可执行命令到系统环境变量中。 日常脚本 8Copyright Copyright (c) jiangliheng 9License GNU General Public License 概要 redis-tools.sh 日常脚本 13# Copyright Copyright (c) jiangliheng 14# License GNU General Public 日常脚本 23#% 24#%概要(SYNOPSIS) 25#% sh ${SCRIPT_NAME} [option] <value> ... 26#% 27#%描述(DESCRIPTION ) 28#% Redis 日常脚本 29#% 30#%选项(OPTIONS) 31#% -h<value>, --host=<value> Redis

    1.5K20发布于 2020-05-07
  • 来自专栏Kubernetes 与 Devops 干货分享

    Redis及优化

    Redis 安装 1、下载Redis二进制文件 wget https://download.redis.io/releases/redis-5.0.14.tar.gz 2、解压 3、编译 4、安装 5、启动 # 配置开机启动 [Unit] Description=Redis After=network.target [Service] User=admin Type=forking ExecStart =/usr/local/redis/bin/redis-server /home/admin/redis/etc/redis.conf ExecStop=/usr/lcoal/redis/bin/redis-cli -h 127.0.0.1 -p 6379 shutdown [Install] WantedBy=multi-user.target # 启动 systemctl enable redis-server systemctl start redis-server

    56320编辑于 2022-10-31
  • 来自专栏kafka专栏

    2.【kafka】ConfigCommand脚本

    配置查询 其他配置/clients/users/brokers/broker-loggers 的查询 broker-loggers 查询指定Broker的Logger相关配置 查询kafka版本信息 2 默认配置 附件 More 日常 、问题排查 怎么能够少了滴滴开源的 滴滴开源LogiKM一站式Kafka监控与管控平台 ConfigCommand Config相关操作; 动态配置可以覆盖默认的静态配置 sh bin/kafka-configs.sh --describe --bootstrap-server xxxx:9092 --version 所有可配置的动态配置 请看最后面的 附件 部分 2 增删改 配置 --alter –alter 删除配置: --delete-config k1=v1,k2=v2 添加/修改配置: --add-config k1,k2 选择类型: --entity-type

    3.2K10编辑于 2022-04-13
  • 来自专栏DBA随笔

    Redis之swap空间

    Redis之swap空间 swap空间对于操作系统来说比较重要,当我们使用操作系统的时候,如果系统内存不足,常常会将一部分内存数据页进行swap操作,以解决临时的内存困境。 下面以一个Redis实例进行说明: [root@VM-0-14-centos ~]# ps -ef|grep redis root 1711 1 0 Jul20 ? 00:20:15 src/redis-server 127.0.0.1:21243 root 2370 1 0 Jul20 ? =auto redis root 14804 1 0 Jul20 ? 00:20:39 redis-server *:6379 我们以14804这个redis进程为例 [root@VM-0-14-centos ~]# cat /proc/14804/smaps | grep

    2.2K10发布于 2020-08-18
  • 来自专栏网站漏洞修补

    LinuxRedis安全

    说说IT维那些事,服务器如果不注意安全的话,就有可能会被入侵,特别是安装了redis的Linux服务器,如果安全防范没做好的话,更有可能会被入侵,被入侵以后会有很多种危害,那么我总结了有以下几种危害, 第四,严重影响公司的形象,你想服务器都被入侵了,那么公司的形象是不是会受到影响,下面我总结了一些防御的方法,修改redis配置文件的一些参数,比如说我的redis的配置文件里面有一些比较重要的参数,这里和大家一起探讨一下 比如说这个参数protected-mode yes就是打开保护模式,如果把这个参数关闭了以后,外部的网络就可以直接访问redis,非常的危险,那么我们要做的就是把这个保护模式打开,并且为redis添加密码验证 下面这条参数内on come on de,flew Shaw他的意思是删除,redis是中所有数据库中的所有数据,并且该命令是原子性的,不会被终止执行,一旦执行将不会执行失败,非常的危险。 第四个防火墙的防护设置只允许特定的IP来连接redis服务的6379端口,比如你设定只有192.168.8.100这台机器才能够连接redis的6379端口,或者你改了端口以后的7379端口,那么其他不在白名单里面的机器

    9.6K10编辑于 2022-03-01
  • 来自专栏JMCui

    Redis学习四(指南).

    affinity list: 0-3 pid 15361's new affinity list: 3 二、常见操作 服务功能 启动 redisredis-server redis.conf $(date +%Y%m%d%H%M).rdb 执行 lua 脚本:redis-cli --eval myscript.lua key1 key2 , arg1 arg2 arg3 发送原始的 redis --pipe 服务性能 查看连接的客户端:client list 探测服务是否可用(返回 pong 说明正常):ping 探测服务延迟,千兆网卡一般延迟在 0.16ms 左右: [root@localhost : # 得到慢查询列表,默认保留 128 条(slowlog-max-len 参数) 127.0.0.1:6379> slowlog get 10 1) 1) (integer) 1 # 查询ID 2) ) 0 2) (integer) 1569327858 3) (integer) 391725 4) 1) "GET" 2) "YUNGU_REDIS_ADMIN_ACCESS_TOKEN

    69340发布于 2019-10-28
  • 来自专栏悦专栏

    Redis 实战 第09期:Redis 规范

    这是专栏《Redis 实战》的最后一篇,感谢您的阅读。也感谢 9 篇文章的审稿人:无为,提出了多个修改建议,让文章内容更全面。 2 命令规范 2.1 禁止使用的命令 keys flushall flushdb 等等。 专栏《Redis 实战》系列文章推荐 Redis 实战 第01期:Redis 复制 Redis 实战 第02期:Redis Cluster Redis 实战 第03期:Codis Redis 实战 第04期:AOF 持久化 Redis 实战 第05期:RDB 持久化 Redis 实战 第06期:Bigkey Redis 实战 第07期:Hotkey Redis 实战 第 08期:监控 Redis 实战 第09期:Redis 规范

    1K40编辑于 2022-04-25
  • 来自专栏悦专栏

    Redis 实战 第01期:Redis 复制

    从这篇文章开始,将出几期 Redis 实战相关的内容,大致包括:Redis 主从、Redis 集群、持久化、大 key、热 key、Redis 监控以及 Redis 规范等。 首先来看 Redis 复制的配置: 1 配置 Redis 主从复制 1.1 配置复制 Redis 安装可以参考官方文档(https://redis.io/download),配置 Redis 主从复制的方法如下 (本节内容的 Redis 版本为 6.0): 直接登录 Redis 之后,在从节点执行如下命令: replicaof {masterHost} {masterPort} 拓展: Redis 5.0 之前配置复制是使用 2 复制原理 第一次建立复制过程大致原理如下: 保存主节点信息:执行 replicaof 后从节点只保存主节点的地址信息便直接返回 主从建立连接:从节点内部通过每秒运行的定时任务维护复制相关逻辑,当定时任务发现存在新的主节点后 在笔者几年的 Redis 工作中,多多少少会遇到一些与复制相关的问题。这里就选几个比较典型的来跟各位朋友分享,也方便你们在后续工作中绕过这些坑。

    46030编辑于 2022-04-25
  • 来自专栏悦专栏

    Redis 实战 第02期:Redis Cluster

    直到 Redis 3.0,官方推出了 Redis Cluster,实现了切片集群方案。今天就来聊聊 Redis Cluster。 2 集群搭建 2.1 安装 Redis 安装 6 个 Redis 实例(本节的版本为:5.0.7,6 个实例在同一台 Centos7 上部署的,端口分配是:7001 到 7006),Redis 安装可以参考官方文档 :7005 127.0.0.1:7006 --cluster-replicas 1 这里的 --cluster-replicas 1 表示每个主节点都分配一个从节点,如果为 2,则表示每个主节点分配两个从节点 这里就来聊聊 Redis Cluster 的迁移原理: 比如需要将 masterA 节点中编号为 1、2、3 的 slot 迁移到 masterB 节点上,在slot 迁移的中间状态,slot 1、2、 与 Redis 单机版相比,存在一些限制,我们在运或者开发过程,应该提前了解的,这里就总结几点限制: key 批量操作支持有限。

    64350编辑于 2022-04-25
  • 来自专栏DBA随笔

    Redis开发与学习笔记

    // Redis开发与学习笔记---(17) // Redis Sentinel实现原理---(一) 前面的文章讲述了redis sentinel可以实现对redis master的可用性监控和故障转移 三个定时监控任务 Redis Sentinel通过三个定时监控任务完成对各个节点的发现和监控。 b、当有新的从节点加入时,都可以立刻感应出来 c、节点不可达或者故障转移之后,可以通过info命令实时更新节点的拓扑信息 任务二: 每隔2s,每隔sentinel节点会向redis数据节点的__sentinel

    67020发布于 2020-04-27
  • 来自专栏对线JAVA面试

    面试系列之-Redis工具

    监控 Redis-exporter就是用来监控Redis的,它将INFO命令监控到的运行状态和各种统计信息提供给Prometheus,从而进行可视化展示和报警设置;除了获取Redis实例的运行状态,Redis-exporter 命令行选项,让Redis-exporter运行这个特定的脚本,从而可以满足业务层的多样化监控需求; 数据迁移工具 Redis-shake redis-shake的基本运行原理,是先启动Redis-shake 接着,源实例会再把增量命令发送给Redis-shake,Redis-shake负责把这些增量命令再同步给目的实例; 数据对比Redis-full-check redis-full-check的工作原理很简单 的值设置为想要比对的轮数,等到所有轮数都比对完成后,数据库中记录的数据就是源实例和目的实例最终的差异结果了; 集群管理工具 CacheCloud 针对常见的集群需求,CacheCloud提供了5个操作 当然,作为管理平台,CacheCloud除了提供操作以外,还提供了丰富的监控信息,CacheCloud不仅会收集INFO命令提供的实例实时运行状态信息,进行可视化展示,而且还会把实例运行状态信息保存下来

    38221编辑于 2023-08-21
  • 来自专栏开发运维工程师

    分享|安全之iptables防火墙(2

    2 安装与使用2.1 安装iptables环境在Linux操作系统中,可以使用yum管理来安装,也可以从官网下载后上传到服务器手动安装。 3.1 查看iptables已设置的规则查看已设置规则列表:iptables -L[root@otn2 ~]# iptables -LChain INPUT (policy ACCEPT)target policy ACCEPT)target prot opt source destination查看已设置规则详细列表:iptables -L -vn[root@otn2 190.168.1.200$ iptables -I INPUT -p icmp --icmp-type 8 -s 192.168.1.10 -j ACCEPT$ iptables -I INPUT 2

    1.2K30编辑于 2023-11-20
  • 来自专栏转行程序员

    Redis探险 -《Redis开发与》笔记,精华分享。

    最近看完了《Redis开发与》分享给大家。 全面讲解Redis基本功能及其应用,并结合线上开发与监控中的实际使用案例,深入分析并总结了实际开发运中遇到的“陷阱”,以及背后的原因, 包含大规模集群开发与管理的场景、应用案例与开发技巧,为高效开发运提供了大量实际经验和建议 Redis监控云平台CacheCloud。 另外还可以用 Sorted Sets 来做带权重的队列,比如普通消息的 score 为1,重要消息的 score 为2,然后工作线程可以选择按 score 的倒序来获取工作任务。 redis提供了订阅发布和阻塞队列功能,虽然和专业的消息队列软件比不够强大,但是可以满足一般的消息队列需求 Pipeline概念 edis客户端执行一条命令分为如下四个过程:1)发送命令2)命令排队3)

    82930发布于 2019-08-29
  • 来自专栏大数据在线

    拯救人!智能如何实现1+1>2

    数据量庞大且类型丰富,复杂的多云环境,繁多的监控工具,超级多的无效事件,让该集团工作挑战巨大,人员日常工作中如坐针毡,“惶惶不可终日”。 类似情况在其他企业比比皆是。 同为打工人,人不该被这样对待。如何改变这种局面?近年来,智能异军突起,成为解救企业和人员的及时雨。 Gartner就预测设备和应用程序所产生的数据量正以每年2-3倍的速度增长,且数据类型多样。 “传统是建立在CMDB的基础之上,CMDB自身的限制性、时效性、可维护性、复杂性等决定了其无法给人员呈现不同工具之间的监控关系。”爱数技术专家透露道。 2 如何让智能1+1>2 爱数与听云在智能领域开启了新模式。今年1月份,双方携手正式推出了智能整合方案,旨在帮助客户全面管理、深度洞察海量、多源、异构的机器数据。

    93820发布于 2021-01-26
  • 来自专栏DBA随笔

    Redis开发与学习笔记---(13)

    // Redis开发与学习笔记---(13) // 如何高效利用Redis内存 我们知道redis的数据都保存在内存中,如何高效利用内存变得尤为重要。 2、需要设置sysctl vm.overcommit_memory=1允许内核可以分配所有的物理内存,防止Redis进程执行fork时因内存剩余不足而失败。 2、我们可以通过config set maxmemory进行动态修改内存参数,当单机多实例上内存满载的时候,一个redis实例增加了maxmemory,另一个redis实例要对应减少maxmemory 常见的回收策略分为两种: 1、删除到达过期时间的键对象,可以通过redis自身的键过期时间或者定时任务巡检来进行删除。 2、内存使用达到maxmemory的时候,触发内存溢出的控制策略。 2、对于要收缩redis内存的场景,可以通过调小maxmemory来快速回收。但是在该过程中,可能会导致数据丢失和短暂的阻塞问题。

    65220发布于 2020-04-27
  • 来自专栏DBA随笔

    Redis开发与学习笔记---(3)

    Redis-cli详解 Redis提供了redis-cli、redis-server、redis-benchmart等shell工具,今天对这些工具做下介绍。 -r选项一起使用,下面每隔1s执行一次ping命令: [root@VM_48_10_centos ~]# redis-cli -r 3 -i 2 ping PONG PONG PONG 其中,单位为秒 的重要统计信息,虽然info命令中的统计信息更全,但是能够实时看到一些增量数据,对于redis还是有一定帮助。 详解 redis-server是用来启动redis服务的,常用的启动方式有下面几种: 1、直接启动:redis-server即可 2、增加配置参数: redis-server --configkey1 例如: redis-server --port 6380 3、配置文件启动 redis-server /dir/redis.conf 除了启动redis之外,还有一个选项--test-memory,

    53420发布于 2020-03-31
  • 来自专栏wayn的程序开发

    Redis有哪些好用的工具

    工作中使用 Redis 时,如果大家公司没有专业,可能我们开发就会面临的工作,包括 Redis 的运行状态监控,数据迁移,主从集群、切片集群的部署和等等。 本文我就从这三个方面,给大家介绍一些工具,帮助大家更好的管理 Redis。 好了,最后,我再向你介绍一个用于 Redis 集群管理的工具 CacheCloud。 当然,作为管理平台,CacheCloud 除了提供操作以外,还提供了丰富的监控信息。 这样一来,当 Redis 运行发生问题时,人员可以查询保存的历史记录,并结合当时的运行状态信息进行分析。

    92410编辑于 2024-02-06
领券