- 综合排序
- 最热优先
- 最新优先
- 来自专栏技术杂记
日志服务器（3）
===================================================================================== Install 3 rpm | 1.1 MB 00:00 (2/3) x86_64.rpm | 2.2 MB 00:01 (3/ el6_7.1.x86_64 3/ 3/3 Installed: php.x86_64 0:5.3.3-46.el6_7.1
90220发布于 2021-10-19 - 来自专栏机器学习/数据可视化
日志服务
日志是日志服务中处理的最小数据单元 日志组LogGroup 日志组是一组日志的集合，写入与读取的基本单位 日志主题Topic 日志库内的日志可以通过日志主题来进行划分。 它管理者用户的所有日志库LogStore，采集日志的机器配置等信息，同时也是用户访问日志服务资源的入口。 日志库LogStore 日志库是日志服务中日志数据的收集、存储和查询单元。 每个区间范围不会被覆盖 日志服务 定义 日志服务Log Service，简称SLS，是针对日志类数据的一站式服务。 、支持增加前端机 高吞吐、低延时：纯异步处理，内部采用专门针对日志的LS4压缩 后端服务器 后端采用的是分布式进程，部署在多个机器上面，特点如下： 数据安全性高：每条日志数据保存3份；发生宕机、磁盘损坏等情况 产品应用场景 数据采集与消费 通过日志服务的 日志中枢（LogHub）功能，大规模低成本接入各种实时日志数据 ?
2.5K20发布于 2021-03-01 - 来自专栏日志服务CLS
【日志服务CLS】快速采集Linux日志到日志服务CLS
什么是日志服务CLS? 日志服务（Cloud Log Service，CLS）提供一站式的日志数据解决方案。 日志服务提供了多种采集方式： API方式采集：通过调用日志服务API上传结构化日志至日志服务 SDK方式采集：通过SKD的方式采集日志 LogListener 客户端采集：通过部署安装部署 LogListener ，可以方便快速地接入日志服务，无需修改应用程序运行逻辑，是一种对应用服务无侵入式的采集方式。 本文【快速采集Linux日志到日志服务CLS】将通过LogListener客户端采集Linux的日志。 /loglistener.sh install 出现以下提示即代表安装成功 image.png 3.LogListener采集配置 到腾讯云日志服务CLS控制台首页，点击Linux/Unix文本日志
73.3K21发布于 2021-05-16 - 来自专栏日志服务CLS
【日志服务CLS】Nginx 访问日志接入腾讯云日志服务
0x01.产品简介 日志服务CLS： 稳定、可靠、便捷、易用的一站式日志服务平台，轻松管理海量日志数据，助力企业数字化升级 日志服务（Cloud Log Service，CLS）是腾讯云提供的一站式日志服务平台 ，提供了从日志采集、日志存储到日志检索，图表分析、监控告警、日志投递等多项服务，协助用户通过日志来解决业务运维、服务监控、日志审计等场景问题。 对于部分云产品已经接入了可以直接在对应的云产品出打开开关，其他云产品比如内网的云主机可以使用LogListener采集端，至于最后保本也提供有API的采集方式 0x02.日志接入 首先在控制台开通日志服务 4096 Jan 11 2020 libiconv drwxr-xr-x 8 root root 4096 May 6 21:38 loglistener-2.5.6 drwxr-xr-x 3 参照【日志服务CLS】配置使用 Nginx 访问日志中的原始时间戳，可解决上述问题
7.2K20发布于 2021-05-06 - 来自专栏日志服务CLS
【日志服务CLS】腾讯云日志服务CLS尝鲜
通过页面介绍，我们可以知道，日志服务（CLS）是腾讯云提供的一站式日志服务平台，提供了从日志采集、日志存储到日志检索，图表分析、监控告警、日志投递等多项服务，协助用户通过运营日志来解决业务运维、服务监控 稳定可靠 腾讯云 CLS 采用高可用的分布式架构设计，对日志数据进行了多冗余备份存储，防止单节点服务宕机数据不可用，提供达99.9%的服务可用性，为日志数据提供稳定可靠的服务保障。 3. 3. 进入服务主面板 点击上图3中的“立即使用”按钮，进入使用界面，如下图所示： ? 在日志服务概览页面，我们可以看到日志服务为我们提供了概览数据、资源统计、流量统计、存储量统计四个统计页面。 在创建机器组的过程中，我们可以设定机器组名称，配置机器组的IP地址段，日志服务是默认打开的，但是日志模块自动升级是可以动态配置的。 需要注意的是机器组不支持windows系统的机器。 3.
8.2K32发布于 2021-05-16 - 来自专栏linux运维
服务日志问题：服务日志文件过大或丢失
检查日志文件大小首先，检查日志文件的大小，确认是否过大。 log/<service_name>.logsudo tar -czvf /var/log/<service_name>.log.tar.gz /var/log/<service_name>.log3. 清空日志文件如果需要清空日志文件，可以使用以下命令。sudo truncate -s 0 /var/log/<service_name>.log4. 配置日志轮转配置日志轮转，防止日志文件过大。 检查日志文件生成确保服务正在生成日志文件。 检查日志文件配置确保服务的配置文件中正确配置了日志文件路径。
83810编辑于 2025-02-05 - 来自专栏日志服务CLS
【日志服务CLS】日志服务CLS日常操作体验
一、日志服务概述 日志服务为用户提供云服务日志采集、搜索、转储、监控、告警等功能，同时支持通过图表的方式进行图表转化，给用户提供云服务日志采集、API上传、日志搜索、日志分析的功能，用户无需开发，即可完成数据采集处理等 二、操作体验 1、界面操作提供日志整体概览功能，在此页面可快速查看读写流量、索引流量以及存储量，同时支持查看资源统计、流量统计、存储量统计等数据信息，用户通过概览页面可快速查看到日志服务的使用量等信息； 2、支持快速接入服务的日志信息，可减少用户在多个页面的操作，界面更友好； 3、日志对接支持采用客户端loglistener的方式进行日志采集，安装方式比较便捷，安装后可实时采集日志信息，使用比较好的功能点就是在界面上可根据日志格式等信息进行自动分离 SQL进行日志的聚合查询、支持设置日志的保存时间等； 7、支持下载日志进行分析； 8、同时支持对日志的关键字进行统计，在设定的时间内达到指定次数可出发告警通知，可实时掌握服务的运行状况，同时支持采用多个告警规则组合设置触发条件的方式设置告警 9、支持多种接入方式以及兼容多种日志格式，让服务对接变的更加容易； 10、支持将日志投递到对象存储中，可将日志长期进行保存，并源数据和对象存储中的数据异地存储，可提高可靠性，在源数据异常情况下，可通过对象存储的数据进行恢复查看
3.3K217发布于 2021-05-19 - 来自专栏python3
MySQL(3)——日志
会包含sock文件找不到、MySQL未初始化 还比如会反解0.0.0.0到本地失败的信息 2、服务器运行过程中的错误信息 3、时间调度器运行一个时间时产生的信息 4、在从服务器上启动从服务器进程时产生的信息。 事务日志能够容纳一段时间内的事务即可，文件越大，并发性越好，但服务器宕机恢复时间越长。 事务日志有2个或多个，写完一个再写另一个。 innodb_mirrored_log_groups 1 在服务器级别对事务日志做镜像，防止单个磁盘坏掉影响业务。 滚动二进制日志： 造成二进制文件的滚动的原因有很多，比如重启mysql服务器等，但也可以手动滚动。
79610发布于 2020-01-09 - 来自专栏日志服务CLS
【日志服务CLS】腾讯云CLS日志服务初体验
导读 日志服务（Cloud Log Service，CLS）是腾讯云提供的一站式日志服务平台，提供了从日志采集、日志存储到日志检索分析、实时消费、日志投递等多项服务，协助用户通过日志来解决业务运营、安全监控 本文就来分享一下关于使用CLS日志服务的初体验。 概念 日志服务中枢：腾讯云日志服务CLS，日志服务负责对日志的存储、过滤、推送等任务，推送和过滤操作都是由控制台操作。 [::]:80 default_server; //把配置文件的第七行注释 3、启动Nginx服务 nginx 二、Nginx服务器上安装部署Agent采集服务 1、下载LogListener main.qcloudimg.com/raw/ee52812a5bf211d08f7ed1a4c894a747/loglistener.2.2.0.tar.gz 2、安装上传文件的工具 yum install lrzsz -y 3、 009.jpeg 3、进行日志检索 检索分析语法匹配规则，根据实际情况来进行设置，具体配置索引给则请查看腾讯云日志服务的文档详解，这里不再介绍。
3K71发布于 2021-05-17 - 来自专栏痴者工良
浅入 ABP系列(3)：增加日志组件、依赖注入服务
由于 AbpBase.Application 模块是服务提供模块，也是要使用到日志功能的，所以我们需要在 AbpBase.Application 中，用 Nuget 添加 两个包： Serilog.AspNetCore 日志往往要分级、按日期记录等，因此我们这里配置一个简单的分级日志配置。 ，我们将日志分成 Error.txt、Fatal.txt、logs.txt 三个等级，还设置按日期新建日志文件，并且每个日志文件最大为 8 MB。 依赖注入 如果你需要使用日志服务，则可以引用 using Serilog;， 然后使用以下格式使用注入服务： private readonly ILogger _ILogger; _ILogger = logger; } 完成后，源码可以参考 https://github.com/whuanle/AbpBaseStruct/tree/master/src/3/
1.4K40发布于 2021-04-26 3-3日志
using Microsoft.Extensions.Logging; ServiceCollection services = new ServiceCollection(); //向容器中增加注册日志服务 2、logger节点的minlevel属性和maxlevel属性，表示这个logger接受日志的最低级别和最高级别。 3、日志输出时，会从上往下匹配rules节点下所有的logger，若发现当前日志的分类名符合这个logger的name的通配符，就会把日志输出给这个logger。 services.AddLogging(logBuilder => { logBuilder.AddNLog(); }); 知识点： archiveAboveSize为“单个日志文件超过多少字节就把日志存档 指定数量个数的存档文件，旧的会被删掉；当然也可以不设置maxArchiveFiles参数，而设置maxArchiveDays参数，这样可以设定保存若干天的日志存档。
8600编辑于 2026-06-17- 来自专栏全栈程序员必看
rsyslog日志服务器_php日志系统
的缘由： 1.防止系统崩溃无法获取系统日志分享崩溃原因，用rsyslog可以把日志传输到远程的日志服务器上 2.使用rsyslog日志可以减轻系统压力，因为使用rsyslog可以有效减轻系统的磁盘IO 3.rsyslog使用tcp传输非常可靠，可以对日志进行过滤，提取出有效的日志,rsyslog是轻量级的日志软件，在大量日志写的情况下，系统负载基本上在0.1以下 安装与使用 源码安装： 一、 #启动服务 1. #产生服务文件 2. chmod +x /etc/init.d/rsyslog 3. #指定日志文件的拥有者 2. $FileOwner apache 3. #使用tcp方式 4. /sdns/log/目录里是否有日志产生 Yum安装 服务端：192.168.12.98 Centos6.2 客户端：192.168.12.57 Centos5.5 服务端安装
6.2K20编辑于 2022-09-21 - 来自专栏k8s_istio
云函数实践(含代码)：将日志服务的日志投递到自建 Kafka 的 3 个步骤
上文提到 将K8S日志采集到日志服务，这次介绍将采集的日志投递到自建 Kafka 中，用于 Spark 计算。 核心流程 容器日志 -> 日志服务 -> 使用函数处理，将日志投递至自建 Kafka 本文介绍如何创建云函数，将日志投递至 Kafka 中。 1. 不知道是因为我的日志服务原始数据设置的是 JSON 格式，还是当前 CLS 数据转存到 Ckafka 模板过时了 [SCF 函数代码] 有 3 处代码修改，详见注释，完整代码如下： #! 为日志服务的日志主题设置函数处理 在日志服务的 日志主题 页面找到需要投递消息的主题，在 函数处理 TAB 中 选择刚创建的函数即可。 [为日志主题设置函数处理] 函数处理创建成功。 日志服务的函数处理介绍 2 K8S. 将日志服务的日志投递到自建 Kafka 的 3 个步骤
1.4K60发布于 2021-04-18 - 来自专栏日志服务CLS
【日志服务CLS】容器服务TKE审计日志运维场景体验
作者：v神 导语：云原生日志服务（Cloud Log Service，CLS）是腾讯云提供的一站式日志数据解决平台，提供了从日志采集、日志存储到日志检索，图表分析、监控告警、日志投递等多项服务，协助用户通过日志来解决业务运维 、服务监控、日志审计等场景问题。 审计日志字段说明 每一条审计日志都是一个JSON格式的结构化记录，包括元数据（metadata）、请求内容（requestObject）和响应内容（responseObject）3个部分。 场景3：集群节点被封锁了，是谁在什么时候操作的？ 在【审计检索】页面中，单击【节点操作概览】标签，填写被封锁的节点名。 CLS公众号.jpg 往期文章： 【日志服务CLS】Nginx日志数据全方位大解析 对象存储COS访问日志场景体验 【日志服务CLS】腾讯云日志服务CLS接入内容分发网络CDN 【日志服务CLS】应用TKE
2.1K20编辑于 2021-12-03 - 来自专栏Go编程点滴
Go语言微服务框架 - 3.日志库的选型与引入
|-- idl 对应idl文件夹 |-- demo 对应idl/demo服务 |-- demo.go server中对demo这个服务的接口实现 |-- server.go 3.关于日志参数的解析 日志参数常见的方式分2种，一个是来自flag的解析，另一个是来自配置文件。 随着我们功能的拓展，日志库肯定会支持越来越复杂的场景。 那这个时候用flag解析的扩展性就会很差，所以，我更推荐在微服务的框架中，用配置文件的方式去加载日志的相关配置。 但在实际的工程中，日志模块还需要实现两个比较大的功能： 支持Go程序Panic/Error Wrapping风格的多行打印与采集 支持分布式TraceId的打印，用来排查微服务调用链路 这两块的内容会结合具体的相关相关技术
4.2K10发布于 2021-09-24 - 来自专栏FreeBuf
SOC日志收集实践：企业邮件服务日志收集
然后把对应运营商线路的请求负载到3台不同的邮件代服务器上，三台机器，其中一两台服务器挂掉，也不会影响邮件代理的整体运作服务。 第6层.邮件：经过前面阶段的处理才能到真实地的邮件，其实还有更深的一层交互没有在图上画出来就是附件服务器，正常的邮件服务，还会配置2或是3台邮件附件服务。 3. IMAP邮件协议日志。4.POP3邮件协议日志。5.管理员审计日志。 3.Kafka队列： 当数据量特别大的时候，用队列缓存数据（Queue），上图的Kafka，其实是为Clickhouse写入数据服务的，我们用Graylog把日志数据推到Kafka上，相当于把到Graylog 对于企业邮箱的日志服务来说 ，最重要的白名单管理，其实是在nginx中，对特定用户设备的限制管理，这个和本文无关，不表。 3.威胁检查：核心威胁分析策略模块（略）。
2.4K00发布于 2018-07-30 - 来自专栏日志服务CLS
【日志服务CLS】Nginx 访问日志检索、分析示例
0x01.前言 看到小编鼓励作者写连载，趁着截稿日期延长并且还有Apple Watch大奖的诱惑就又有动力再肝一篇出来了 2333…… 0x02.再看日志检索 想要检索自然需要提前知道都有哪些字段，这里针对所有的键依次进行说明 字段名称 字段含义 1 remote_addr 客户端 IP 地址 2 remote_user 客户端名称 3 time_local 服务器本地时间 4 request_method HTTP 请求方法 body_bytes_sent 发送给客户端的字节数 8 http_referer 访问来源的页面链接地址 9 http_user_agent 客户端浏览器信息 10 http_x_forwarded_for 当前端有代理服务器时 键值大小搜索 举个例子，状态码大于 400 status :>400 image.png 相似的操作符还有 :> 大于某个数值 :< 小于某个数值 :>= 大于等于某个数值 :<= 小于等于某个数值 3， 键值范围搜索 举个例子，检索4XX状态码的日志 status:[400 TO 500} image.png 4，键值模糊搜索 举个例子，检索UA中含有baidu的日志 http_user_agent :
1.3K21发布于 2021-05-22 - 来自专栏python3
Python3 日志模块
Python3 日志模块 python3 日志模块官网说明 python中日志等级从高到低依次为：CRITICAL > ERROR > WARNING > INFO > DEBUG > NOTSET /usr/bin/python3 import logging logging.info('this is the info message') logging.debug('this is the debug /usr/bin/python3 import logging logging.basicConfig(filename='test.log',level=logging.DEBUG,format='% 3) logging.handlers.RotatingFileHandler 这个Handler类似于上面的FileHandler，但是它可以管理文件大小。 2-打印同时在控制台，也有文件 3-录活控制等级 """ # logging.disable(logging.CRITICAL) # 禁止输出日志 def public_log(logger_name
1.1K20发布于 2020-01-03 - 来自专栏全栈程序员必看
Linux 日志服务器
Linux 下的rsyslog有向远程发送日志的功能，出于安全和审计需要，可以将服务器的日志集中起来管理。 日志服务器的运作机制大致是这样的： 1、客户端将日志发送到服务器，服务端的日志里于是出现了客户端的日志 2、服务端将日志导入mysql，通过php程序进行日志分析并显示在网页上。 配置基本的日志服务器 1、在服务端开启接收日志选项，编辑/etc/rsyslog.conf，取消下面两行注释： $ModLoad imtcp $InputTCPServerRun 514 这会让rsyslog 全部日志发送的话，感觉有很多垃圾，比如cron日志，可以选择性的发送一些日志 *.info;mail.none;cron.none @@192.168.1.249 注意：上面有两个@,如果服务端采用 3、重启rsyslog服务 /etc/init.d/rsyslog restart 不出意外，在服务端应该就可以看到客户端的日志了。
2.4K40编辑于 2022-07-05 - 来自专栏技术杂记
日志服务器（2）
启动httpd服务并设置开机启动 [root@h105 log]# /etc/init.d/httpd start Starting httpd: httpd: Could not reliably [ OK ] [root@h105 log]# chkconfig httpd --list httpd 0:off 1:off 2:off 3: h105 log]# chkconfig httpd on [root@h105 log]# chkconfig httpd --list httpd 0:off 1:off 2:on 3: ########## [ 25%] 2:Percona-Server-client-5########################################### [ 50%] 3:
1.5K20发布于 2021-10-19
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号