首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏大猪的笔记

    检索日志

    有时需要在大量日志中查找某个关键字。可用以下命令: find . -name "86??" |xargs grep -rn "get_web not hit cache" 从日志命名为 86xx的文件中搜索它的行号和文件名。 就是这么开心。

    80240发布于 2019-11-22
  • 来自专栏无量测试之道

    大规模服务异常日志检索

    root@ bin # more check_log.sh #检查一个目录下所有指定日志文件中的报错日志脚本 #! /usr/bin/env bash #是对shell的声明 base="/home/project" #定义一个变量,用于指定扫描日志的目录 while [[ 1 ]]; do #shell skywalking|10.8.0.37:8800" | grep -C5 -E "Exception|ERROR"` # 获取catalina.out 文件中报Exception|ERROR的日志

    1.1K10编辑于 2022-07-04
  • 来自专栏日志服务CLS

    日志服务CLS】Nginx 访问日志检索、分析示例

    0x01.前言 看到小编鼓励作者写连载,趁着截稿日期延长并且还有Apple Watch大奖的诱惑就又有动力再肝一篇出来了 2333…… 0x02.再看日志检索 想要检索自然需要提前知道都有哪些字段,这里针对所有的键依次进行说明 客户端 IP 地址 2 remote_user 客户端名称 3 time_local 服务器本地时间 4 request_method HTTP 请求方法 5 request_url URL 地址 6 4XX状态码的日志 status:[400 TO 500} image.png 4,键值模糊搜索 举个例子,检索UA中含有baidu的日志 http_user_agent : *baidu* image.png 分析语句由检索条件和 SQL 语句组成,两者通过竖线(|)分割 [检索条件] | [SQL 语句] 摘自文档中最简单的两个示例 无检索条件,计算访问次数 PV 值 * | select count(* ,Nginx 访问日志分析案例 尝试第一个 SQL 分析示例,但是没有成功检索 带宽曲线图 * | select HISTOGRAM(CAST(msec*1000 AS TIMESTAMP), INTERVAL

    1.4K21发布于 2021-05-22
  • 来自专栏小明说Java

    ES Serverless让日志检索更加便捷

    在软件开发过程中,开发人员会在代码中添加日志记录,以记录程序的运行情况和异常信息。当程序出现问题时,就可以通过日志检索来定位。所以搭建一个高性能日志系统或者便捷查询的日志系统是十分重要的。 本文主要是讲解腾讯云大数据 ES Serverless,在日志检索的使用,并且通过案例说明ES Serverless如何做到开箱即用,0部署的,使得日志检索跟便携,对于ES小白也能得心应手。 Elasticsearch Service索引创建产品开通成功之后,进入首页,在左边菜单点击,日志分析在进行日志检索之前,需要先创建索引,在日志分析中,创建空索引,比如要检索商品,可以创建索引:product Elasticsearch Service日志检索上述是基本体验ES Serverless检索功能,ES Serverless也是在我们检索过程中会把日志记录收集起来,可以在ES Serverless控制台中日志分析进行查看了 全局日志检索在ES Serverless控制台中日志分析,进入索引,点击检索分析,就可以看到,刚刚在kibana检索的数据日志了条件日志检索重要,可以进行日期过滤筛选,比如筛选一年前的日志数据还能进行其他复杂条件过滤

    94910编辑于 2023-11-30
  • 来自专栏Tencent Serverless 官方专栏

    腾讯云云函数 SCF 日志检索实践

    如果我们能够从网关返回信息中拿到某个失败请求的 RequestId ,我们还可以根据 RequestId 检索指定请求的日志。 ? 这是最基础的日志检索使用方法。 高级日志如何使用 下面给大家分享一下已捕获的异常,查找函数运行时间大于 x 的请求,关键词组合检索中如何使用高级日志。 1. 高级日志里提供了运行时间检索的方法,比如我们想查找运行时间大于 150ms 的日志,我们可以在检索框输入 SCF_Duration>150,即可找出该时间范围的日志。 ? 时间范围和关键词检索可组合使用,在上述示例中会将所有日志都过滤出来。 高级日志服务提供了丰富的检索语法,我们可参考日志检索语法教程:https://cloud.tencent.com/document/product/583/40964 6 月 4 日(周四)20:00

    3.1K102发布于 2020-06-04
  • 来自专栏编程语言的世界

    tp6请求日志,tp6记录详细日志

    在tp5版本的时候日志中保存了全部的请求信息,保存了请求地址 请求方法 请求路由  请求头  请求参数,但是在tp6中官方取消了。 官方解释说由于日志记录了所有的运行错误,因此养成经常查看日志文件的习惯,可以避免和及早发现很多的错误隐患。 但是我觉得不方便我定位线上问题,于是把tp5源码中的部分移植到tp6中,tp5中大部分放在tp底层,为了不破坏tp框架我把代码放到中间件中进行继承,所有中间件全部继承此代码。自动记录请求信息。<? 生成的日志和tp5完全一样[2021-07-07T21:09:50+08:00][info] 127.0.0.1 POST learn.cn/api/v3/up_professions[ ROUTE ]

    1.5K20编辑于 2023-06-03
  • 来自专栏悠扬前奏的博客

    MyBatis-6.日志

    日志 Mybatis 的内置日志工厂提供日志功能,内置日志工厂将日志交给以下其中一种工具作代理: SLF4J Apache Commons Logging Log4j 2 Log4j JDK logging MyBatis 内置日志工厂基于运行时自省机制选择合适的日志工具。 日志配置 可以对包、映射类的全限定名、命名空间或全限定语句名开启日志功能来查看 MyBatis 的日志语句。 可以对包、映射类的全限定名、命名空间或全限定语句名开启日志功能来查看 MyBatis 的日志语句。具体方法,由使用的日志工具决定。 以下以 Log4J 为例。 为此,Mybatis 中 SQL 语句的日志级别被设为DEBUG(JDK 日志设为 FINE),结果的日志级别为 TRACE(JDK 日志设为 FINER)。

    65530发布于 2019-05-30
  • 来自专栏ffffffff0x

    安全蓝队 : windows日志检索和分析

    前言 在运维工作过程中,如若windows服务器被入侵,往往需要检索和分析相应的安全日志。 本文将介绍windows的日志类型、存放位置、检索方案以及方便检索的工具使用方法。 --- Windows日志 在windows系统的运行过程中会不断记录日志信息,根据种类可以分为事件日志、IIS日志、FTP日志,数据库日志,邮件服务日志等。 [5.png] --- 日志工具 Sysmon [6.png] Sysmon 是微软的一款轻量级的系统监控工具,最开始是由 Sysinternals 开发的,后来 Sysinternals 被微软收购, ,事件日志的类型、级别、存放位置和ID,日志检索方案以及检索工具sysmon和logparser的使用。

    4.6K21发布于 2021-01-06
  • 来自专栏腾讯技术工程官方号的专栏

    企业微信万亿级日志检索系统

    业界方案对比 公司内外有很多日志系统方案,根据是否对日志做全文检索可以分为两类: 全文检索日志系统:对日志内容切分词和建倒排,通过查询关键词的倒排取交集支持模糊匹配,这类系统一般入库资源消耗较多,也不支持日志统计 ,典型实现有:ELK、Hermes 以及腾讯云日志服务(Cloud Log Service, CLS)等系统; 部分字段检索日志系统:只对部分字段建索引,支持特定字段的快速检索,入库资源消耗较低,但是这类系统对模糊匹配未能很好支持 我们新设计的检索系统在资源消耗较小的前提下,很好满足背景所提的所有检索需求。 系统架构 企业微信日志检索系统主要分为 6 个模块: LogAgent:和业务模块同机部署,对模块内日志进行聚集,数据批量写分布式文件系统,callid 索引批量发送到 LogMergeSvr 聚集; 最终将匹配后的日志返回给 WebSvr 聚合展示给用户。 通过并发检索的优化手段,模糊查询一个模块一小时日志(12 台机器,7.95GB 日志量)耗时从 1 分钟降到 5.6 秒。

    1.8K30发布于 2021-05-21
  • 来自专栏iSharkFly

    设置 Confluence 6 日志

    Confluence 使用的是 Apache's log4j 日志服务。能够允许管理员通过编辑配置文件来控制日志的表现和日志输出文件。 在系统中有 6日志输出级别,请参考 log4j logging levels 页面来获得更多信息。 如果你请求 Atlassian Support 为你提供支持服务,我们总是会要求你能够提供你 Confluence 应用的日志输出。要获得这些日志输出的最简单的方法是进入 ?   https://www.cwiki.us/display/CONF6ZH/Working+with+Confluence+Logs

    86320发布于 2019-01-30
  • 来自专栏用户7873631的专栏

    tp6日志

    作者:陈业贵 华为云享专家 51cto(专家博主 明日之星 TOP红人) 文章目录 前言 一、日志 二、修改配置文件 1.引入库 2.在哪里看日志信息呢? ---- 前言 和大家共同完成打日志的流程: 一、日志 记录程序有没有错误。 二、修改配置文件 <? ' => env('log.channel', 'file'), // 日志记录级别 'level' => [], // 日志类型记录的通道 ['error => 'File', // 日志保存目录 'path' => '', // 单文件日志写入 'single' => false, // 独立日志级别 trace('日志信息','info');//错误信息是什么? } } 2.在哪里看日志信息呢?

    43510编辑于 2022-06-05
  • 来自专栏姚红专栏

    日志收集-Elk6

    Logstash 主要是用来日志的搜集、分析、过滤日志的工具,支持大量的数据获取方式。 ) 二:elasticSearch 2.1:主要特点   1、特点:全文检索,结构化检索,数据统计、分析,接近实时处理,分布式搜索(可部署数百台服务器),处理PB级别的数据搜索纠错,自动完成    elasticsearch-6.2.2/config/jvm.options 解决:权限不够 chmod 777 -R 当前es目录 常见配置问题资料:https://www.jianshu.com/p/c5d6ec0f35e0 2.5:ES目录和配置文件介绍 简介:介绍ES目录结构,配置文件基本说明   bin: 启动文件   log: 日志文件,包括运行日志,慢查询日志   config: 核心配置文件    ,具备实时传输的能力   读取不同的数据源,并进行过滤,开发者自定义规范输出到目的地   日志来源多(如系统日志,应用日志,服务器日志等) 流程讲解   logstash通过管道pipeline

    1.3K20发布于 2019-08-21
  • 来自专栏技术杂记

    日志服务器(6

    ommysql:localhost,Syslog,logger,123456 [root@h105 rsyslog-mysql-5.8.10]# 主要就是打开了 udp 514 端口以接受其它服务器传来的日志

    1.3K40发布于 2021-10-20
  • 来自专栏iSharkFly

    Confluence 6 配置日志

    我们推荐你根据你的需求来配置你自己的 Confluence 日志。 打开或者关闭 SQL 语句日志。 为一个类或者包添加一个新的日志。 为一个类或者包删除一个新的日志。 为一个类或者包设置日志的级别(INFO, WARN, FATAL, ERROR 或者 DEBUG)。 重置所有的日志级别到 predefined 属性。 'Diagnostic' 属性定义了更多的属性配置,能够为你提供更多的日志信息。这个配置将会降低你系统的性能并且让你日志文件更快的填充满。 https://www.cwiki.us/display/CONF6ZH/Configuring+Logging

    91220发布于 2019-01-30
  • 来自专栏iSharkFly

    Confluence 6 审查日志

    日志审查能够允许管理查看你 Confluence 站点所做的修改。 你需要具有 Confluence 系统管理员的权限才能查看日志。 希望查看查看审查日志  ?  > 基本配置(General Configuration) > 审查日志(Audit log)。 然后你可以通过关键字和时间来显示的日志进行过滤。下面是这个操作是如何进行的。 ? 过滤器(Filter it):通过关键字或者时间进行过滤。 更多设置(More control): 导出整个日志或者修改系统中保留日志的时间。 获得明细(Get detailed):查看本条记录的详细信息。 https://www.cwiki.us/display/CONF6ZH/Audit+log

    71140发布于 2019-01-30
  • 来自专栏腾讯云存储

    解锁数据价值:COS支持日志检索与分析功能

    对话记录: 总结 通过上述实际案例,我们可以看到腾讯云“COS日志检索与分析”能力,能够记录存储桶相关的各种请求日志,并实现对日志数据的实时检索与分析。 输入检索分析语句 检索分析语句由检索条件和 SQL 语句组成,输入检索分析语句,对访问日志进行检索和统计分析。 检索条件:指定日志需要匹配的条件,返回符合该条件的日志。 例如使用status:404检索响应状态码为404的应用请求日志检索条件为空或*时代表无检索条件,即所有日志。更多语法规则和示例信息请参见 检索条件语法。 三、输入检索分析语句,选择时间范围,单击搜索按钮即可检索该存储桶上报到 CLS 的访问日志。 查看日志检索结果、统计分析结果 检索成功后,在日志检索页面可查看访问日志检索结果、统计分析结果。 分别对应原始日志和统计图表,支持快捷切换。详细说明如下: 原始日志:当检索分析语句仅包含检索条件时,可在原始日志中查看匹配检索条件的日志,默认按日志时间倒排。

    79410编辑于 2024-03-20
  • 来自专栏云开发

    日志检索优化:所有字段都在,搜什么得什么

    日志里明明看到一个字段(比如 memory_usage),打开检索面板却找不到这个选项 2. 好不容易写对一条 CQL 检索语句,系统却给您自动拼接 requestId、timestamp 等默认条件,结果一片空白 这次日志检索把这两个痛点一次修了。 改了什么 可视化检索字段自动同步 以前,可视化检索的字段列表靠后台版本更新维护。 现在系统动态拉取日志上报的所有 Key,新上报的日志字段会自动出现在可选列表里,不用等版本更新。 现在系统完全以您手动输入的检索语句为准,不再自动拼接任何默认条件,搜什么得什么。 怎么用 无需额外配置,直接在控制台 → 日志监控 → 日志管理使用即可。

    11300编辑于 2026-07-07
  • 来自专栏NetCore 从壹开始

    【BlogBook书】6、Serilog:日志管理

    框架高度集成Serilog,继承ASP.NETCore官方的ILogger<>接口,作为记录整个系统应用生命周期的日志工具,涵盖了平时企业应用的常见场景: 1、不同日志级别的记录;2、支持将日志输出到控制台 ;3、支持日志持久化到数据库;4、支持完整记录Sql执行日志;5、支持输出日志到文件;6、支持配置Seq日志中心; 一、相关的依赖注入配置 builder.Host.AddSerilogSetup(); Information", "Savorboard.CAP": "Information", "Quartz": "Information" } } }, 还有日志入库的数据库连接字符串配置 SqlServer = 1, Sqlite = 2, Oracle = 3, PostgreSQL = 4, Dm = 5,//达梦 Kdbndp = 6, //人大金仓 */ { "ConnId": "Log", //日志库连接固定名称,不要改,其他的可以改 "DBType": 2, "Enabled

    77710编辑于 2024-02-22
  • 来自专栏iSharkFly

    Confluence 6 访问日志脚本 原

    拷贝所有的访问日志到一个叫做 logs 的文件夹中。 运行 Atlassian-processDailyLog.rb。 这个命令将会创建一个 csv 文件,这个 csv 文件被命名为 summary.csv 同时还会创建一些目录,这些目录为日志包含的每一个用户的操作。 例如,Atlassian-processDailyLog-hourly.rb admin 将会处理处理第 3 步骤中的 admin 日志。 你需要为已经创建的列表修改行的数量,这个基于日志的大小。 https://www.cwiki.us/display/CONF6ZH/Access+Log+Scripts

    1K30发布于 2019-01-30
  • 来自专栏Sign

    精灵之息 开发日志6

    可能也和平台有关系吧,微信小游戏即开既玩的优点导致玩家的跳出率会比app,pc等平台高很多。

    64320发布于 2021-08-12
领券