首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏Reck Zhang

    Java 11 - 逃逸分析

    逃逸分析 定义 逃逸分析是一种可以有效减少Java中同步负载和内存堆分配压力的跨函数全局数据流分析方法. 通过逃逸分析, 编译器能够分析出一个新的对象的引用范围, 从而决定是否要将这个对象分配在堆上. 逃逸分析是指分析指针动态范围的方法, 当变量或者对象在方法中被分配后, 其指针有可能被返回或者被返回引用. 那么我们把其指针被其他过程或者线程所引用的现象叫做指针(引用)的逃逸. 处理 逃逸分析之后, 可以得到三种对象的逃逸状态: 全局逃逸(GlobalEscape): 一个对象的引用逃出了方法或者线程. [info ][gc] GC(10) Pause Young (G1 Evacuation Pause) 7M->1M(10M) 0.334ms [0.281s][info ][gc] GC(11

    80440发布于 2021-08-11
  • 来自专栏Java架构师必看

    spring源码分析11

    spring源码分析11 强烈推介IDEA2020.2破解激活,IntelliJ

    39820发布于 2021-04-13
  • 来自专栏IT技术精选文摘

    CDN日志实时分析

    热门资源 访问来源、agent、分布等 传统分析流程 现在各家CDN厂商,通常会提供基础的监控指标,比如请求次数、带宽等信息,然后,在进行定制化分析场景下,默认指标往往不能解决所有问题,需要对原始日志进行更深入的挖掘 以下是常见的处理方式: 定期下载CDN离线日志 将数据导入Hadoop 这样的数仓系统 跑各类job(或hive)对数据进行分析,将最终结果导入Mysql 对分析结果进行实时展示 对于报表场景 ,以上流程没有太大问题,可以处理海量CDN的日志,但是在实时问题定位,快速验证、试错等交互式分析强烈的场景下, 该方案的弊端就显露出来: 离线模式下,数据产出实时性无法保证,延时从半小时到几小时不等 需要维护多级Pipeline,需要有脚本或工具将其串联,有开发代价 环境维护,有运维代价,任意一个环节出问题,结果都不能产出 灵活性欠佳,无法快速响应实时交互查询需求 接下来,对于CDN数据各类分析需求 response_size) as "下载总量" group by Domain order by "下载总量" desc limit 100 接下来,我们从省份和运营商的角度,来做实时统计

    2.6K40发布于 2018-07-30
  • 来自专栏SeanCheney的专栏

    《Learning Scrapy》(中文版)第11章 Scrapyd分布式抓取和实时分析

    我们最后用Apache Spark对提取的数据进行实时分析。Spark一个非常流行的大数据处理框架。收集的数据越多、结果就变得越准确,我们使用Spark Streaming API展示结果。 将标题与地点结合,例如,可以根据地点和描述,实时判断哪个房子最划算。 我们想计算的就是特定名词对价格造成的偏移: ? 到现在,我们使用的爬虫都比较短,实际中有的爬虫是24小时运行的,不断发出数据流并进行分析,数据越多,分析的结果越准确。我们就是要用Spark进行这样的演示。 提示:本章的代码位于目录ch11。 终端4用来连接Spark服务器,我们用它进行实时分析: $ vagrant ssh spark $ pwd /root $ ls book items $ spark-submit book/ch11/

    1.4K20发布于 2019-02-15
  • 来自专栏数据科学(冷冻工厂)

    ATAC-seq分析:Motifs分析11

    切割位点分析 要绘制切割位点,我们希望只考虑读取的 5' 端,并且需要调整已知的 5' 读取偏移量到实际 T5 切割位点。

    87220编辑于 2023-02-27
  • 来自专栏数据科学(冷冻工厂)

    ATAC-seq分析:Motifs分析11

    切割位点分析要绘制切割位点,我们希望只考虑读取的 5' 端,并且需要调整已知的 5' 读取偏移量到实际 T5 切割位点。

    1K20编辑于 2023-01-27
  • 来自专栏女程序员的日常

    M41T11-RTC(实时时钟)

    主要器件:STM8单片机、M41T11时钟IC、32.768kHz晶振等。 2. 外围设备:烧录工具ST-Link/v2、串口、5v供电SATA线。 3. (一)、M41T11引脚示意图及解释如下: ? ? 问题简单化了,我们只需要找到访问该时钟IC的方法,读取它的前8Byte即可解决问题。 ? (5)校验:当FT=1时,且在第7脚(FT/OUT)外加一个上拉电阻时,只要时钟IC正常工作(32.768kHz),就可以用示波器测得FT/OUT脚为512kHz左右; (6)对于只需要实现简单的读取实时时间 mode: (1)发送slave address 0xD0; (2)发送时钟IC的寄存器地址; (3)想要得到的数据已经被传送后存到I2C的数据寄存器中,因此直接拿I2C->DR中的内容即可; 想要得到实时时间 )Read mode 8次,对寄存器地址为0x00~0x06的寄存器做读操作,将每次读到的内容存放到 uint8_t curtime[8]数组中; (4)将数组内容通过串口格式化输出到终端里,为了获取实时时间

    1.2K10发布于 2017-12-25
  • 来自专栏golang算法架构leetcode技术php

    golang源码分析:etcd(11

    我们继续在文件 server/etcdserver/server.go 中分析EtcdServer的初始化流程,它会先调用bootstrap函数初始化后端存储bolt-db然后初始化raftNode

    34040编辑于 2023-09-09
  • 来自专栏golang算法架构leetcode技术php

    golang源码分析:raft(11

    前面提到transport将远程对象分为两类:remote和peer,分别代表新建立的连接和已经加入集群的节点,下面简单分析下它们的核心逻辑: type remote struct {

    33720编辑于 2023-09-07
  • 来自专栏学习笔记ol

    框架分析11)-测试框架

    框架分析11)-测试框架 主要对目前市面上常见的框架进行分析和总结,希望有兴趣的小伙伴们可以看一下,会持续更新的。希望各位可以监督我,我们一起学习进步。 优缺点分析 优点 开源免费 Selenium是一个开源项目,可以免费使用,没有任何许可费用。 优缺点分析 优点 简单易用 JUnit框架提供了简单易用的API和注解,使得编写和运行单元测试变得非常简单。

    87720编辑于 2023-10-11
  • golang源码分析:langchaingo(11

    分析完核心功能使用的源码后,我们再按照目录依次总结下每个目录里的逻辑,在最外层的一些工具类说明类的文件就不再介绍了 CODE_OF_CONDUCT.md CONTRIBUTING.md

    8400编辑于 2026-03-18
  • 来自专栏波波烤鸭

    11】Spring源码-分析篇-事务源码分析

    Spring源码分析-事务源码分析 一、事务的本质 1. details/87898161 隔离级别:https://blog.csdn.net/qq_38526573/article/details/87898730 二、Spring事务原理   然后我们来分析下 在但数据源中的事务管理,这个是我们分析的重点。 是如何注入到容器中的,首先来看看事务的开启@EnableTransactionManagement 一步步进入 可以看到对应的拦截器的注入 然后可以看到拦截器关联到了Advisor中了 到这儿就分析完了

    1.9K30编辑于 2022-10-28
  • 来自专栏大数据和云计算技术

    实时分析系统(HiveHbaseImpala)浅析

    什么是实时分析(在线查询)系统? 大数据领域里面,实时分析(在线查询)系统是最常见的一种场景,通常用于客户投诉处理,实时数据分析,在线查询等等过。因为是查询应用,通常有以下特点: a. 支持SQL(这个业界基本上达成共识了,原因是很难找到一个又会数据分析,还能写JAVA代码的分析工程师)。 传统上,常常使用数据仓库来承担这一任务,数据仓库通过创建索引来应对多维度复杂查询。 目前来完美解决实时分析的系统还在探索中,下面来讲讲hadoop领域几种常见的解决方案 2. Hive ? Map/reduce为什么只适合批量任务,这里不解释,建议大家看下相关原理,业界对这快的分析比较多,由此也诞生了spark等一系列解决方案。 3. Impala是Cloudera在受到Google的Dremel启发下开发的实时交互SQL大数据查询工具,Impala没有再使用缓慢的Hive+MapReduce批处理,而是通过使用与商用并行关系数据库中类似的分布式查询引擎

    4.2K50发布于 2018-03-07
  • 来自专栏PPV课数据科学社区

    【译文】Spark高速实时分析

    然而,越来越多的数据需要更快速的处理,这些需求来自于流技术、物联网和实时分析等领域的快速发展 。 的应用场景包括:大型技术公司通过机器学习洞察用户;金融系统在几个小时内处理数以百万计的股票交易数据,而在此之前使用Hadoop MapReduce需要近一个星期才能完成;基因组学术 研究;视频系统中流处理和数据分析 另外,为了充分利用Spark实时分析或预测分析的优势,整个数据供应链的优化是非常重要的。 1、回复“数据分析师”查看数据分析师系列文章 2、回复“案例”查看大数据案例系列文章 3、回复“征信”查看相关征信的系列文章 4、回复“可视化”查看可视化专题系列文章 5、回复“SPPS”查看SPSS系列文章

    68050发布于 2018-04-20
  • 来自专栏小工匠聊架构

    大厂案例 - 实时分析引擎

    基于大数据平台,通过流式实时分析技术可以对全局网络空间进行实时分析和异常检测,解决单点很难发现和处理的安全问题。 相比与互联网公司常见的大数据实时分析场景,面向企业用户的网络安全分析场景存在很多特殊需求和挑战,本次分享将介绍网络安全领域对实时分析系统的需求,并从这些需求出发,讲解如何设计适合网络安全领域的实时分析引擎 ---- 内容 网络安全领域对实时监测系统的需求 如何选择一个适合网络安全场景的实时计算框架 如何设计网络安全领域的实时分析引擎 ---- 收获 了解如何基于 Flink 构造网络安全领域的实时分析引擎 了解实时网络安全分析引擎的架构和设计 了解构建实时网络安全分析引擎遇到的问题和解决方案 ---- 思路 ---- 建议 不要马上进行架构设计和编码

    25720编辑于 2023-07-25
  • 来自专栏YP小站

    实时Web日志分析

    GoAccess 是一个开源的实时Web日志分析器和交互式查看器,可在*nix系统上的终端或通过浏览器运行。它为系统管理员提供了实时而有价值的HTTP统计信息。 GoAccess 被设计为一种基于终端的快速日志分析器。 它的核心思想是无需使用浏览器就可以快速实时实时分析和查看Web服务器统计信息(如果您想通过SSH快速分析访问日志,或者只是喜欢在终端中工作,那将是一个很好的选择)。 例如,要从goaccess启动以来通过监视日志来快速诊断问题: $ tail -f access.log | goaccess - 更妙的是,进行筛选,同时保持打开的管道保持实时分析,我们可以利用的 只--real-time-html需要使其实时即可。

    1.6K30发布于 2020-06-04
  • 来自专栏大数据技术与应用实战

    flink实战-模拟简易双11实时统计大屏

    背景 在大数据的实时处理中,实时的大屏展示已经成了一个很重要的展示项,比如最有名的双十一大屏实时销售总价展示。 除了这个,还有一些其他场景的应用,比如我们在我们的后台系统实时的展示我们网站当前的pv、uv等等,其实做法都是类似的。 今天我们就做一个最简单的模拟电商统计大屏的小例子,我们抽取一下最简单的需求。 实时计算出当天零点截止到当前时间的销售总额 计算出各个分类的销售top3 每秒钟更新一次统计结果 实例讲解 构造数据 首先我们通过自定义source 模拟订单的生成,生成了一个Tuple2,第一个元素是分类 我们会把各个分类的总价加起来,就是全站的总销量金额,然后我们同时使用优先级队列计算出分类销售的Top3,打印出结果,在生产过程中我们可以把这个结果数据发到hbase或者redis等外部存储,以供前端的实时页面展示

    2.1K30发布于 2020-09-15
  • 来自专栏Elasticsearch专栏

    【极数系列】Flink集成KafkaSink & 实时输出数据(11

    --java_JDK版本--> <java.version>11</java.version> <!

    78210编辑于 2024-03-04
  • 来自专栏大数据生态

    Greenplum实时查询分析最佳实践

    pg_stat_activity能为我们做什么 pg_stat_activity是一张系统统计视图,可以用于任务分析诊断。这是非常有用且功能强大的视图,其价值很难衡量。 + | | | order by 1 desc; (2 rows) 可以发现第一条SQL执行了11 实时查询分析 场景一:查看当前正在执行的请求 state - active:请求正在执行中 waiting - f:当前请求没有在等待 postgres=> SELECT datid, 任务分析进阶——诊断原因并修复 在上面的场景二中,我们发现了有正在等待的请求,下面我们来学习如何找出发生等待事件的根本原因。 总而言之,pg_stat_activity很强大,实属GP的分析管理利器,是GP使用者们最好的帮手。

    5.2K4016编辑于 2022-01-21
  • 来自专栏后端知识开放麦

    Go Web 编程快速入门 11 - WebSocket实时通信:实时消息推送和双向通信

    WebSocket提供了浏览器与服务端的全双工通信能力,适合实时消息、在线协作、游戏等场景。本章延续第04.1章的风格,从最小可运行示例到工程化封装与房间管理,帮助你快速构建稳定的实时系统。

    18920编辑于 2025-11-11
领券