首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏Flink实战应用指南

    Flink Forward 2019--实战相关(16)--Yelp分享实时访问规模预测

    You will hear about geospatial clustering algorithms, a gradient boosting ML model, and cutting-edge stream-processing

    52930发布于 2019-08-20
  • 来自专栏null的专栏

    大数据Lambda架构详解

    data-processing architecture designed to handle massive quantities of data by taking advantage of both batch and stream-processing

    2K10编辑于 2022-05-11
  • 来自专栏CDN及云技术分享

    微型分布式架构设计范例

    Stream-Processing 我们进行日志客户端系统,需要向日志服务器下载此次任务所需要的日志(一般是一个机器10分钟的访问日志)。首先本地日志会去任务服务器查询重放任务。接着去日志服务器下载。 在分布式系统中,所谓的stream-processing,和batch processing不同的是,数据是无边界的。你不知道什么时候日志下载完。

    2.1K290发布于 2018-08-26
  • 来自专栏JAVA高级架构

    如何设计一个麻雀般的微型分布式架构?

    Stream-Processing 我们进行日志客户端系统,需要向日志服务器下载此次任务所需要的日志(一般是一个机器10分钟的访问日志)。首先本地日志会去任务服务器查询重放任务。接着去日志服务器下载。 在分布式系统中,所谓的stream-processing,和batch processing不同的是,数据是无边界的。你不知道什么时候日志下载完。

    58130发布于 2018-09-29
  • 来自专栏做不甩锅的后端

    11 Confluent_Kafka权威指南 第十一章:流计算

    流处理是什么 Stream-Processing Concepts 流处理的概念 Time 时间 Mind the Time Zone 注意时区 State 状态 Stream-Table Duality Time Windows 时间窗口 Stream-Processing Design Patterns 流处理设计模式 Single-Event Processing 单事件处理 Processing Stream-Processing Concepts 流处理的概念 流处理与其他的数据处理非常类似,你编写代码收到数据,对数据进行处理,转换、聚合、丰富等。然后将结果放在某个地方。 Stream-Processing Design Patterns 流处理设计模式 每个流处理系统都是不同的,从消费者,处理逻辑和生产者的基本组合到诸如SparkStreams及其机器学习库相关的集群。 How to Choose a Stream-Processing Framework 如何选择流计算框架 在选择流处理框架时,最重要的是需要考虑你计划编写的程序的类型。

    2.1K20发布于 2020-08-12
  • 来自专栏函数式编程语言及工具

    akka-streams - 从应用角度学习:basic stream parts

    当然,有很多需求可以通过集合来满足,但涉及到大数据处理我想最好还是通过流处理来实现,因为流处理stream-processing的其中一项特点就是能够在有限的内存空间里处理无限量的数据。

    1.3K10发布于 2020-09-08
  • 来自专栏云云众生s

    流处理 101:什么对你来说是正确的?

    Build a real-time stream-processing pipeline 通过 Spark 和 Kafka。 开发流式应用程序和服务具有挑战性,因为它们需要不同于传统同步编程的方法。

    40910编辑于 2024-03-28
  • 来自专栏架构师成长之路

    大数据计算:如何仅用1.5KB内存为十亿对象计数

    stream-lib project — it provides implementations of the algorithms described above as well as several other stream-processing

    71810编辑于 2022-04-14
  • 来自专栏数仓建模

    kafka学习

    目录1、Kafka概述1.1 Kafka简介 Apache Kafka是由LinkedIn采用Scala和Java开发的开源流处理(open source、 stream-processing)平台,该项目旨在提供统一的

    66230编辑于 2022-08-26
  • 来自专栏做不甩锅的后端

    07 Confluent_Kafka权威指南 第七章: 构建数据管道

    Stream-Processing Frameworks 流式处理框架 大多数流式处理框架都包含读取实时消息的能力,并将它们写入到其他的一些系统中。

    4.2K30发布于 2020-08-04
领券