首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • AutoMQ 生态集成 Redpanda Console

    集成 AutoMQ 与 Redpanda ConsoleRedpanda Console 是由 Redpanda 2 提供的 Kafka Web UI 界面,用于监控和管理 Redpanda 或 Kafka tar -xzf redpanda_console.tar.gz# config setsudo mkdir -p /etc/redpanda# write configsudo vim /etc/redpanda ="/etc/redpanda/redpanda-console-config.yaml"# /opt/ run console. /redpanda-console你将会得到如下结果:. 引用1 Redpanda Console: https://redpanda.com/redpanda-console-kafka-ui 2 Redpanda: https://redpanda.com

    43610编辑于 2024-07-29
  • 来自专栏AustinDatabases

    数据库信息速递, RAFT 原生系统是未来数据流式系统的未来

    Redpanda是如何实现Raft的 当Redpanda创始人Alex Gallego确定世界需要一个新的流式数据平台来支持那些可能导致Apache Kafka故障的GBps+工作负载时,他决定从头开始重写 因此,Redpanda具有更好的容错性,并能在大规模上提供可预测的性能。3)可靠性:当Redpanda接收事件时,它们被写入一个主题分区,并追加到磁盘上的日志文件中。 Redpanda利用Raft联合共识协议来实现一致性,即使在重新配置期间也是如此。 尽管Redpanda采取了一种原生的Raft方法,但传统的流式数据平台在采用现代共识方法方面一直拖后腿。 Doug Flora是Redpanda Data的产品营销负责人。

    44140编辑于 2023-09-06
  • 开源的数据流技术,该选择Redpanda还是Apache Kafka?

    Redpanda:兼容Kafka的数据流 前面是对Kafka的现状介绍。下面,让我们来看看Kafka领域的新玩家:Redpanda。 对此,您除了自行配置Redpanda之外,还可以购买“Redpanda作为产品”,将其部署到自己的环境中。 正如Redpanda的宣传口号说的那样:“Redpanda集群可以驻留在您的云服务处,并完全由Redpanda来打理。据此,您的数据将永远不会离开您的环境。” Redpanda的数据流 得益于C++的实现,Redpanda不但轻量级而且高效。这在有限的边缘硬件计算环境中非常实用。 可以说,由于Redpanda与Kafka具有相同的网络和磁盘要求,因此这意味着Redpanda在基础设施的TCO方面与Kafka的差异并不大。

    2K10编辑于 2025-05-20
  • 来自专栏飞总聊IT

    Redpanda:用C++重写的Kafka到底有多牛逼。。。

    今天聊聊我最近看到的一个东西:Redpanda。这家公司用C++重写实现了一下Kafka,做到了API的兼容。 所以Kafka社区的各种生态理论上来说雨刮可以无缝的对接到Redpanda里面来。 撇开这些东西不讲,Redpanda和Kafka的具体实现上,有两个特别不同的地方。 第一个是对内存和文件的管理。 而Redpanda的做法正好相反,Redpanda启动的时候就会分配走机器的绝大多数的内存,然后自己去管理这些内存的使用。 所以,单纯的从技术角度来看,我觉得Redpanda确实是解决了Kafka长久以来的一些架构上的弊端,实现有其非常可取的地方。 这很取决于Redpanda的码农水平到底多牛逼。

    1.4K30编辑于 2023-01-10
  • DockerCompose玩转Kafka单体与集群部署,Redpanda Console助力可视化管理

    幸运的是,Docker Compose为我们提供了一个快速、简便的部署方式,而Redpanda Console作为一款优秀的可视化工具,可以帮助我们直观地管理Kafka集群。 本文将教你如何使用Docker Compose搭建Kafka与Zookeeper,并结合Redpanda Console进行集群监控,帮助你提升对Kafka的操作效率。 Console 服务 redpanda-console: # 使用 Redpanda Console 镜像 image: redpandadata/console:latest container_name: acowbo-data-center-redpanda-console environment: - /etc/localtime:/etc/localtime : image: redpandadata/console:latest container_name: acowbo-data-center-redpanda-console-cluster

    1.1K10编辑于 2025-05-31
  • 来自专栏云云众生s

    AI推动流数据使用仍需时日

    Redpanda流数据平台进行的一项调查的受访者中,大多数担任IT角色的300名美国受访者于7月和8月完成了调查。 60%的Redpanda受访者将提高生产力作为使用流数据技术的原因。49%的业务敏捷性是第二大动机。43%也将支持AI/ML作为动机。 来源:“流数据状态”,Redpanda。 来源:“流数据状态”,Redpanda。 流选项很复杂 当被问及使用流数据的感知技术挑战时,Redpanda调查的参与者中有42%列出了安全和数据隐私。 例如,尽管Redpanda调查中77%的当前用户表示他们有兼容Kafka的平台,但只有7%的用户明确使用Kafka流。 Aiven和Redpanda等数据平台与一系列流处理框架和数据库兼容。 来源:“流数据状态”,Redpanda

    25910编辑于 2024-03-28
  • 来自专栏云云众生s

    工业物联网工作负载架构设计蓝图

    Redpanda 作为中央数据枢纽 Redpanda 是一个简单、强大且成本效益高的流数据平台,完全兼容 Apache Kafka API,同时消除了通常 Kafka 复杂性。 Redpanda 的精简、成本效益高的设计仅消耗 JVM-based 替代方案(如 Kafka)三分之一的资源。 从机器到Redpanda的连接性 数据收集与分析 无论上述使用何种通信机制,从机器收集的数据都会实时注入到 Redpanda 中,以供下游消费。 可采用具有与 Redpanda 本地集成的状态流处理器,如 Flink,来实现此目的。 工业物联网(IIoT)设备可以向 Redpanda 主题发布事件,触发实时的自动响应和控制操作。

    39110编辑于 2024-03-28
  • 来自专栏开源服务指南

    开源版 Sora:AI 视频生成的高性能实现 | 开源日报 No.291

    redpanda-data/connecthttps://github.com/redpanda-data/connect Stars: 8.0k License: NOASSERTION connect

    48610编辑于 2024-07-10
  • 来自专栏云原生应用工坊

    如何设计 AI 驱动的 OPS Agent:技术架构探索

    + AGE + pgvector)、OpenTelemetry → OpenObserve/Prom/Loki、GitOps(Argo CD / Flux)、策略引擎(OPA/Cedar)、事件总线(Redpanda 2.2 事件总线与分工 obs.events:高吞吐观测事件(建议 Redpanda/Kafka)。 ops. 推荐架构:“Redpanda 承载观测流量 + NATS 承载控制面事件”,兼顾吞吐与时延,简化隔离域与配额治理。 事件总线:主题与消息模式 6.1 主题建议 obs.events(观测数据/派生事件,高吞吐,Redpanda):obs.events.{kind}. {subject} ops.alerts(告警/异常,Redpanda→NATS 桥接):ops.alerts.{service}.

    41010编辑于 2025-08-27
  • 来自专栏姓王者的博客

    bat脚本使用教程

    Community Edition 2024.1.1\bin\idea64.exe" ) else if "%appName%" == "c" ( start "" "C:\Program Files\RedPanda-Cpp \RedPandaIDE.exe" ) else if "%appName%" == "cpp" ( start "" "C:\Program Files\RedPanda-Cpp\RedPandaIDE.exe

    1.7K10编辑于 2024-12-20
  • 如何通过 CloudCanal 实现从 Kafka 到 AutoMQ 的数据迁移

               System.out.println("Messages sent successfully");        }    }}创建完成后,可以通过各种可视化工具查看 Kafka 节点状态,比如 Redpanda 这里我选择 Redpanda Console,可以看到当前已经有了 50 个Topic,并且每个 Topic 下有500条初始消息。 8 MySQL 到 Kafka 同步 | CloudCanal: https://www.clougence.com/cc-doc/bestPractice/mysql_kafka_sync 9 Redpanda Console: https://redpanda.com/redpanda-console-kafka-ui 10 Kafdrop: https://github.com/obsidiandynamics

    51510编辑于 2024-07-29
  • 企业级流处理平台选型指南:腾讯云流计算为何成为市场新宠?

    大规模实时数据流处理 开源免费 社区活跃、稳定性高 配置管理复杂 Confluent Kafka商业版,企业级安全和管理工具 复杂数据管道、大规模数据处理 标准版239元/CU起 功能丰富、管理简化 成本较高 Redpanda 三、 企业选型建议与实践策略 面对多种流处理平台,企业应根据自身需求进行综合考量: 对于初创企业和小型团队,如果技术实力较强且预算有限,可考虑从Apache Kafka或Redpanda入手。

    13710编辑于 2026-02-06
  • 来自专栏深度学习与python

    八年孤独,Iceberg 赢得世界

    Stream Data Platform Confluent、Redpanda、StreamNative 是流数据处理领域最好的几家公司,商业模式也很相似,基于开源的 Kafka、Redpanda、Apache 三家公司在 Iceberg Summit 上讲的故事基本一样,在实时场景,Kafka/Redpanda/Pulsar 是数据流的入口,当前最多的应用 Case 就是连接 Operational Data Redpanda 是 C++ 版本的 Kafka,以性价比作为切入点与 Confluent 竞争,号称在性能上比 Kafka 快 10 倍,同时硬件需求仅为 Kafka 的六分之一。 Redpanda 在与 Iceberg 的集成上,引入了两个新概念,Iceberg Topic 和 StreamHouse,前者是一个很好的名字,写入 Iceberg Topic 的数据,会自动写入到 2025 年 4 月 Redpanda 新融资 1 亿美金,估值约 10 亿美金,Redpanda 过去几年获得较好的增长,需要大故事来支撑未来,但大故事的弊端在于面临更大的竞争,当前对于流数据平台来说

    84400编辑于 2025-06-08
  • 来自专栏C++ 动态新闻推送

    C++ 动态新闻推送 第4期

    ,compile-time benchmark/build-bench.com 以及metabench库 Cppcast: Event Streaming with Alex Gallego 这个是和redpanda redpanda是kafka的c++实现。而且比kafka更快。有时间可以琢磨一下 ---- 看到这里或许你有建议或者疑问或者指出错误,请留言评论! 多谢! 你的评论非常重要!

    80010发布于 2021-08-31
  • 来自专栏云云众生s

    数据主权的中间道路:自带云

    Redpanda 云 BYOC 集群作为 BYOC 部署模型的一个示例。数据平面保留在客户的虚拟私有云(VPC)中。Redpanda 的控制平面管理集群操作。

    47210编辑于 2024-03-28
  • 来自专栏云云众生s

    如何构建用于实时数据的可扩展平台架构

    现在,大多数分布式数据处理引擎和流数据库都支持实时消费、聚合、汇总和分析来自 Kafka 或 Redpanda 等来源的流数据。 Redpanda 等解决方案可以自动执行跨分区的数据分发,从而提高平台的可靠性和容错能力。 但是,请考虑潜在的关联网络带宽成本,同时考虑应用程序和服务的位置。 并非所有流技术都提供此功能,但 Redpanda 等企业级平台支持将数据和集群元数据备份到云对象存储。 一种选择是采用参考架构,其中包含可扩展数据流平台,例如 Redpanda,一种用 C++ 实现的即插即用式 Kafka 替代品。

    65110编辑于 2024-05-06
  • 来自专栏云云众生s

    解析Kafka: 复杂性所带来的价值

    还值得一提的是Redpanda,这是一家与Kafka API和协议兼容的供应商。可以将Redpanda平台视为Kafka的C++克隆。有关更多见解,可以参见Kafka与Redpanda的比较。

    76410编辑于 2024-03-28
  • 来自专栏C++ 动态新闻推送

    C++ 中文周刊 第136期

    node->right); } }, tree); } 其他 P99 CONF 2023 | Adventures in Thread-per-Core Async with Redpanda and Seastar by Travis Downs https://www.bilibili.com/video/BV1gg4y1d7jB/ redpanda有一些coroutine实践,有点意思

    22010编辑于 2024-07-30
  • 来自专栏云原生应用工坊

    T咖啡馆|数据采集多级持久化与可重放

    ETL:Benthos/Redpanda Connect/Flink(选一种即可先跑通)。 旁路重放与 ETL 真源)[存储与分析] ├─ OpenObserve(对象存储/本地盘 + WAL;Logs/Metrics/Traces) ├─ Kafka(RF≥3)→ ETL(Benthos/Redpanda 备选:检索面:cLoki / qryn / LGTM;ETL:Redpanda Connect / Flink;DB:ClickHouse(日志聚合与冷数据仓)。17.

    36710编辑于 2025-08-23
  • 来自专栏C++ 动态新闻推送

    C++ 中文周刊 第135期

    优化比较有意思 压轴的coro http案例/代码调优也有点意思 感兴趣的可以看看 其他 • P99 CONF 2023 | Adventures in Thread-per-Core Async with Redpanda and Seastar by Travis Downs redpanda有一些coroutine实践,有点意思 开源项目需要人手 • asteria[13] 一个脚本语言,可嵌入,长期找人,希望胖友们帮帮忙

    19410编辑于 2024-07-30
领券