首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏码匠的流水账

    聊聊flink JobManager的High Availability

    Availability flink-forward-berlin-2017-patrick-lucas-flink-in-containerland-32-638.jpg 配置 flink-conf.yaml high-availability / ------------------------------------------------------------------------ ​ /** * Defines high-availability * To enable high-availability, set this mode to "ZOOKEEPER". mode used for the cluster execution." + " To enable high-availability, set this mode --------------------------------- ​ /** * Optional port (range) used by the job manager in high-availability

    2.8K20发布于 2019-02-16
  • 来自专栏大数据进阶

    搭建高可用的flink JobManager HA

    三.统一配置​​​​​​​ # The high-availability mode. . # high-availability: zookeeper # The path where metadata for master recovery is persisted. high-availability.zookeeper.path.root: /flink # The list of ZooKeeper quorum peers that coordinate the high-availability

    1.7K20发布于 2021-06-29
  • 来自专栏路过君BLOG from CSDN

    在k8s手工搭建flink+zookeeper standalone高可用集群笔记

    flink-jobmanager-x.test.svc.cluster.local 通过rpc访问jobmanager的地址,每个jobmanager负载单独配置,如果不配置此项zookeeper中的服务注册地址会有问题 high-availability jobmanager.rpc.address: flink-jobmanager-1.test.svc.cluster.local high-availability.jobmanager.port: 6123 high-availability state.checkpoint-storage: filesystem state.checkpoints.dir: file:///flink/checkpoint/ flink-taskmanager 配置项 值 说明 high-availability checkpoint保存地址 taskmanager.numberOfTaskSlots 2 每个taskmanager的任务槽数量,默认为cpu核心数 样例: FLINK_PROPERTIES=high-availability

    91010编辑于 2022-06-02
  • 来自专栏黑客下午茶

    云原生 PostgreSQL 集群 - PGO:来自 Crunchy Data 的 Postgres Operator

    高可用性 https://crunchydata.github.io/postgres-operator/latest/architecture/high-availability/ Pod Anti-Affinity 多个 Kubernetes 集群 https://crunchydata.github.io/postgres-operator/latest/architecture/high-availability 异步复制 https://crunchydata.github.io/postgres-operator/latest/architecture/high-availability/ 同步复制 https node affinity https://crunchydata.github.io/postgres-operator/latest/architecture/high-availability/# architecture/nodes/ tolerations(容忍度) https://crunchydata.github.io/postgres-operator/latest/architecture/high-availability

    2.7K10编辑于 2022-03-31
  • 来自专栏简单就是美!

    Spring实时统计与监控Spring-Dashboard及Spring集群Terracotta for Spring

    Applications in the Enterprise Terracotta for Spring is a runtime for Spring-based applications that provides high-availability Beans, Events, JMX State and Spring WebFlows • Virtual memory for large, shared Java heaps delivers high-availability

    68520发布于 2019-02-28
  • 来自专栏Lansonli技术博客

    2021年大数据Flink(七):​​​​​​​参数总结

                                         option is respected only if the                                      high-availability                                      option is respected only if the                                      high-availability                                      option is respected only if the                                      high-availability                                      option is respected only if the                                      high-availability                                      option is respected only if the                                      high-availability

    1K60发布于 2021-10-11
  • 来自专栏数据库新发现

    VCS学习笔记

    restarting following a crash of its original host. 4.Cluster Control, Communications, and Membership (1)High-Availability Daemon (HAD) The high-availability daemon, or HAD, is the main VCS daemon running on each system.

    1K20发布于 2018-09-05
  • 来自专栏Flink 知其所以然

    Flink HA(1) —— zookeeper 在 flink 中的应用

    如下只有 yarn 的 attempt,但是没有 high-availability 的相关配置yarn.application-attempts = 2答案: jobmanager 异常时能够拉起,但是无法自动从状态恢复 ,因为没有 high-availability 去查询可用的 checkpoint 等等,虽然在 hdfs 上有,但是这个路径和查询必须通过 zookeeper 中的元信息指针才能读取到;产生的问题:

    37510编辑于 2025-06-16
  • 来自专栏Lansonli技术博客

    2021年大数据Flink(五):Standalone-HA高可用集群模式

    增加如下内容G state.backend: filesystem state.backend.fs.checkpointdir: hdfs://node1:8020/flink-checkpoints high-availability 可以将快照保存到HDFS state.backend.fs.checkpointdir: hdfs://node1:8020/flink-checkpoints #使用zookeeper搭建高可用 high-availability

    1.1K20发布于 2021-10-11
  • 来自专栏云云众生s

    Kubernetes中PostgreSQL的故障诊断

    kubectl apply -n postgres-operator -k high-availability postgrescluster.postgres-operator.crunchydata.com 256Mi requests: cpu: 500m memory: 100Mi kubectl apply -n postgres-operator -k high-availability : 256Mi requests: cpu: 5m memory: 100Mi kubectl apply -n postgres-operator -k high-availability 256Mi requests: cpu: 500m memory: 100Mi kubectl apply -n postgres-operator -k high-availability 'ReadWriteOnce' resources: requests: storage: 1Gi kubectl apply -n postgres-operator -k high-availability

    63710编辑于 2024-03-28
  • 来自专栏代码高亮

    【玩转Lighthouse】搭建 MicroK8s 服务

    https://microk8s.io/high-availability MicroK8s 相对于其他的实现主要有以下的优势: 轻量:与Minikube不同,它不需要VirtualBox,因此可以在虚拟服务器上运行 microk8s stop , microk8s start 配置代理或者镜像之后,不出意外,又可以起飞了,继续执行我们未完成的命令,执行成功后,终端输出如下,可以看到各种 addon 的开启状态 high-availability dashboard 了, 不过由于是自签名的证书,可能会提示证书无效, 我们先不管他 执行microk8s status,可以发现刚才装上的两个组件已经处于启用状态了 microk8s is running high-availability

    2.6K51编辑于 2022-04-28
  • 来自专栏云+技术

    OpenStack Juno系列之L3 HA agent and VRRP

    and VRRP active/active 此方案描述利用了模块化layer 2 (ML2) 插件与Open vSwitch (OVS) OpenStack对 Networking Layer 3 High-Availability

    92610发布于 2019-04-09
  • 来自专栏DataLink数据中台

    第三篇:Centos7 Flink 1.12.2 on yarn 部署

    Availability #============================================================================== # The high-availability Possible options are 'NONE' or 'zookeeper'. # high-availability: zookeeper # The path where metadata high-availability.storageDir: hdfs:///flink12/ha/ # The list of ZooKeeper quorum peers that coordinate the high-availability

    1.1K20编辑于 2021-12-27
  • 来自专栏网络技术联盟站

    精!华为防火墙双机热备技术:HRP、VGMP、VRRP

    hrp interface Ethernet 1/0/0 high-availability :配置防火墙的高可用性接口。 主要是用来实现防火墙的会话快速备份,如果不配置 high-availability ,会话快速备份的命令将不能使能, 配置此命令之后, 此接口会被有限选择作为防火墙会话备份的接口。 在防火墙上配置了 hrp interface 之后,防火墙选择备份通道的接口为:先选择配置的时候带了 high-availability 的接口,如果配置了多个带 high-availability 的接口 ,先选择槽位号和端口号比较小的接口,然后在选择槽位号和端口号比较小的不带high-availability 的接口。 学习更多网络技术,请关注微信公众号:网络技术干货圈 hrp mirror session enable :会话快速备份使能命令,此命令使能之后防火墙上对新建的会话或者是刷新的会话立即备份到对端防火墙上,在配置 high-availability

    8.4K64发布于 2021-05-12
  • 来自专栏架构师进阶

    架构设计之MQ选型梳理

    RabbitMQ can be deployed in distributed and federated configurations to meet high-scale, high-availability

    89820编辑于 2022-03-24
  • 来自专栏加米谷大数据

    技术干货 | Hadoop3.0稳定版安装攻略来啦!

    4,支持多于2个的NameNodes 最初的HDFS NameNode high-availability实现仅仅提供了一个active NameNode和一个Standby NameNode;并且通过将编辑日志复制到三个 HDFS high-availability文档已经对这些信息进行了更新,我们可以阅读这篇文档了解如何配置多于2个NameNodes。

    2.1K90发布于 2018-04-02
  • 来自专栏java编程那点事

    Flink HA ZooKeeper

    #jobmanager.rpc.address: bigdata11 high-availability:zookeeper #指定高可用模式(必须) high-availability.zookeeper.quorum

    1.1K10编辑于 2023-02-25
  • 来自专栏dongfanger

    SpringBoot官方笔记5Data

    spring.elasticsearch.password=secret InfluxDB InfluxDB is an open-source time series database optimized for fast, high-availability

    29620编辑于 2023-07-20
  • 来自专栏A周立SpringCloud

    跟我学Spring Cloud(Finchley版)-23-Spring Cloud Config高可用

    以 GitLab 为例,读者可参照官方文档搭建高可用的 GitLab: 高可用 GitLab 复杂度分析: https://about.gitlab.com/high-availability/ 高可用

    36920发布于 2019-03-14
  • 来自专栏张善友的专栏

    Windows Server 2008 R2 网络负载平衡 (NLB)资料汇总

    Deploying Network Load Balancing (NLB) and Virtual Machines on Windows Server 2008 R2 Clustering and High-Availability

    1.2K80发布于 2018-01-19
领券