首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏AI机器学习与深度学习算法

    机器学习入门 5-9 使用sklearn解决回归问题

    本系列是《玩转机器学习教程》一个整理的视频笔记。本小节主要介绍使用sklearn实现多元线性回归和kNN回归。

    95120发布于 2019-11-13
  • 来自专栏石云升

    人生九段算法:用算法经营自己的人生(5-9段)

    如果把个人比作一家公司。那么你自己就是这家公司的CEO。对个体而言,最重要的增长不在于工资,而在于能力的提升和个人网络的建立,以及未来赚钱的能力。

    78620编辑于 2022-08-25
  • 来自专栏机器之心

    比标准Attention提速5-9倍,大模型都在用的FlashAttention v2来了

    近来,几种长上下文语言模型陆续问世,包括 GPT-4(上下文长度为 32k)、MosaicML 的 MPT(上下文长度为 65k)Anthropic 的 Claude(上下文长度为 100k)。长文档查询和故事写作等新兴用例已经表明扩展语言模型上下文窗口是非常必要的。

    2.1K50编辑于 2023-08-08
  • 来自专栏ops技术分享

    Redis集群到集群迁移

    一.物理导入 简介 redis集群在存储数据时,是根据槽点进行存储。例如老集群A如下: 都在一台机器,实际可以在多台机器上。 实际操作 老集群:1.1.1.1 主节点:7000(0-5460) 7001(5461-10922) 7002(10923-16383) 从节点:7003 7004 7005 新集群:1.1.1.2 主节点 :6000(0-3000) 6001(3001-5460) 6002(5461-10922) 6003(10923-16383) 从节点:6004 6005 6006 6007 可以发现新集群的节点多了一个 将老集群的7000节点的appendonly.aof用pipe方法导入到6000节点上。再将同文件导入到6001节点上。

    1.7K20发布于 2021-05-21
  • 来自专栏用户4352451的专栏

    redis集群-----切片集群(cluster)

    那这个方案就是切片集群。 切片集群(cluster) 什么是切片集群? 就是多个集群/节点 组成的集群,存储数据的方式是分区存储,在这里为什么叫分区存储呢,就是说不通的节点/集群之间是不进行通信往来的,他们只需要存储客户端让存储的数据,也就是说他们存储的数据是不冗余的。 切片集群存储的问题? 1. 数据如何切分? 那何尝和我们切片集群的场景不一致呢。每一个slot可以对应一个redis主从集群/redis节点。但是对与Java的hash表来讲它是可以进行一直扩容的。所以某些场景还是不符合的。 这样做的好处是扩展性好,不管有多少数据,切片集群都能应对。

    1.6K21编辑于 2022-05-05
  • 来自专栏院长运维开发

    OpenStack集群部署—Horizon集群

    提供一个Web界面操作OpenStack系统 使用Django框架基于OpenStack API开发 支持将session存储在DB、Memcached 支持集群 部署 安装dashboard # 在全部控制节点安装 OPENSTACK_KEYSTONE_MULTIDOMAIN_SUPPORT = True # 取消注释 97 OPENSTACK_KEYSTONE_DEFAULT_DOMAIN = 'Default' # 取消158~163行注释,并使用memcached集群

    1.6K10发布于 2020-06-12
  • 来自专栏院长运维开发

    OpenStack集群部署—Keystone集群

    概述 Keystone(OpenStack Identity Service)是 OpenStack 框架中负责管理身份验证、服务访问规则和服务令牌功能的组件。用户访问资源需要验证用户的身份与权限,服务执行操作也需要进行权限检测,这些都需要通过 Keystone 来处理。Keystone 类似一个服务总线, 或者说是整个 Openstack 框架的注册表,OpenStack 服务通过 Keystone 来注册其 Endpoint(服务访问的URL),任何服务之间的相互调用,都需要先经过 Keystone 的身份验证,获得目标服务的 Endpoint ,然后再调用。

    2.2K10发布于 2020-06-12
  • 来自专栏院长运维开发

    OpenStack集群部署—Neutron集群

    Neutron概述 ​ Neutron是 OpenStack项目中负责提供网络服务的组件,它基于软件定义网络的思想,实现了网络虚拟化下的资源管理。Neutron 的设计目标是实现“网络即服务(Networking as a Service)”,在设计上遵循了基于 SDN 实现网络虚拟化的原则,在实现上充分利用了 Linux 系统上的各种网络相关的技术。

    1.7K11发布于 2020-06-12
  • 来自专栏院长运维开发

    OpenStack集群部署—glance集群

    Glance的概述 Glance是为虚拟机的创建提供镜像的服务,我们基于Openstack是构建基本的IaaS平台对外提供虚拟机,而虚拟机在创建时必须为选择需要安装的操作系统,Glance服务就是为该选择提供不同的操作系统镜像。

    1.7K10发布于 2020-06-12
  • 来自专栏院长运维开发

    OpenStack集群部署—集群环境

    环境信息 相关主机信息: IP地址 主机名 192.168.182.131 controller01 192.168.182.132 controller02 环境准备 设置hosts 机器都需执行 [root@bogon yum.repos.d]# cat /etc/hosts 127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4 ::1 local

    1.2K10发布于 2020-06-11
  • 来自专栏blog(为什么会重名,真的醉了)

    Spark集群安装-基于hadoop集群

    文章目录 hadoop集群 下载 环境配置 集群配置 测试 hadoop集群 参考使用docker部署hadoop集群-手把手复现 下载 首先查看hadoop版本 hadoop version 下载 LD_LIBRARY_PATH:/usr/local/jdk1.8/jre/lib/aarch64 (插播反爬信息 )博主CSDN地址:https://wzlodq.blog.csdn.net/ 集群配置 r /usr/local/spark/ hadoop2:/usr/local/ scp -r /usr/local/spark/ hadoop3:/usr/local/ 测试 #记得先启动hadoop集群

    1.8K30编辑于 2021-12-31
  • 来自专栏小手冰凉

    zookeeper(单机、伪集群、集群)部署

    ZooKeeper集群适合搭建在奇数 台机器上。只要集群中半数以上主机处于存活,那么服务就是可用的。 ZooKeeper有三种安装方式:单机模式 & 伪集群模式 & 集群模式 单机模式:ZooKeeper以单实例的形式运 行在一台服务器上,适合测试环境。 伪集群模式:在一台服务器上跑多个ZooKeeper实例。 集群模式: ZooKeeper运行在多台服务器上,适合生产环境。 3、 ZooKeeper多机集群部署 为了获得可靠的zk服务,应该在多台服务器上部署多个zk,只要集群中大多数的zk服务启动了,那么总的zk服 务将是可用的。 在多台主机上搭建ZooKeeper集群的方式,与伪集群几乎是差不多的。 环境如下: ?

    7.5K40发布于 2020-04-08
  • 来自专栏学习

    【redis】集群 如何搭建集群详解

    集群搭建 基于 docker 在我们云服务器上搭建出一个 redis 集群出来 当前节点,主要是因为我们只有一个云服务器,搞分布式系统,就比较麻烦。 实际工作中,一般是通过多个主机的方式,来搭建集群 此处我们使用 9 个 docker 容器,来模拟 9 台服务器 此处我们创建 11 个 redis 节点,其中前 9 个用来演示集群的搭建,后 2 个用来演示集群扩容 我们通过变量来构造不同的 ipcluster-enabled yes:开启集群cluster-config-file nodes.conf:里面包含了一些集群的配置信息,不用我们手动写,而是 redis 构建集群 此处把前 9 个主机构建成集群,3 主 6 从,后 2 个主机暂时不用 相关命令: redis-cli --cluster create 172.30.0.101:6379 172.30.0.102 ,输入 exit 就可以退出容器 生成每个 redis 节点的配置文件 使用 docker 创建出 11 个 redis 节点,并且启动容器 使用 redis-cli 执行构建集群命令

    96010编辑于 2025-03-28
  • 来自专栏编程语言的世界

    redis集群原理,redis集群配置,redis集群搭建及配置

    server/redis/redis-cluster-conf/7006/redis.conf配置文件的内容:bind 0.0.0.0port 7001  #端口cluster-enabled yes #启用集群模式 redis.conf/www/server/redis/src/redis-server   /www/server/redis/redis-cluster-conf/7006/redis.conf(5).启动集群 php/** * Redis集群 * RedisCluster类介绍.网上资料不全.自己翻译水平有限.有错误请提出 * 参数1:用于通过名称加载集群配置,但是需要我们在redis.ini中提前配置好对应的名称和数据 " * 那么直接new RedisCluster('mycluster')即可实例化,但是通常我们的配置是在php文件中,所以百度上面的文档第一个参数都是NULL * 参数2:用于通过PHP数组来加载集群 redisCluster->set('username', 'chenhuohuo');$value = $redisCluster->get('username');var_dump($value);解析:redis集群分为主从复制

    1.6K20编辑于 2023-07-02
  • 来自专栏编程语言的世界

    redis集群原理,redis集群配置,redis集群搭建及配置

    server/redis/redis-cluster-conf/7006/redis.conf配置文件的内容:bind 0.0.0.0port 7001  #端口cluster-enabled yes #启用集群模式 redis.conf/www/server/redis/src/redis-server   /www/server/redis/redis-cluster-conf/7006/redis.conf(5).启动集群 php/** * Redis集群 * RedisCluster类介绍.网上资料不全.自己翻译水平有限.有错误请提出 * 参数1:用于通过名称加载集群配置,但是需要我们在redis.ini中提前配置好对应的名称和数据 " * 那么直接new RedisCluster('mycluster')即可实例化,但是通常我们的配置是在php文件中,所以百度上面的文档第一个参数都是NULL * 参数2:用于通过PHP数组来加载集群 redisCluster->set('username', 'chenhuohuo');$value = $redisCluster->get('username');var_dump($value);解析:redis集群分为主从复制

    1.3K00编辑于 2023-06-29
  • 来自专栏笔记本

    Redis集群or主从(集群带来的问题)

    Redis集群or主从集群完整性问题在Redis的默认配置中,如果发现任意一个插槽不可用,则整个集群都停止对外服务。 集群带宽问题集群节点之间会不断地互相Ping来确定集群中其它节点地状态,每次Ping携带地信息至少包括 插槽信息 、 集群状态信息 。 集群中节点越多,每次ping携带地信息量就会很大,所以我们要 避免大集群,集群节点数不要太多、 单节点上不要运行太多Redis实例(所有实例的数据流量都会通过同一块网卡、多个实例并发访问时,所有流量会累加 ,可能直接跑满网卡物理带宽) 、 配置合适的cluster-node-timeout(集群节点客观下线的超时时间,超时时间配置越大,ping的频率就会低,带宽问题就能减轻)集群 不仅会导致性能下降,还会给程序员开发带来额外负担 就不要使用 Redis集群 。

    31721编辑于 2025-08-11
  • 来自专栏院长运维开发

    OpenStack集群部署—Nova控制节点集群

    可通过各服务与rabbitmq的日志查看; # # transport_url=rabbit://openstack:rabbitmq_pass@controller:5673 # # rabbitmq本身具备集群机制 ,官方文档建议直接连接rabbitmq集群;但采用此方式时服务启动有时会报错,原因不明;如果没有此现象,强烈建议连接rabbitmq直接对接集群而非通过前端haproxy transport_url=rabbit

    2.4K20发布于 2020-06-12
  • 来自专栏Java工程师日常干货

    玩转Redis集群(上)Redis集群搭建

    这是redis集群介绍的上篇,主要是关于Redis集群的搭建。后续将为大家介绍Redis集群的常用命令、Java操作Redis集群、以及与Spring/Spring MVC的整合等知识。 Redis集群搭建 要想搭建一个最简单的Redis集群,那么至少需要6个节点:3个Master和3个Slave。为什么需要3个Master呢? Redis集群模型 这里,我将采用一种“偷懒”的方式,在一个Linux虚拟机上搭建6个节点的Redis集群。 gem install redis 第四步:让Redis集群工作起来! ? 启动6个Redis实例 接下来,我们要通过Ruby脚本来创建集群了。 ? 第五步:验证Redis集群搭建是否成功 ? cluster info/cluster nodes ? 搭建起来的Redis集群 到这里,Redis集群的搭建就完毕了,See U~

    1.6K41发布于 2018-08-21
  • 来自专栏Danny的专栏

    【MySQL集群】——Java程序连接MySQL集群

    https://blog.csdn.net/huyuyang6688/article/details/47856645 上篇简单介绍了如何在Windows环境下建立配置MySQL集群,这里用一个实现注册功能的小 Demo通过jdbc的方式连接到MySQL集群中。 外部程序想要远程连接到mysql集群,还需要做的一个操作就是设置sql节点的mysql可以被远程连接。 ,就可以实现多个服务器上发布的外部程序都可以共享、操作整个集群中的数据。 但此时的MySQL集群还无法实现负载均衡和读写分离的效果,只起到了数据备份的作用。后面将继续研究如何实现MySQL集群的负载均衡和读写分离。

    5K20发布于 2018-09-13
  • 来自专栏理想,技术,生活 三重凑

    搭建Lotus测试网集群挖矿集群

    下面我们就看看具体怎么搭建这个集群。 接下来按照步骤(4)的方法启动 N 个 Worker 节点 到此,整个集群就开始运行了,等你的 Miner 节点准备好密封数据(PreCommit),Worker 就会开始拉取数据计算了,计算完之后会

    5.1K20发布于 2020-02-14
领券