- 综合排序
- 最热优先
- 最新优先
- 来自专栏SDNLAB
数据中心网络架构—VL2
三、 VL2数据中心网络架构 VL2数据中心网络架构由微软提出，在观察了多个实际数据中心中的流量后，总结数据中心流量特点，设计了一个虚拟2层的网络架构。 3.1 VL2架构 如图4所示，VL2架构分为底层服务器和上层交换机两层架构，这两层之间使用机架交换机（top of rack，简称ToR）连接。 VL2架构 3.2 VL2的寻址方式 VL2在数据中心内部使用两种地址，其中底层服务器使用AAs（Application Addresses）, 上层交换机使用LAs（Locator Addresses VL2的目录更新机制 四、总结 vl2通过一种新的网络架构解决传统数据中心中存在的超额认购，资源利用率低，数据中心成本高等问题。增加数据中心内的带宽，并用一种新的寻址方式解决资源分段问题。 但VL2架构需要更改服务器的主机协议栈，并且需要一个高性能，低时延的目录系统提供映射查找服务，为数据中心带来额外的开销。
4.1K40发布于 2018-03-28 - 来自专栏小怪聊职场
爬虫架构|利用Kafka处理数据推送问题（2）
在前一篇文章爬虫架构|利用Kafka处理数据推送问题（1）中对Kafka做了一个介绍，以及环境搭建，最后是选择使用阿里云的Kafka，这一篇文章继续说使用阿里云的Kafka的一些知识。 * 消息队列 Kafka 是 VIP 网络架构，会主动掐掉空闲连接（一般 30 秒没活动），也就是说，不是一直活跃的客户端会经常收到”connection rest by peer”这样的错误，因此建议都考虑重试 消息队列 Kafka 是 VIP 网络架构，会主动掐掉空闲连接（一般 30 秒没活动），也就是说，不是一直活跃的客户端会经常收到”connection rest by peer”这样的错误，因此建议都考虑重试 示例1：Consumer Group A 订阅了 Topic A，并开启三个消费实例 C1、C2、C3，则发送到 Topic A 的每条消息最终只会传给 C1、C2、C3 的某一个。 ； 把数据提交到线程池进行并发处理； 等并发结果返回成功再次poll数据执行。
1.9K120发布于 2018-05-21 - 来自专栏DDD
架构与架构师2
最近闲了，看了几次李运华关于架构的视频，不禁再次反问架构是什么？架构师的职责是什么？ 对于这两个问题，之前也总结过一篇《架构和架构师》[1]，再结合他的专栏文章和视频，补充一下 架构 李运华给架构的定义：软件架构指软件系统的顶层结构，缩句成架构指结构，而结构的修饰语蕴含了太多东西，抽象不够直白 它分别包含了程序和数据结构两部分。现代软件开发往往利用模块作为合成的单位。模块的接口表达了由该模块提供的功能和调用它时所需的元素。模块是可能分开被编写的单位。 ，得行多少路，抽象了多少回，才有的认知，所以我也不打算靠记忆了，不过对于模块和组件的认知很独到 虽然架构定义众家纷说，但对于如何描述架构还是有共识的，那就是“4+1视图”，在《架构和架构师》[2]也描述了 这个过程，回顾最近几个系统设计的确是这样的 1.业务方提出一个业务，刚开始可能只是个目标，轮廓2.与业务方、产品不停的交流，交流得越深入，需求就越明确3.理解业务并明确需求后，划分模块，不管是传统画ER
63210发布于 2021-03-23 - 来自专栏ops技术分享
Angular 2 架构（上)
Angular 2 应用程序应用主要由以下 8 个部分组成： 1、模块 (Modules) 2、组件 (Components) 3、模板 (Templates) 4、元数据 (Metadata) 5、数据绑定 Angular 模块是一个带有 @NgModule 装饰器的类，它接收一个用来描述模块属性的元数据对象。 几个重要的属性如下： declarations （声明） - 视图类属于这个模块。 ---- 元数据(Metadata) 元数据告诉 Angular 如何处理一个类。 考虑以下情况我们有一个组件叫作 Component ，它是一个类，直到我们告诉 Angular 这是一个组件为止。 你可以把元数据附加到这个类上来告诉 Angular Component 是一个组件。 在 TypeScript 中，我们用 装饰器 (decorator) 来附加元数据。 实例 @Component({ selector : 'mylist', template : '<h2>菜鸟教程</h2>' directives : [ComponentDetails
2.6K10发布于 2021-07-26 - 来自专栏ops技术分享
Angular 2 架构（下)
数据绑定(Data binding) 数据绑定为应用程序提供了一种简单而一致的方法来显示数据以及数据交互，它是管理应用程序里面数值的一种机制。 通过这种机制，可以从HTML里面取值和赋值，使得数据的读写，数据的持久化操作变得更加简单快捷。 如图所示，数据绑定的语法有四种形式。 指令是一个带有"指令元数据"的类。在 TypeScript 中，要通过 @Directive 装饰器把元数据附加到类上。 ---- 服务(Services) Angular2中的服务是封装了某一特定功能，并且可以通过注入的方式供他人使用的独立模块。 服务分为很多种，包括：值、函数，以及应用所需的特性。 以下是几种常见的服务： 日志服务 数据服务 消息总线 税款计算器 应用程序配置 以下实例是一个日志服务，用于把日志记录到浏览器的控制台： export class Logger { log(msg:
3.8K20发布于 2021-07-26 - 来自专栏java学习java
MySQL逻辑架构（2）
而磁盘 I/O 需要消耗的时间很多，而在内存中进行操 作，效率则会高很多，为了能让数据表或者索引中的数据随时被我们所用，DBMS 会申请 占用内存来作为 数据缓冲池 ，在真正访问页面之前，需要把在磁盘上的页缓存到内存中的 在 InnoDB 存储引擎中有一部分数据会放到内存中，缓冲池则占了这部分内存的大部分，它用来存储各种 数据的缓存，如下图所示： 从图中，你能看到 InnoDB 缓冲池包括了数据页、索引页、插入缓冲、锁信息 缓冲池的预读特性： 2. 查询缓存 那么什么是查询缓存呢？ 查询缓存是提前把 查询结果缓存 起来，这样下次不需要执行就可以直接拿到结果。 set global innodb_buffer_pool_size = 268435456; 3.4 多个Buffer Pool实例 innodb_buffer_pool_instances = 2 这样就表明我们要创建2个 Buffer Pool 实例。
69720编辑于 2022-11-15 - 来自专栏charlieroro
Cilium架构 (Cilium 2)
Cilium架构 译自：http://docs.cilium.io/en/stable/architecture/ 本文档描述了Cilium的架构。 它通过记录BPF数据路径(datapath)的钩子来实现Cilium数据路径，那么Cilium数据路径是如何与容器编排层继承，以及如何在各层(如BPF数据路径和Cilium代理)之间更新对象的？ 如下所述，Cilium使用它来加速数据路径的重定向。 Cilium通过连接这些组件实现了灵活高效的数据路径。下面将展示连接单个节点上的endpoint可能存在的数据流(进入一个endpoint以及endpoint到网络设备)。 基于veth的数据路径和基于ipvlan的数据路径的对比 |基于ipvlan的数据路径目前仅在技术预览中，用于实验目的。该限制会在后续的Cilium发布中移除。
2.7K21发布于 2020-04-24 - 来自专栏智能时刻
「数据架构」数据架构的未来
对数据架构师的业务理解已经变得越来越重要，Algmin说，现在它对数据架构师的成功至关重要。 在数据架构师的角色包含更多商业智慧的同时，挖掘和承担技术实现的愿望和能力仍然很重要。 数据架构的扩展作用是他继续看到的。 最近的数据体系结构的未觉察 阿尔格明接着研究了最近的预测，结果并没有如预期的那样： “数据仓库死了！ 数据架构与企业架构的融合 “数据架构师的热度指数正在上升，但企业架构热度指数非常非常冷，而且已经有一段时间了。” 数据架构的含义 数据架构创新在相关技术领域正经历着类似的模式，这些领域的用例潜力尚处于初级阶段，例如区块链和图形数据库，并且数据架构的角色正在发生变化以适应。 在地平线上：未来的热门数据架构主题 Algmin预测了ML和AI在元数据管理和数据治理中的扩展，比如区块链和分布式账本。“我们将开始看到，作为数据架构师，我们可以做一些真正阻碍我们的组织的事情。”
72520发布于 2020-07-20 - 来自专栏智能时刻
【数据架构】数据网格架构模式
在本文中，我将使用架构模式来描述这些交互。 数据网格架构回顾 企业数据网格由许多组件组成（更多详细信息可在此处、此处和此处获得）。 首先，可以使用“两阶段提交”(2PC) 等协议跨多个数据库同步更新数据，但这种方法通常复杂且成本高，并且通常保留用于保持多个数据源同步绝对关键的情况. （注意：这里有更多详细信息供那些寻找有关 CDC 如何在企业中工作的详细信息的人使用） Figure 2, Data Mesh Pattern: Change Data Capture 但是 CDC 】公众号 【jiagoushipro】 【超级架构师】 精彩图文详解架构方法论，架构实践，技术原理，技术趋势。 QQ群 【792862318】深度交流企业架构，业务架构，应用架构，数据架构，技术架构，集成架构，安全架构。以及大数据，云计算，物联网，人工智能等各种新兴技术。
93420编辑于 2022-04-06 - 来自专栏学习笔记持续记录中...
应用的架构演变（2）
应用的架构演变图 ? 上图描述了从单一应用架构-->垂直应用架构-->分布式服务架构-->流动计算架构，应用的发展演变过程 单一应用架构 当网站流量很小时，只需一个应用，将所有功能都部署在一起，以减少部署节点和成本。 此时，用于简化增删改查工作量的数据访问框架（ORM）是关键 ? 单一应用架构图 适用于小型网站，小型管理系统，将所有功能都部署到一个功能里，简单易用。 ，降低了维护和部署的难度，团队各司其职更易管理性能扩展也更方便，更有针对性 缺点： 每个应用的完整性，比如页面的修改都要重新部署，没有做到界面+业务逻辑的实现分离 2.每个应用无法做到完全的独立，比如订单可能要用到用户的信息 流动计算架构图 流动计算架构引入调度中心，维护注册中心的所有服务调用关系，实时管理服务集群，根据不同的服务的访问请求量调整服务器数量，并且根据相同服务不同服务器请求的数量调整下次访问哪台服务器处理请求，
1.1K20发布于 2020-03-17 - 来自专栏大数据进阶
flink系列(2)-基础架构
上一篇从宏观上说了一些基础组件，这一篇，我们来说一下flink架构中涉及的一些组件 ? 和大多数的分布式系统一样，flink也是分层的，每一层所包含的组件都提供了抽象接口，用于服务于上层组件。 Deploy, core，APIS & Libraries Deploy： 该层主要涉及了Flink的部署模式，Flink支持多种部署模式：本地、集群（Standalone/YARN）、云（GCE/EC2）
53530发布于 2019-09-17 - 来自专栏cloudskyme
shiro(2)-架构与配置
授权操作 授权的例子就是是否可以访问某个页面，可以操作某个按钮，是否可以编缉对应的数据等。 } 2，使用注释方式 判断用户是否有 创建账户权限 //Will throw an AuthorizationException if none //of the caller’s roles imply Realm（桥梁）它是安全与数据之间的桥，它封装了比如DAO的配置信息，可以指定连接的数据源，也可使用其它的认证方式，如LDAP等。 然后看一下详细的架构图： ? 其中包括的sessiondao是管理会议数据的持久操作：SessionDAO (org.apache.shiro.session.mgt.eis.SessionDAO)，代表执行sessionManager anObject.mapProperty = key1:$object1, key2:$object2 2) [users] 在用户比较少的情况下这种配置信息是有效的 [users] admin =
1.2K110发布于 2018-03-20 - 来自专栏linux技术分享
mysql架构sql基础2
2 然后 group by 分组 然后在count 加起来 统计每个国家的人口总数 select countrycode,sum(population) from world.city group by countrycode; 1先from 表拿数据 2然后 group by 分组 然后 sum 人口 加起来 统计每个国家有多少城市,并显示城市名 select countrycode,count (*) , group_concat(name) from world.city group by countrycode; 1先from 表拿数据 2然后按照国家代码分组 3先把每个国家有多少城市加起来 2按照 group by 条件升序排序 3针对 group by 分组,去重复 变成 4然后 把每个分组对应的数据行进行count(数一下组内有多少行) 5然后在group_concat 列转换成行显示按照 limit N offset H limit 3 offset 5 跳过前5行显示6-8行数据 limit M,N limit 5,3 跳过5行显示6-8行数据 统计世界上人口数最多的10个城市 select
63841编辑于 2021-12-24 - 来自专栏全栈程序员必看
J2EE架构简介_手机架构
以上层次一般也指三层应用，因分布在三个不同位置：客户计算机、J2EE服务器及后台的数据库或过去遗留下来的系统。 J2EE组件 J2EE应用程序是由组件构成的。 JavaBean组件架构 在服务器和客户端两层中也可能包括了基于JavaBean的组件架构，通过JavaBean来实现数据的流动，可以是在应用程序客户或Applet与运行在 J2EE服务器上的组件之间 ，或者是在J2EE服务器和后台数据库之间。 实体Bean代表的是持久的数据，即存储在数据库表中的一行记录，即使客户终止或者服务器关闭，在J2EE底层的会服务确保实体Bean的数据被保存下来。 所开发的应用程序使用EJB架构来实现可扩展性及管理事务和安全。
1.6K30编辑于 2022-11-10 - 来自专栏DevOps
大数据架构：全网最全大数据架构生态
这些数据散落在各个地方，我们需要将这些数据融合到一起，然后从这些海量数据中计算出一些有价值的内容。此时第一步需要做的是把数据采集过来。数据采集是大数据的基础，没有数据采集，何谈大数据！ Flume、Logstash和FileBeat常用于日志数据实时监控采集，它们之间的细节区别见表1； Sqoop和Datax常用于关系型数据库离线数据采集，它们之间的细节区别见表2； Cannal和Maxwell Flume、Logstash和FileBeat的技术选型如图2所示。 Sqoop和Datax之间的技术选型如图3所示。 Cannal和Maxwell之间的技术选型如图4所示。 2、数据存储技术框架 数据的快速增长推动了技术的发展，涌现出了一批优秀的、支持分布式的存储系统。 数据存储技术框架包括HDFS、HBase、Kudu、Kafka等。 （2）实时数据计算 业内最典型的实时数据计算场景是天猫“双十一”的数据大屏。 数据大屏中展现的成交总金额、订单总量等数据指标，都是实时计算出来的。
1.8K10编辑于 2024-03-29 - 来自专栏程序那些事
架构之:数据流架构
在日常的工作中，我们会经常遇到这种数据处理的任务，那么对于这样的任务我们就可以采用数据流架构。 数据流架构 在实际工作中的流有很多种，最常见的就是I/O流，I / O缓冲区，管道等。 数据的流向可以是带有循环的拓扑图，没有循环的线性结构或者树形结构等。 数据流架构的主要目的是实现重用和方便的修改。 它适用于在顺序定义的输入和输出上进行一系列定义明确的独立数据转换或计算，例如编译器和业务数据处理应用程序。一般来说有三种基本的数据流结构。 顺序批处理 顺序批处理是最常见也是最基础的数据流架构。 这种架构的主要优点在于它的并发和增量执行。 这种模式下，最重要的组件就是过滤器，过滤器是独立的数据流转换器。它转换输入数据流的数据，对其进行处理，并将转换后的数据流写入管道以供下一个过滤器处理。 总结 上面我们介绍了几种数据流的架构方式，希望大家能够喜欢。
1.1K51发布于 2021-07-15 - 来自专栏数商云贸
大型网站架构系列：电商网站架构案例(2)
电网网站架构案例系列的第二篇文章。主要讲解网站架构分析，网站架构优化，业务拆分，应用集群架构，多级缓存，分布式Session。 大量应用存在冗余代码服务器SESSION同步耗费大量内存和网络带宽数据需要频繁访问数据库，数据库访问压力巨大。 （分布式部署，集群部署和负载均衡）多级缓存单点登录（分布式Session）数据库集群（读写分离，分库分表）服务化消息队列其他技术 六、网站架构优化6.1业务拆分 根据业务属性进行垂直切分，划分为产品子系统 拆分后的架构图： 参考部署方案2 （1）如上图每个应用单独部署 （2）核心系统和非核心系统组合部署 6.2应用集群部署（分布式，集群，负载均衡） 分布式部署：将业务拆分后的应用单独部署，应用直接通过RPC 如果二级缓存也没有，则访问数据库。 缓存的比例，一般1:4，即可考虑使用缓存。（理论上是1:2即可）。
2.6K41发布于 2019-05-09 - 来自专栏嵌入式ARM和Linux
MIPS架构深入理解2-MIPS架构体系
SmartMIPS: 为提高MIPS架构的加密性能而扩展的一个模块。这个功能扩展还是比较有用的，尤其是在当下这个特别注重数据安全的时代。 MT: 将硬件多线程技术添加到MIPS核中。 2.5 存储器与寄存器的数据类型 MIPS架构CPU单条指令可以可以存取1-8个字节。 2.5.1 整数数据类型 字节（byte）和半字（halfword）在load时，分为两种情况。 数据类型 字节数 助记符 dword 8 ld word 4 lw halfword 2 lh byte 1 lb 无符号指令lbu和lhu实施0扩展；也就是说，将具体的值加载到32位寄存器的低有效位 有时候，可能确实需要访问非对齐的数据。MIPS架构确实也提供了一个ulw宏指令，由两个指令组成，比一个个字节的加载，移位，再相加，更高效。 默认，C编译器会正确对齐所有数据，但是也有例外情况（比如，从文件中导入数据或者与其它CPU共享数据时），这时候可能要求能够有效地处理非对齐的整数。
7.2K20编辑于 2022-08-15 - 来自专栏前端博客
Taro架构构析(2)：Taro 设计思想及架构
为何我们要用 React 来写小程序 - Taro 诞生记 https://aotu.io/notes/2018/06/25/the-birth-of-taro/index.html转载本站文章《Taro架构构析 (2)：Taro 设计思想及架构》,请注明出处：https://www.zhoulujun.cn/html/webfront/AppDev/taro/8497.html
1K10编辑于 2023-04-09 - 来自专栏程序那些事
架构之:数据流架构
文章目录 简介 数据流架构 顺序批处理 管道和过滤器 流程控制 总结 简介 有时候我们的系统主要是对输入的数据进行处理和转换，这些处理和转换是互相独立的，在这种情况下，输入的数据经过转换之后被放到指定的输出中去 在日常的工作中，我们会经常遇到这种数据处理的任务，那么对于这样的任务我们就可以采用数据流架构。 数据流架构 在实际工作中的流有很多种，最常见的就是I/O流，I / O缓冲区，管道等。 数据的流向可以是带有循环的拓扑图，没有循环的线性结构或者树形结构等。 数据流架构的主要目的是实现重用和方便的修改。 它适用于在顺序定义的输入和输出上进行一系列定义明确的独立数据转换或计算，例如编译器和业务数据处理应用程序。 一般来说有三种基本的数据流结构。 顺序批处理 顺序批处理是最常见也是最基础的数据流架构。 总结 上面我们介绍了几种数据流的架构方式，希望大家能够喜欢。
1.2K20发布于 2021-06-18
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号