- 综合排序
- 最热优先
- 最新优先
- 来自专栏AI系统
【AI系统】计算图的控制流实现
这样就存在一个问题，如果要部署带 Control Flow 的模型就会比较困难，如何灵活部署带控制流的计算图到不支持 Python 的设备上？计算图中的控制流实现，与控制流图并不是一个概念。 目前基于计算图，在控制流解决方案上，主要采用了三类设计思路：复用宿主语言：复用前端宿主语言的控制流语言结构，用前端语言中的控制逻辑驱动后端计算图的执行；支持控制流原语：AI 框架的后端对控制流语言结构进行原生支持 ，计算图中允许计算流和控制流混合；源码解析：前端对高级编程语言的代码进行解析称计算图，后端对控制流语言结构解析成子图，对计算图进行延伸。 TensorFlow 计算图中支持控制流的方案，主要分为 3 层。暴露给开发者用于构建计算图的前端 API，这些 API 会被转换成更低等级的控制流原语，再由计算图优化器进一步进行改写。 源码解析源码解析的方式是：前端对高级编程语言的代码进行解析称计算图，后端对控制流语言结构解析成子图，对计算图进行延伸。
58110编辑于 2024-12-06 - 来自专栏流图计算
TuGraph Analytics 流图计算之行为路径归因
作者：李洁峰 TuGraph Analytics（内部项目名 GeaFlow）是蚂蚁集团开源的分布式实时图计算引擎，即流式图计算。 通过 SQL + GQL 融合分析语言对表模型和图模型进行统一处理，实现了流、批、图一体化计算，并支持了 Exactly Once 语义、高可用以及一站式图研发平台等生产化能力。 接下来给大家分享一下 TuGraph Analytics 是如何保证计算结果准确性的同时也满足了近线实时的时效性，一种基于实时图计算引擎进行渠道归因和路径分析计算的新尝试。 用户行为日志中的交易数据是关键点，它们会触发相关用户的子图归因路径匹配计算，计算结果为最终的归因路径。 再次，在大量的交易数据涌入之后能够同时对所有的交易进行归因路径计算，保证输出的时效性。 TuGraph Analytics 作为一个实时流图计算引擎，能够满足以上的所有需求。
67920编辑于 2023-09-13 转载:【AI系统】计算图的控制流实现
这样就存在一个问题，如果要部署带 Control Flow 的模型就会比较困难，如何灵活部署带控制流的计算图到不支持 Python 的设备上？计算图中的控制流实现，与控制流图并不是一个概念。 目前基于计算图，在控制流解决方案上，主要采用了三类设计思路：复用宿主语言：复用前端宿主语言的控制流语言结构，用前端语言中的控制逻辑驱动后端计算图的执行；支持控制流原语：AI 框架的后端对控制流语言结构进行原生支持 ，计算图中允许计算流和控制流混合；源码解析：前端对高级编程语言的代码进行解析称计算图，后端对控制流语言结构解析成子图，对计算图进行延伸。 TensorFlow 计算图中支持控制流的方案，主要分为 3 层。暴露给开发者用于构建计算图的前端 API，这些 API 会被转换成更低等级的控制流原语，再由计算图优化器进一步进行改写。 源码解析源码解析的方式是：前端对高级编程语言的代码进行解析称计算图，后端对控制流语言结构解析成子图，对计算图进行延伸。
61710编辑于 2024-12-13- 来自专栏数据科学与人工智能
计算流和控制流
今天我们一起来学习计算和控制流吧。 3.赋值语句的执行语义为： ①计算表达式的值，存储起来 ②贴上变量标签以便将来引用 4.与计算机运行过程中的“计算”和“存储”相对应。 5.“控制器确定下一条程序语句”即对应“控制”。 三、计算和控制流 1.计算与流程 ? 2.控制流语句决定下一条语句 四、计算与流程 数据是对现实世界处理和过程的抽象，各种类型的数据对象可以通过各种运算组织成复杂的表达式。 六、控制流语句 1.控制流语句用来组织语句描述过程 ? 2控制流语句举例 ? ? 七、分析程序流程 1.代码 ? 2.流程图 ? 练一练 •画出下列程序的流程图 ? 上期练习参考答案 ?
1.7K30发布于 2020-08-20 - 来自专栏流图计算
TuGraph任务能力增强：通过API定制流图计算逻辑
，包含图构建、图计算及遍历。 Static Graph API：静态图计算API，基于该类API可以进行全量的图计算或图遍历。 Dynamic Graph API：动态图计算API，GeaFlow中GraphView是动态图的数据抽象，基于GraphView 之上，可以进行动态图计算或图遍历。 图片 Stream API：GeaFlow提供了一套通用计算的编程接口，包括source构建、流批计算及sink输出。在GeaFlow中支持Batch和Stream两种类型。 Stream API：流计算API，GeaFlow中StreamView是动态流的数据抽象，基于StreamView之上，可以进行流计算。
53130编辑于 2023-08-15 - 来自专栏韩曙亮的移动开发专栏
【软件工程】数据流图 ( 数据流图简介 | 数据流图概念 | 数据流 | 加工 | 数据存储 | 外部实体 | 数据流图分层 | 顶层数据流图 | 中层数据流图 | 底层数据流图 )
文章目录 一、数据流图 ( DFD ) 简介 二、数据流图 ( DFD ) 概念符号 1、数据流 2、加工 ( 核心 ) 3、数据存储 4、外部实体 三、数据流图 ( DFD ) 分层 1、分层说明 2、顶层数据流图 3、中层数据流图 4、底层数据流图 一、数据流图 ( DFD ) 简介 ---- 数据流图 ( Data Flow Diagram ) : 在 需求分析 阶段 , 使用的工具 , 在 , 第二层是 0 层数据流图 , \cdots , 最底层是 底层数据流图 , “顶层数据流图” 与 “底层数据流图” 之间是若干 中层数据流图 , 中层数据流图 需要进行编号 , 从 0 , 系统内部模块之间的数据交换 是没有体现的 ; 3、中层数据流图 将 “顶层数据流图” 进行细化 , 细化后的 0 层数据流图 , 与 顶层数据流图 比较没有变化的部分 : 外部实体 , 外部实体与系统之间的数据流 , 要保证 上一层数据流图 与 下一层数据流图 保持平衡 , 这就是 数据流图平衡原则 ;
29.8K00编辑于 2023-03-28 - 来自专栏数据科学
redis流计算
设计概要： 把数据流形象话的比作水流 使用redis流和流的存储功能做水库，分别设计进水和出水系统 使用tornado可以同时支持多个进出水水管并行运行，互不干扰 使用streamz库灵活实现加在进出水管上的算法 ，可以实现限速rate_limit、过滤filter、批处理map，合并zip，缓冲buffer等特性 使用类库¶ 使用了tornado的异步和streamz的流处理两个库，需要redis 5.0以上版本 self.stopped = True self.finalize(self, self.stop, weakref.ref(self)) 出水口设计¶ 从redis读取流数据生成
1.8K50发布于 2018-12-20 - 来自专栏流图计算
2023开放原子全球开源峰会，蚂蚁图计算平台开源业内首个工业级流图计算引擎
在高峰论坛上，蚂蚁技术研究院院长、图计算负责人陈文光宣布开源 TuGraph 图计算平台核心成员——工业级流式图计算引擎 TuGraph Analytics。 图片 图（Graph）是一种抽象的数据结构，由顶点和边构成。图计算是一种以图结构建模的算法模型，可对大规模数据进行关系挖掘和复杂计算，实现知识推理和事件溯源。 图计算目前已广泛应用在金融、政务、医疗等领域，备受全球研发机构和顶尖科技公司关注。流式图计算是一种将流式计算和图计算结合的交叉创新，融合了流式计算的高度实效性和图计算的灵活性，攻坚难度极高。 据了解，蚂蚁从2015年开始探索图计算，布局了图数据库、流式图计算引擎、图学习等相关技术，打造了世界规模领先的图计算集群，于业界首创了工业级流式图计算引擎，多次问鼎图数据库行业权威测试 LDBC 世界冠军并保持世界纪录 此次开源的工业级流式图计算引擎是蚂蚁从2017年开始布局打造，经过五年多工业级应用大考，流式图计算做到了在千亿数据规模的“图”上秒级延迟计算，是蚂蚁风控的核心基础技术，成功解决了金融场景风险分析难、识别率低
97320编辑于 2023-07-05 - 来自专栏图与推荐
蚂蚁金服, 开源业内首个工业级流图计算引擎
在高峰论坛上，蚂蚁技术研究院院长、图计算负责人陈文光宣布开源 TuGraph 图计算平台核心成员——工业级流式图计算引擎 TuGraph Analytics。 （图：陈文光宣布开源业内首个工业级流式图计算引擎 TuGraph Analytics） 去年9月，蚂蚁集团开源了 TuGraph 图计算平台中的图数据库 TuGraph DB。 图计算目前已广泛应用在金融、政务、医疗等领域，备受全球研发机构和顶尖科技公司关注。流式图计算是一种将流式计算和图计算结合的交叉创新，融合了流式计算的高度实效性和图计算的灵活性，攻坚难度极高。 据了解，蚂蚁从2015年开始探索图计算，布局了图数据库、流式图计算引擎、图学习等相关技术，打造了世界规模领先的图计算集群，于业界首创了工业级流式图计算引擎，多次问鼎图数据库行业权威测试 LDBC 世界冠军并保持世界纪录 （图：蚂蚁流式图计算团队负责人潘臻轩在本次峰会上介绍 TuGraph Analytics） 图计算是下一代人工智能关键核心技术。
1.1K30编辑于 2023-09-04 - 来自专栏CKL的思考空间
学习累积流图
01 累积流图是如何生成的？团队需要根据自己的研发过程流程节点，记录某天每个节点上的数量，然后以日期为横坐标，卡片数量为纵坐标，生成如下图所示的图形，就是累积流图了。 燃尽图对于预测何时完成工作很有用，但是它只有结果，没有过程，不利于问题分析。 02 那么，对于累积流图，我们需要关注一些什么呢？以上图为例，我们需要关注以下几点。 在现实的团队中，不太可能出现完美的累积流图，那么，我们可以通过累积流图发现哪些问题呢？ 如上图，在迭代的后期，卡片状态都没有变化了，那么就需要关注下团队在干什么，放假了？ 04 对于累积流图，我们需从更长的时间周期来观察和分析问题。当状态的曲线发生变化时，应当以分析问题为主，它是用于管理流程和改善服务交付结果的重要工具。 用累积流图观察一个团队的工作进展时，数值本身不能说明问题，但数值的变化趋势会给我们一些预警，告诉我们哪个环节可能碰到了问题或成为瓶颈。
1K10编辑于 2023-08-28 - 来自专栏数据科学
股票实时流计算
df.to_msgpack()) time.sleep(10) In [2]: q1 = quotation_engine.all df = pd.DataFrame(q1).T 定义数据流¶ c8f2c3fae6ae'); {"model_id": "8629bab4ae2a42fe908a3fe8b82354c0", "version_major": 2, "version_minor": 0} 定义流算法 bootstrap.servers': 'localhost:9092','message.max.bytes': 5242880}) p.produce('test-quant',df.to_msgpack()) 流计算过程的可视化
2.9K40发布于 2018-12-20 - 来自专栏NebulaGraph 技术文章
图计算 on nLive：Nebula 的图计算实践
图计算之 nebula-plato [图计算 on nLive：Nebula 的图计算实践] nebula-plato 的分享主要由图计算系统概述、Gemini 图计算系统介绍、Plato 图计算系统介绍以及 图计算系统 图的划分 [图计算 on nLive：Nebula 的图计算实践] 图计算系统概述部分，着重讲解下图的划分、分片、存储方式等内容。 [图计算 on nLive：Nebula 的图计算实践] （图：以顶点为中心的编程模型） [图计算 on nLive：Nebula 的图计算实践] （图：以边为中心的编程模型） 这两种模式以顶点为中心的编程模型比较常见 Gemini 图计算系统 Gemini 图计算系统是以计算为中心的分布式图计算系统，这里主要说下它的特点： CSR/CSC 稀疏图/稠密图 push/pull master/mirror 计算/通信 协同工作 Nebula 图计算 [图计算 on nLive：Nebula 的图计算实践] 目前 Nebula 图计算集成了两种不同图计算框架，共有 2 款产品：nebula-algorithm 和 nebula-plato
2.3K40编辑于 2022-02-22 - 来自专栏猫头虎博客专区
Java IO流框架图
Java IO流框架图 摘要： Java的I/O流框架是一套用于数据输入和输出的类和接口，提供了灵活、高效的方法来处理文件和其他数据源。 Java提供了强大的I/O流框架，用于管理数据流动和处理。本文将介绍Java I/O流框架，总结其主要组件和用途。 I/O流框架图： +---------------------+ | InputStream | +----------|----- b.字符流：以字符为单位，可以读写文本数据。 3. 功能： a. 节点流：实际传输数据。 b.过滤流：强加节点流功能。 流在开发中如何应用？ 创建节点流(字节流) 创建桥转换流，同时设置编码方式 包装过滤流 读/写操作 关闭流(只需要关闭最后层的流) 总结： Java I/O流框架是一组用于处理数据输入和输出的类和接口的集合。
25810编辑于 2024-04-07 - 来自专栏软件方法
数据流图、FBI
1、以下数据流图摘自上世纪80年代的一本建模书籍。从图形猜测，以下说法正确的是（） ? A) 图1表达业务建模，图2表达需求，图3表达分析。 B) 图1表达需求，图2表达分析，图3表达设计。 C) 图1表达需求，图2和图3表达分析。 D) 图1表达业务建模，图2和图3表达需求。 2、抵触建模的心态中，有的属于过于自卑，有的属于过于自大。 根据这个分类，以下选项的言论中，和其他几个选项不同的是（） A) 等你画完图，我都做完了。 B) 我这个产品所有医院都可以用，光去调研一家医院，不是忽略了其他医院的需求吗？ D) 以关系户企业为目标组织做需求启发和需求定义，但在分析和设计工作流考虑将来做面向全国同类企业产品时的复用。
87120发布于 2019-09-23 - 来自专栏机器人课程与技术
ROS1云课→06节点消息流（计算图级）
在这一层级中最基本的概念包括节点、节点管理器、参数服务器、消息、服务、主题和消息记录包，这些概念都以不同的方式向计算图级提供数据： 节点（Node） 节点是主要的计算执行进程。 需要注意的是，由于ROS本身就是一个分布式网络系统，你可以在某一台计算机上运行节点管理器，在该管理器或其他计算机上运行节点。 For additional information, see http://wiki.ros.org/rosbag 在下图中可以看到计算图级的图形化表示（节点状态图）。 导航案例： 图形化展示节点信息流工具： ----
95420编辑于 2022-09-26 - 来自专栏Python与算法之美
动态计算图
Pytorch底层最核心的概念是张量，动态计算图以及自动微分。 本节我们将介绍 Pytorch的动态计算图。 包括： 动态计算图简介 计算图中的Function 计算图和反向传播 叶子节点和非叶子节点 计算图在TensorBoard中的可视化 一，动态计算图简介 ? Pytorch的计算图由节点和边组成，节点表示张量或者Function，边表示张量和Function之间的依赖关系。 Pytorch中的计算图是动态图。这里的动态主要有两重含义。 第一层含义是：计算图的正向传播是立即执行的。无需等待完整的计算图创建完毕，每条语句都会在计算图中动态添加节点和边，并立即执行正向传播得到计算结果。 第二层含义是：计算图在反向传播后立即销毁。 下次调用需要重新构建计算图。
2.5K30发布于 2020-07-20 - 来自专栏Golang开发
实时流计算框架——Storm
storm jar topologyDemo.jar com.baxiang.topologyTest topologyDemo 核心概念 Topologies 计算拓扑,由spout和bolt组成的 Streams 消息流，抽象概念，没有边界的tuple构成 Spouts 消息流的源头，Topology的消息生产者 Bolts 消息处理单元，可以做过滤、聚合、查询、写数据库的操作 Tuple
2.5K30发布于 2019-05-29 - 来自专栏机器学习、深度学习
CNN光流计算2
FlowNet 2.0: Evolution of Optical Flow Estimation with Deep Networks CVPR2017 Code: https://github.com/lmb-freiburg/flownet2
1.4K30发布于 2019-05-26 - 来自专栏韩曙亮的移动开发专栏
【软件工程】数据流图 ( 数据字典 | 数据流图平衡原则 | 父图与子图平衡 | 子图内平衡 | 数据流图绘制原则 )
文章目录 一、数据字典 二、数据流图平衡原则 1、父图 ( 上层数据流图 ) 与 子图 ( 下层数据流图 ) 平衡 2、子图内平衡 三、数据流图绘制原则 一、数据字典 ---- 数据字典 可以 配合 ---- 数据流图平衡原则 : 父图 ( 上层数据流图 ) 与 子图 ( 下层数据流图 ) 之间的平衡 子图 内部的平衡 1、父图 ( 上层数据流图 ) 与 子图 ( 下层数据流图 ) 平衡 父图 ( 上层数据流图 ) 与 子图 ( 下层数据流图 ) 平衡 : 利用 数据流图平衡原则 , 可以找出 在 细化上层数据流图 时 , 忽略的 数据流 ; 根据 顶层数据流 可以 确定缺失的 底层数据流 ; 层数据流图 中出现过 ; 找 顶层数据流图 中缺失的数据流时 , 查看 0 层数据流图中 , 有没有出现缺失的数据流 ; 在 顶层数据流图 与 0 层数据流图 之间 , 只能确定 外部实体 与 系统 之间的数据流 , 系统内部的数据流 , 在 顶层数据流图中 , 是没有体现的 ; 父图 ( 上层数据流图 ) 与 子图 ( 下层数据流图 ) 之间的平衡匹配方法 : ① 个数一致 : 两层数据流图中的
4K00编辑于 2023-03-28 - 来自专栏精益六西格玛资讯
如何创建价值流图（VSM）？
如何创建价值流图（VSM）？第一步是从客户的角度准确识别价值。换句话说，是客户指定他们认为你的产品或服务有什么价值。图片以下是入门的基本步骤：对生产产品或服务的整个过程进行演练。 制作流程当前状态的价值流图（VSM）。收集数据，例如时间、质量或每个步骤可用的任何其他资源。然后，分析价值流图（VSM）上的当前任务：确定改进的机会。识别可能限制流量的瓶颈和任何其他障碍。 创建一个未来状态图来说明所需的目标。这个未来的地图应该使可视化更容易获得更好的视角。设计将未来状态付诸行动的计划。请记住，价值流图（VSM）应该表示或显示从供应商到客户的整个流程，所以从开始到结束。 这还应显示与VSM（价值流图）有关的所有数据流。创建完此VSM（价值流图）后，您应该能够确定延迟发生的位置，或者是否存在任何过量库存或障碍。价值流图（VSM）是精益生产提供的最重要工具之一。 拥有VSM（价值流图）将使您保持领先，因为您将始终准确地知道您的企业制造过程中当前正在发生的事情。了解什么可以增加价值并消除浪费将使您的业务保持良好状态！
1K20编辑于 2022-09-07
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号