- 综合排序
- 最热优先
- 最新优先
- 来自专栏finleyMa
Jenkins pipeline 3 -- post 部分
post 钩子 post 步骤在Jenkins pipeline语法中是可选的，包含的是整个pipeline或阶段完成后一些附加的步骤。 比如我们希望整个pipeline执行完成之后或pipeline的某个stage执行成功后发生一封邮件，就可以使用post，可以理解为”钩子“。 根据pipeline或阶段的完成状态，post部分分成多种条件块，包括： • always：不论当前完成状态是什么，都执行。 • changed：只要当前完成状态与上一次完成状态不同就执行。 以下是 post 部分的完整示例 pipeline { agent any stages { stage('build') { steps { echo 'pipeline post success' } // 省略其他条件块 } } 参考 https://jenkins.io/zh/doc/book/pipeline/syntax/
6.6K40发布于 2019-07-09 - 来自专栏机器学习、深度学习
openGL入门3 --- rasterization pipeline
Learning Modern 3D Graphics Programming Rasterization Overview 这里简单介绍一下 rasterization 光栅化流程 1）裁剪空间变换 into normalized device coordinates 2）窗口变换 from normalized device coordinates to window coordinates 3） Vertex positions outside of this range are not visible. 3） Scan Conversion.
50320编辑于 2022-05-06 - 来自专栏全栈程序员必看
详解redis 中Pipeline流水线机制
二、pepeline的性能 1、未使用pipeline执行N条命令 2、使用了pipeline执行N条命令 3、两者性能对比 小结：这是一组统计数据出来的数据，使用Pipeline执行速度比逐条执行要快 三、原生批命令(mset, mget)与Pipeline对比 1、原生批命令是原子性，pipeline是非原子性 (原子性概念:一个事务是一个不可分割的最小工作单位,要么都成功要么都失败。 处理一件事情要么都成功，要么都失败，原子不可拆分) 2、原生批命令一命令多个key, 但pipeline支持多命令（存在事务），非原子性 3、原生批命令是服务端实现，而pipeline需要服务端与客户端共同完成 如果我们像取消管道操作，用下面代码即可： $pipe->discard(); 总结：pipeline 虽然好用，但是每次pipeline 每次组装的命令个数不能没有节制，否则一次组装pipeline数据量过大 ，一方面会增加客户端的等待时间，另一方面会造成一定的网络阻塞，可以将一次包含大量命令的pipeline拆分成多次较小的pipeline来完成。
1K30编辑于 2022-07-19 - 来自专栏码农编程进阶笔记
详解redis 中Pipeline流水线机制
二、pepeline的性能 1、未使用pipeline执行N条命令 2、使用了pipeline执行N条命令 3、两者性能对比 小结：这是一组统计数据出来的数据，使用Pipeline执行速度比逐条执行要快 三、原生批命令(mset, mget)与Pipeline对比 1、原生批命令是原子性，pipeline是非原子性 (原子性概念:一个事务是一个不可分割的最小工作单位,要么都成功要么都失败。 处理一件事情要么都成功，要么都失败，原子不可拆分) 2、原生批命令一命令多个key, 但pipeline支持多命令（存在事务），非原子性 3、原生批命令是服务端实现，而pipeline需要服务端与客户端共同完成 如果我们像取消管道操作，用下面代码即可： $pipe->discard(); 总结：pipeline 虽然好用，但是每次pipeline 每次组装的命令个数不能没有节制，否则一次组装pipeline数据量过大 ，一方面会增加客户端的等待时间，另一方面会造成一定的网络阻塞，可以将一次包含大量命令的pipeline拆分成多次较小的pipeline来完成。
2.3K20发布于 2021-09-09 - 来自专栏AI异构
Intel OpenCL 之 Pipeline（二）For循环的执行机制
嵌套for循环的pipeline机制 看下面的例子： #define k_size 20 #define size 4 kernel void accum_swg (global int* a 可以看到，第0次迭代已经要输出结果了，而第3次迭代则刚刚启动，第2和第1次迭代处于中间态。如果size大于4，那么，到下一个cycle时，1将输出，4将进入，而3和2将变成中间态。 pipeline-21 嵌套循环 把loop1和loop1_1一起考虑，执行过程如下图所示： pipeline-32 可以看到，内层循环pipeline中间没有任何气泡，外层循环其实是在可以做插入的地方做内插 并列for循环的执行机制 如下图所示，并列的两个for循环如例子中的loop1, loop1_1和loop2，只能串行执行，等一个结束后下一个才开始。 pipeline-34 参考 Intel FPGA SDK for OpenCL Best Practices Guide
1.8K30发布于 2020-07-29 - 来自专栏小工匠聊架构
Netty Review - 探索Channel和Pipeline的内部机制
当数据通过Channel时，它会在Pipeline中流动，每个ChannelHandler都有机会处理它。 内部机制： Channel： Channel内部包含一个Pipeline。 当一个Channel被创建时，会创建一个新的Pipeline实例。 Channel的生命周期与Pipeline密切相关，一个Channel的事件将在其关联的Pipeline中被处理。 Pipeline： Pipeline是由一系列ChannelHandler按顺序组成的。 数据在Pipeline中流动，每个ChannelHandler按照添加的顺序逐个处理数据。 Channel的生命周期与Pipeline紧密相连，数据通过Pipeline中的ChannelHandler逐个处理。 但它并不是直接执行这些操作，而是通过一个叫做Pipeline的东西来实现的。 现在，Pipeline可以看作是一条连接了很多小工具的长链。
45211编辑于 2023-12-01 - 来自专栏机器学习与统计学
机器学习基础：令你事半功倍的pipeline处理机制
为了避免重复操作，这里就要用到机器学习中的pipeline机制 按照sklearn官网的解释 pipeline 有以下妙用： 1、便捷性和封装性：直接调用fit和predict方法来对pipeline中的所有算法模型进行训练和预测 3、安全性：训练转换器和预测器使用的是相同样本，管道有助于防止来自测试数据的统计数据泄露到交叉验证的训练模型中。 是不是有点云里雾里？ Pipeline处理机制就像是把所有模型塞到一个管子里，然后依次对数据进行处理，得到最终的分类结果， 例如模型1可以是一个数据标准化处理，模型2可以是特征选择模型或者特征提取模型，模型3可以是一个分类器或者预测模型 一个完整的Pipeline步骤举例： 1.首先对数据进行预处理,比如缺失值的处理 2.数据的标准化 3.降维 4.特征选择算法 5.分类或者预测或者聚类算法(估计器,estimator) ? 'svc__gamma':np.logspace(-2,1,4), 'svc__C':np.logspace(-1,1,3), 'vect__analyzer':['word'] }
10.3K93发布于 2020-09-08 - 来自专栏数字芯片实验室
CPU pipeline面试题Q3：我们可以任意增加CPU pipeline深度吗？
我们可以任意增加CPU pipeline深度吗？ 回答是否定的。 参加面试的工程师应该从以下方面回答这个问题： 1.pipeline需要在每个stage之间保持平衡。否则，stage之间将出现瓶颈。 通常，pipeline越深，设计pipeline就越困难。 3.CPU pipeline 需要处理结构/数据/控制hazard。pipeline 越深，控制逻辑就越复杂。 4.控制hazard可能会迫使pipeline flush，因此很少达到理论峰值性能。 6.更深的pipeline引入了物理实现的问题，例如clock tree balance、clock skew以及reset tree路由routing 7.更深的pipeline 增加了指令延迟。 8.如果pipeline 更深，我们可能会进一步增加时钟频率和pipeline 吞吐量。然而，对于某个工艺节点时钟频率有一个上限。
29610编辑于 2024-07-12 - 来自专栏容器计算
Kubeflow Pipeline - 上传一个 Pipeline
然后 Pipeline 也提供了相关的工具来定义这个 Pipeline，不过都是 Python 的，当然这个对于数据科学家来说，不会是什么问题。 安装专门的 SDK Python 定义好 Pipeline SDK 构建 pipeline 的包，最后通过 UI 上传 请理解?脚本每一步的含义。 方便直接转换你写的 pipeline 文件。 假设你已经有 Python3 环境了那么就装包就行了。 3 Summary 如果有需要深度使用 Pipeline 的同学，建议看看其 SDK。
1.5K30发布于 2020-08-06 - 来自专栏Pipeline
Armada pipeline
今天就是假期的最后一天了 明天大家就要开始上班了 今天向大家分享一波 这个是一个大佬 (Mike Bourbeau) 写的一个免费的开源pipeline工具集 虽然现在还只是Beta版 但是大家可以关注下 Toolkit，CGTeamWork，还有Ftrack Connect都有些类似 大家可以学习借鉴他的一些设计思路 见多识广总是好的 没准在日后的工作中有一些参考价值 下面是当前Armada pipeline 如下图所示，你只需要填0就可以获得下载链接 展示 如果你对他的工作十分感兴趣，你也可以去Patreon上面去赞助他 https://www.patreon.com/posts/armada-pipeline
60620编辑于 2022-07-14 - 来自专栏从码农的全世界路过
Redis Pipeline
pipeline是客户端向redis发送多条命令的通道. redis并没有在命令行中提供pipeline功能; 除去redis本身需要支持pipeline功能,其他各语言版的客户端都需要有相应的实现. 通常客户端请求执行一条命令分为以下四个步骤: 1.发送命令 2.命令排队 3.命令执行 4.返回结果 其中,第一步和第四步合称为round trip time(RTT,往返延时). pipeline的作用就是在需要执行多条命令时 pipeline和mget,mset命令类似可以发送多条命令给服务端同时执行,但pipeline更灵活,也不限于同一类型操作命令. 注意事项: 1. pipeline虽然好用,但是每次pipeline组装的命令个数不能太多,如果组装数据量过大,会增加客户端的等待时长,造成一定的网络阻塞. 最佳方式是将含有大量命令的pipeline拆分成多次较小的pipeline来完成. 2. pipeline在集群中应用时,应注意所执行命令需在同一服务器上,否则会引起slot错误.
81410编辑于 2022-06-20 - 来自专栏ops技术分享
pipeline groovy
.-2].tokenize(‘,’) 3.引号 ```python def x="abc" print '${x}' //输出${x}，不支持变量 print "${x}" //输出abc，支持变量 print .方法添加默认参数 def sayHello(String name = "zhangsan"){ print "hello ${name}" } //不传参时括号不能省略了 sayHello() 3. closure"} ) //由于括号是非必需的，所以 sayHello { print "hello closure" } //如果sayHello改成名字为pipeine就是，是不是很像jenkins的pipeline pipeline { print "hello closure" } 5.闭包另类用法，定义一个stage方法 //定义方法，传一个正常变量和一个闭包 def stage(String name,
1.9K21发布于 2021-06-02 深入解析Hadoop的Block多副本同步机制与Pipeline复制
Block多副本同步机制工作原理 Pipeline复制技术 在HDFS的数据写入过程中，Pipeline复制技术是实现高效数据分发的核心机制。 假设单个节点出口带宽为1Gbps，三节点Pipeline理论上可获得接近3Gbps的聚合吞吐量。 动态包大小调整机制进一步优化了传输效率。 错误快速重试机制保障了传输可靠性。如果某个节点在转发过程中失败，客户端会立即收到通知，并触发以下恢复流程： 1. 关闭当前Pipeline 2. 将故障节点移出活动节点列表 3. 复制 890 65% 8 压缩Pipeline 950 70% 5 数据表明Pipeline模式在吞吐量和资源利用率方面具有明显优势，特别是在处理海量小文件（<1MB）时，性能差距可达3倍以上。 调整Pipeline的窗口大小参数，从默认的4MB提升至16MB 2. 启用压缩传输减少网络负载 3.
50510编辑于 2025-08-27- 来自专栏惊羽-布壳儿
mysql(3) - 锁机制
隔离级别相关,参读 : mysql事物(2) - 隔离级别 2 示例表 2.1 表名 t 2.2 表结构和数据 id(主键索引) age(普通索引) name(无索引) stock 1 14 张三 100 3 17 李四 100 4 17 王五 100 3 悲观锁 (关键字 : for update) 3.1 表级 举例1 : select * from t where name= "张三" for update ; 如图 : image-b28c00e4580340b8b1f880eb12522994.png 原因 : 要保证不能插入id=2 的新纪录,则需要固定住其前后最近的索引指针; 举例3 - 辅助索引(非聚簇索引) select * from t where age = 15 for update; 现象 : 出现间隙锁,间隙锁的字段为age , 范围分别为 [14,17(id为3的记录) commit transaction 现象 : session2 成功,session3 失败; 原因 : 提交事物时,session3 使用当前读,读取最新的库存已经是0了, 0-1 > 0 为 false
47820编辑于 2022-06-15 - 来自专栏喵叔's 专栏
Scrapy Pipeline
在一个项目中会存在多种 Pipeline ，每个 Pipeline 都是一个 class ，其中包含了一些处理的 Item 的方法。 Item 会在这些 Pipeline 中按顺序依次传递，如果其中一个 Pipeline 丢弃了 Item ，那么后面未执行到的 Pipeline 将不会收到这个 Item 。 零、自定义 Pipeline 自定义 Pipeline 其实很简单，只需要实现指定的方法即可。 参数： spider : 当前正在使用的 Spider 3.close_spider(self,spider) 解释：爬虫关闭时，将会在这个方法中执行一些后续工作，例如关闭数据库、关闭文件等。 ITEM_PIPELINS= { '自定义Pipeline 路径':'优先级' } 二、总结 本篇文章主要讲解了 Pipeline 的理论知识，虽然很短，但是这些知识是 Pipeline 的核心知识
81910发布于 2020-09-08 - 来自专栏ops技术分享
pipeline是什么？
pipeline是什么？ pipeline是部署流水线(Deployment pipeline)，指从软件版本控制库到用户手中这一过程的自动化表现形式。 而Jenkins 2.x终于支持pipeline as code了，可以通过代码来描述部署流水线，还是同样的功能，部分操作通过代码配置运行后，也会在界面里显示出来。 pipeline的功能由pipeline插件提供，有的jenkins会自带，若没有则需要安装。 使用代码而不是UI的意义在于： 更好的版本化：将pipeline提交到版本库中进行版本控制 更好地协作：pipeline的每次修改对所有人都是可见的。 除此之外，还可以对pipeline进行代码审查 更好的重用性：手动操作没法重用，但是代码可以重用
2.1K20发布于 2021-05-31 - 来自专栏ops技术分享
pipeline when指令
一.简介 when指令允许pipeline根据给定的条件，决定是否执行阶段内的步骤。when指令必须至少包含一个条件。when指令除了支持branch判断条件，还支持多种判断条件。 = 'master'; } } buildingTag :如果pipeline所执行的代码被打了tag，则执行 when { buildingTag() } tag:如果pipeline所执行的代码被打了
1.4K10发布于 2021-06-03 - 来自专栏ops技术分享
pipeline 共享库
一.简介 当大量使用pipeline后，内置功能并不能照顾到所有需求，这时候需要扩展pipeline。 pipeline本质就是一个Groovy脚本。 所以，可以在pipeline中定义函数，并使用Groovy语言自带的脚本特性。 二.共享库扩展 Jenkins pipeline提供了“共享库”(Shared library)技术，可以将重复代码定义在一个独立的代码控制仓库中，其他的Jenkins pipeline加载使用它。 引入共享库后，我们可以直接在Jenkins pipeline中使用vars目录下的sayHello，和Jenkins pipeline的普通步骤的使用方式无异。 3.在Jenkins全局配置中定义共享库，以让Jenkins知道如何获取共享库代码。 4.在Jenkinsfile中使用@Library引用共享库。
2.1K31发布于 2021-06-02 - 来自专栏ops技术分享
pipeline 步骤(上)
一.简介 步骤是pipeline里执行的最小单位了，这里列举内置的相关步骤方便使用，省的去写很多shell，也不方便维护。 二.文件相关 删除当前目录 无参步骤，删除的是当前工作目录。 deleteDir 切换到目录 默认pipeline工作在工作空间目录下(/root/.jenkins/workspace/xx项目名)，dir步骤可以让我们切换到其他目录。 a.jar') 输出状态 script { def status=fileExists('/tmp/a.jar') print "${status}" } 判断是否为类Unix 如果当前pipeline
1.2K31发布于 2021-06-03 - 来自专栏vivo互联网技术
【干货】Pipeline as Code
鄢倩 是ThoughtWorks高级咨询师，译有《Java线程与并发编程实践》和《七周七语言卷二》。在Cloud Native 和 Cloud Security 领域拥有丰富的设计和实施经验。精通敏捷管理及其技术实践，擅长在大型IT企业进行软件架构演进、持续集成、持续交付以及前沿技术的研究推动。
1.3K20发布于 2019-03-19
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号