首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏阿泽的学习笔记

    原生AI漫谈

    对于系统开发人员来说(比如云数据库, AI 平台),原生的趋势也会产生相应的影响。 具体的例子比如我们可以通过用户的数据查询看到经常使用的过滤维度,来重新安排数据的排序和分区,这样在同样的数据量情况下,系统可以花更少的计算资源来完成查询,增加系统的利润 :) 原生+AI 最后再来看下跟 AI 相关的部分。 而前面讲的“原生语言”,则更关注在程序具体执行层面的关注点分离。 把两者结合起来看,原生时代的 AI 平台开发会是一片巨大的未开垦之地,对于云和算法各自都有很宽很长的路可以走。 目前原生AI 结合的一个比较好的学习样例是 Kubeflow,之前春节期间读了一本《Kubeflow for Machine Learning[3]》,感觉收获还是挺多的,如Istio,CRD的应用等

    96330发布于 2021-07-06
  • 来自专栏devops运维先行者

    原生利器 -- Nexus3

    1 Nexus3 简介 Nexus3 是一个统一的仓库系统,常见的有诸如apt、docker、maven2、npm、pypi、yum等repositories。 而Nexus3 就是这么一个平台,可以统一管理repositories仓库。这里文章介绍如何在k8s环境部署Nexus3,并快速使用,作为docker images 私有仓库。 2 K8s部署Nexus3 nexus-nm.yaml #创建namespace - nexus apiVersion: v1 kind: Namespace metadata: name: nexus 3 Nexus3使用 3.1 登陆 当我们首次登陆 nexus3.domain.com 的web界面的时候,需要输入admin的用户密码,这里需要通过查看nexus pods下面的/nexus-data 3.2 添加Docker repo 可以看到有个感叹号提醒,Nexus3建议至少使用4核CPU,这里使用2C,并无太大关系,如果有强迫症的同学可以增大CPU核数 >= 4C。

    1.4K20编辑于 2022-06-01
  • 来自专栏CISG智能平台产品部

    腾讯小微AI语音助手原生之路

    背景云原生(CloudNative)是一个组合词,“”表示应用程序运行于分布式环境中,“原生”表示应用程序在设计之初就充分考虑到了平台的弹性,就是为设计的。 腾讯也制定了自己的原生成熟度模型:图片图片腾讯的成熟度模型,主要从研发效能和资源效能2个方面引导内部原生建设。 小微团队结合小微现状以及公司原生成熟度标准1.0和2.0的导向,横向对比业界做法,重点在原生5大核心能力上进行了建设:服务化、可观测性、韧性、弹性、自动化能力,并逐步提升可调度能力。 图片图片特色与沉淀AI大数据模型服务启动速度慢是个行业通性问题。通过上述的建设,小微的AI大数据模型服务,扩容速度从10分钟左右,优化到5分钟以内,命中缓存时可以达到1分钟左右。 当然随着对原生的实践越来越多,我们也发现小微在原生的资源利用率、可调度性等方面建设和实践相对比较薄弱。接下来我们也将继续原生的实践,不断完善自身的薄弱点,更好地服务客户和合作伙伴。

    17.1K124编辑于 2022-11-09
  • 来自专栏腾讯云原生团队

    原生 AI 前沿:Kubeflow Training Operator 统一AI 训练

    张望,腾讯高级工程师,从事上 GPU 和分布式训练加速,负责腾讯 TKE 在 AI 场景的研发和支持工作。 不仅各大公有厂商都已经基本收录或集成了 Kubeflow 的训练 operators,社区上其他与深度学习训练相关的项目(如用以自动机器学习的 Katib,又如提供自动化编排功能的 Flyte)都对接了 我们希望未来利用 Kubeflow Training Operator 来构建 AI 平台的开发者可以方便地将其与其他模块对接,实现诸如任务队列、流水线、超参数搜索等功能。 reconciler.v1 implementation: 【https://github.com/kubeflow/common/tree/master/pkg/reconciler.v1/common】 [3] 资源利用率提高67%,腾讯实时风控平台原生容器化之路 Getting Started and Beyond|原生应用负载均衡选型指南 被集群节点负载不均所困扰?

    2.1K60发布于 2021-09-09
  • 来自专栏DBA随笔

    原生技术之docker学习笔记(3)

    // 原生技术之docker学习笔记(3) // 今天我们看看Dockerfile创建的方法。 2、执行一条指令,对容器作出修改 3、执行类似docker commit的操作,提交一个新的镜像层 4、Docker镜像再基于刚才提交的镜像运行一个容器 5、执行Dockerfile中的下一条指令,知道所有的容器指令都执行完成 3、Dockerfile构建缓存 当我们第一次构建的Dockerfile出现问题的时候,需要再次构建,这个时候会执行相同的指令,假设我们修改了Dockerfile中第4行的内容,那么Docker会自动将前 3行通过缓存的方式来进行加载,这会节省大量的时间。 B <missing> 7 weeks ago /bin/sh -c set -ex; key='A4A9406876FCBD3C

    54310发布于 2021-01-12
  • 来自专栏DBA随笔

    原生技术之kubernetes学习笔记(3)

    Pod----虚拟机 容器----进程 1、k8s相当于物理机的操作系统,k8s管理Pod相当于物理机的操作系统管理虚拟机 2、Pod相当于虚拟机,Pod里面可能包含多个容器,对应于虚拟机中的很多进程 33、凡是Pod中的容器要共享宿主机的Namespace,也一定是Pod级别的。 3、Succeeded,这个状态意味着所有的容器都启动完毕,并且已经退出。 4、Failed,这个很好理解,就是Pod中的容器至少有一个以非0状态退出,也就是异常退出了。 5、Unknow。

    51410发布于 2021-03-30
  • 来自专栏CNCF

    原生AI平台的加速与实践

    : ---- 前言:12月19日,在 Cloud Native Days China -原生AI大数据专场,腾讯技术事业群高级工程师薛磊发表了《原生AI平台的加速与实践》主题演讲。 ? 演讲主要包含五部分的内容: Kubernetes介绍 AI离线计算 AI场景下Kubernetes的不足 Kubeflow 星辰算力平台的架构 Kubernetes介绍 K8s是生产级的容器编排系统,它也是原生应用最佳的一个平台 分布式AI计算 为什么要分布式AI计算? 提供TensorFlow原生PS-worker架构 的多机训练 推荐将PS和worker一起启动 通过service做服务发现 在社区中最早期的Operator 星辰算力平台的架构 它为私有的一个离线计算平台 Volcano能满足我们的需求有: 1)批量调度 多个Pod从属于同一个任务 保证调度或不调度 防止饿死场景 2) 任务优先级 高低优任务区别 高优任务保证启动时延 低优弹性任务不占额度 3)优化 拓扑调度

    2.5K31发布于 2021-01-27
  • 来自专栏有文化的技术人

    Kagent: 原生下的AI智能体

    Kagent 架构详解 ❝本文档阐述 Kagent 的原生设计理念——将 Agent 定义为 Kubernetes CRD,使其成为集群的一等公民❞ 目录 1. CRD 设计的核心优势 3. 架构概览 4. Agent CRD 设计 5. 运行时架构 6. 配置映射流程 7. 完整请求流程 1. 这不是简单地"把 Agent 跑在 K8s 上",而是深度融入 Kubernetes 的资源模型,让 Agent 天然具备原生基础设施的所有能力。 AI Agent 框架,它将 Agent 定义为 Kubernetes CRD(Custom Resource Definition),让用户可以像管理 Deployment 一样管理 Agent。 自动接入 Kubernetes 可观测性生态: ┌─────────────────────────────────────────────────────────┐ │ 原生可观测性栈

    9710编辑于 2026-04-09
  • 来自专栏云技术+云运维

    原生原生应用概念解析

    原生是面向“”而设计的应用,因此技术部分依赖于在传统计算的3层概念(基础设施即服务(IaaS)、平台即服务(PaaS)和软件即服务(SaaS)),例如,敏捷的不可变基础设施交付类似于IaaS,用来提供计算网络存储等基础资源 原生应用 原生应用是天然适合特点的应用,原生应用系统需要与操作系统等基础设施分离,不应该依赖Linux或Windows等底层平台,或依赖某个平台。 CNCF给出了原生应用的三大特征: 容器化封装:以容器为基础,提高整体开发水平,形成代码和组件重用,简化原生应用程序的维护。 原生应用和本地部署应用程序之间的差异 原生应用程序开发采用与传统企业应用程序完全不同的体系结构。 可更新 原生应用程序始终是最新的,原生应用始终可用。 本地部署应用程序需要更新,并且通常由供应商按订阅提供,并且在安装更新时需要停机。 弹性 原生应用程序通过在峰值期间增加的资源来利用的弹性。

    3.7K34发布于 2019-10-29
  • 来自专栏云云众生s

    完善原生架构的3个关键实践

    译自 3 Key Practices for Perfecting Cloud Native Architecture,作者 Rahul Shrivastava。 原生架构 在近年来迅速崛起,成为现代软件开发的首选基础。根据 IDC 的数据,原生应用开发是当今科技领域发展最快的趋势之一,预计到 2025 年,90-95% 的应用程序将采用原生架构。 这种采用率的激增反映了原生架构所提供的无与伦比的可扩展性、灵活性以及弹性,使其成为企业提供无缝数字体验的必备要素。 然而,构建强大的原生架构并非易事。这不仅仅是将现有系统迁移到云端。 相反,它需要从根本上重新思考软件的设计、构建和部署方式,才能充分利用技术的强大功能。为了有效地应对这种复杂的转型,企业必须采用三种关键实践,这些实践对于完善原生架构至关重要。 故障隔离和恢复: 原生环境中不可避免地会发生故障。以故障隔离 为目标设计微服务有助于防止单个服务故障蔓延到整个系统。

    25010编辑于 2024-09-26
  • 来自专栏技术那些事

    原生3课:Kubernetes 系统快速入门

    本篇文章来自《华为云云原生王者之路训练营》黄金系列课程第3课,由华为容器批量计算首席架构师马达主讲,介绍原生技术体系中Kubernetes的相关概念和技术架构。 01 Kubernetes介绍  计算的发展历程 “”中的资源在使用者看来是可以无限扩展的,并且可以随时获取,按需使用,随时扩展,按使用付费。这种特性经常被称为像水电一样使用IT基础设施。 K8S社区架构中对各层的详细定义 上图从上往下依次为: 1)生态层:不属于K8S范围 2)接口层(工具、SDK库、UI等): K8S官方的项目会提供库、工具、UI等外围工具 外部可提供自有的实现 3) 维护整个Pod网络空间 2)InitContainers:初始化容器,一般用于服务等待处理以及注册Pod信息等 先于业务容器开始执行 顺序执行,执行成功退出(exit 0),全部执行成功后开始启动业务容器 3) 通常用于无状态应用 apiVersion: extensions/v1beta1kind: ReplicaSetmetadata:name: frontendspec:replicas: 3selector

    1.2K00发布于 2021-11-21
  • 来自专栏亨利笔记

    原生制品那些事(3):OCI 制品Artifact

    《Harbor权威指南》招募英文版翻译人员 VMware招聘机器学习和原生开发工程师 本篇继续和大家说说镜像那些事,是连载之三,从《Harbor权威指南》一书节选的纯技术干货,敬请关注、转发和收藏 必须是字符串“config” version 类型的版本 optional-configFormat 可选的配置格式说明(json、yaml等) 一些常见的 OCI Artifact 配置类型如表3所示 为适应原生用户者的需求,Harbor 2.0 的架构做了比较大的调整和改进,以便用户在 Harbor中存取和管理符合 OCI 规范的 Artifact。 Harbor 中管理容器镜像的各种功能,在适用的情况下,都可以扩展到 OCI Artifact 上,如访问权限控制、推送和拉取、界面查询、远程复制等,这大大方便了用户对原生 Artifact 的管理和使用 《Harbor权威指南》招募英文版翻译人员 要想了解原生、区块链和人工智能等技术原理,请立即长按以下二维码,关注本公众号亨利笔记 ( henglibiji ),以免错过更新。

    1.2K30编辑于 2023-04-18
  • 腾讯TAPD:原生AI驱动的研发效能平台

    一、产品定位与核心亮点 腾讯TAPD(Tencent Agile Product Development)是一款基于容器化技术的原生研发协作平台,核心定位为面向开发团队的高性能、智能化研发基础设施。 其差异化优势在于深度融合项目管理(需求/任务/缺陷跟踪)与工程实践(代码管理/持续集成/自动化测试),通过原生架构与AI能力提升研发全流程自动化与协作效率。 计算资源:原生构建CPU资源 6,400核时/月,原生开发资源 64,000核时/月。 原生构建能力:基于容器化技术,支持高并发构建与缓存优化,提升编译效率。 自动化流水线:通过规则引擎自动触发流程(如代码提交→构建→测试→部署),减少手动操作。 数据来源:腾讯TAPD官方产品介绍文档 特权说明:企业版用户(购买License ≥ 10)可申请长期有效的原生构建与开发资源特权,需通过在线咨询核实后发放。

    14910编辑于 2026-04-11
  • 吃透 Spring Boot 3 + Spring Cloud 原生新特性

    引言 原生架构的普及,对Java应用的启动速度、内存占用、弹性伸缩能力提出了全新要求。 Spring Boot 3 作为Spring生态里程碑式的版本,基于Spring Framework 6构建,完成了从底层架构到上层能力的全面原生重构,配合Spring Cloud 2024.x版本的微服务能力升级 1.3 Spring Framework 6 底层能力支撑 Spring Boot 3完全基于Spring Framework 6构建,后者带来了原生场景下的核心能力升级: 内置AOT提前编译引擎,为 API,精简了内核代码,提升了运行效率 Spring Boot 3 AOT编译与原生镜像生成流程 二、Spring Boot 3 核心原生新特性详解 2.1 原生镜像与AOT提前编译 传统Java应用基于 场景下具备了与Go等原生原生语言抗衡的能力。

    16410编辑于 2026-04-14
  • 来自专栏精益码农

    原生AI算力平台 阶段性解读

    给近半年做的原生AI算力平台做一个回顾, 思考和实践参考了溪大会上的分享:为大模型工程提效,基于阿里 ACK 的原生 AI 工程化实践[1],全文很长,我这边做一个牵引和解读。 1. 面对LLM和GAI这类对算力和数据都有极高需求的新负载,计算也迎来了“智算”时代, 一方面以服务化资源池的概念提供万卡算力、PB级存储、和单机TB级高速网络互联,另一方面以原生标准化交付算力给大模型的生产者和使用者 大模型带来的挑战 AI有工程化的要求,同时也对基础设施提出挑战。 3. 原生AI的能力 最近在做的“AI大模型基础设施”, 宏观目标也是帮助AI工程从小作坊向端到端原生解决方案演进。 原生AI的架构实践 我们的原生AI算力平台, 有参考上面的实践,针对企业业务的现状和侧重, 技术调研上做了调整和裁剪。 糟糕,我实现的k8s informer好像是依托答辩 参考资料 [1] 为大模型工程提效,基于阿里 ACK 的原生 AI 工程化实践: https://developer.aliyun.com/article

    19910编辑于 2026-01-16
  • 来自专栏绿盟科技研究通讯

    原生安全》之原生安全

    原生安全发展可谓方兴未艾,原生环境中的各类安全风险日益频发,上的对抗也成为现实,越来越多的企业开始探讨如何设计、规划原生环境中的安全架构,部署相应的安全能力。 原生安全的现在和未来如何,笔者不妨从一个较高的视角进行探讨。 与计算安全相似,原生安全也包含两层含义:“面向原生环境的安全”和“具有原生特征的安全”。 1 面向原生环境的安全 总体而言,原生安全的第一阶段是安全赋能于原生体系,即构建原生的安全能力。 面向原生环境的安全,其目标是防护原生环境中的基础设施、编排系统和微服务等系统的安全。 3 原生安全:融合的原生安全 Gartner提过,云安全的未来等价于纯安全,因为未来计算将会变得无处不在,所有的安全机制都会覆盖计算的场景,那么我们谈云安全,其实就是一个通用场景下的安全问题。 既然未来云安全等价安全,而计算的下半场是原生,那不妨也做个推论,原生的未来也会等价于原生安全。

    2.1K40发布于 2021-11-10
  • 来自专栏顾宇的研习笔记

    原生 DevOps

    而率先完成 DevOps 转型 的企业在进行 原生 应用改造和技术革新过程中也面临着同样的问题。 这就对 DevOps 在原生环境下的应用提出了新的课题和实践诉求,我们如何在原生的环境下实践 DevOps 以达到更有生产力的表现? 本文将结合最新一期的技术雷达,试图勾画出 DevOps 在原生的环境下的特性、未来的趋势以及相应的实践。 背景:不断蔓延的环境复杂性 本期技术雷达主题之一是:不断蔓延的环境复杂性。 但在原生的场景下,我们无需去构造工具链,因为工具链本身是为最佳实践服务的。我们只需要根据自己的实践选择对应的服务就可以了,不光包含平台自身的,也包括外部的。 在原生的场景下,全球的竞争加速了技术实践的淘汰,有生命力的工具和服务在市场上生存了下来。并和它们所服务的客户一起创造了更加有生命力的技术实践。

    1.6K10发布于 2018-08-17
  • 来自专栏三木的博客

    原生概要

    什么是原生 设计目的 原生软件的设计目的是预测故障,并且即使当它所依赖的基础设施出现故障,或者发生其他变化时,它也依然能够保持稳定运行。 定义 原生软件是高度分布式的,必须在一个不断变化的环境中运行,而且自身也在不断地发生变化 不适合使用原生架构的情形 不需要计算的软件,例如嵌入到家电中的软件。 原生提供的是最终一致性,但如果需要数据强一致性的话,原生架构就不适用了。 用原生架构重写软件时并没有提供新的价值 原生的价值 原生的绝妙之处在于它最终是由许多不同组件组成的,即使其中一些组件的模式不是最新的,原生组件也可以与他们进行交互。 原生平台 原生平台的发展 AWS:软件架构、开发和运维并没有太多的改变。

    52010编辑于 2024-10-09
  • 来自专栏友弟技术工作室

    原生概念

    原生概念12个因素 简介 如今,软件通常会作为一种服务来交付,它们被称为网络应用程序,或软件即服务(SaaS)。 适合部署在现代的计算平台,从而在服务器和系统管理方面节省资源。 将开发环境和生产环境的差异降至最低,并使用持续交付实施敏捷开发。 可以在工具、架构和开发流程不发生明显变化的前提下实现扩展。 原生应用的12要素,原文 The Twelve Factors I. 这其中包括: 数据库,Memcached,以及其他 后端服务 的配置 第三方服务的证书,如 Amazon S3、Twitter 等 每份部署特有的配置,如域名等 有些应用在代码中使用常量保存配置,这与 示例包括 SMTP(例如 Postmark),数据收集服务(例如 New Relic 或 Loggly),数据存储服务(如 Amazon S3),以及使用 API 访问的服务(例如 Twitter, Google

    4.9K51发布于 2018-07-04
  • 来自专栏Bypass

    原生安全攻防》-- 原生攻防矩阵

    在本节课程中,我们将开始学习如何从攻击者的角度思考,一起探讨常见的容器和K8s攻击手法,包含以下两个主要内容: 原生环境的攻击路径: 了解原生环境的整体攻击流程。 原生攻防矩阵: 原生环境攻击路径的全景视图,清晰每一步采取的攻击技术。 目前,多个厂商和安全厂商都已经梳理了多个针对容器安全的威胁矩阵,我们可以参考这些成熟的模型,结合个人对原生安全的理解,构建自己的攻防矩阵。 针对原生环境的攻击技术,与传统的基于Windows和Linux的通用攻击技术有很大的不同,在这里,我们梳理了一个针对容器和K8s常见攻击技术的原生攻防矩阵。 视频版:《原生安全攻防》--原生攻防矩阵

    68311编辑于 2024-04-16
领券