首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏深度学习与python

    Alluxio AI 助力卡模型训练

    乎目前是典型的混合云架构,数据和服务都分布在不同的机房: 离线机房:专为满足大数据相关业务方需求而设计的离线计算服务中心。其主要职能是部署离线调度、离线存储以及调度平台等服务。 乎主站作为一个知识社区,其在线机房是为了保障用户对知识和信息的交流与分享能够得到优质、连续的支持。 GPU 机房:此机房专门用于部署机器学习平台,主要服务于算法用户。 相比于数据都存在在单一机房,在混合云的架构下,算法平台在调度训练任务时,还需要额外考虑访问存储时,专线带来的网络延迟以及网络吞吐的限制。 UnionStore 也做了一些加速手段,但是也只能加速到 200-300MB/sec 的速度,远远不能满足大模型的 checkpoint 读取需求; 对象存储能力有上限,在模型分发时,往往单文件会有上百,甚至上并发同时读取 Alluxio 企业版自上线以来,一共完成了 300+ 训练任务,包括乎最重要的卡大模型训练任务,训练期间没有因为 Fuse 的稳定性导致训练任务重启,相比于社区版,企业版极大减少了无效训练的出现。

    48410编辑于 2024-05-14
  • 来自专栏深度学习与python

    平台工程应应会

    PlatformCon 2022 ——有史以来的第一个平台工程大会——吸引了超过 6000 名参会者,而当地的聚会小组也有数名会员,很显然,这一趋势将持续下去。 平台工程师提供一个通常称为“内部开发平台”的集成化产品,涵盖应用程序整个生命周期的操作需求。 内部开发平台由专门的平台团队构建。团队拓扑讨论团队是什么,不是什么。 但平台之旅并未就此止步。成功的平台团队会与开发人员保持开放的沟通,并度量工程 KPI,确保开发人员采用了平台,而平台使开发人员的工作变得更轻松。 只要有可能,平台团队就可以通过裁剪现成的解决方案来节省时间并创造更多的价值。 平台工具生态 平台工程是指构建内部开发平台。 /5JuuFYFFNH0WT2aDJgA3 ) Puppet 2023 DevOps 现状报告:平台工程有助于提升开发效率 (https://www.infoq.cn/article/q6JwiNRJIZ8C0h1WCHVQ

    65910编辑于 2023-05-09
  • 来自专栏机器学习/数据可视化

    sql必必会3

    将之前学习的数据库知识在整理下,主要是看的**《SQL必必会》**。这本书不愧是经典,入门数据库真的完全足够啦! ? - id号可以省略 笔记: 相应的字段填上相应的信息 字符串需要使用引号 密码使用函数Password 直接插入values值,此时id不能省略 insert into user values(3, "xiaoming", "123456@qq.com", 20, 25.18, Password("xiaoming")); -- id为3也不能省略 插入部分数据 insert into user

    96610发布于 2021-03-02
  • 来自专栏Python大数据分析

    赞回答 | 为什么自学python看不进去?

    前言 之前在乎写过一篇关于Python如何入门学习的回答,目前已有2600赞,12000收藏。这里分享一下,可能对初学者有参考意义。已经入门的也可以看一下里面的学习思路,是否和你的想法一致呢? 我的建议: 制定5~8周的学习计划 一周学习5天 每天3小时左右 理由是: 时间不长1~2个月,比较容易坚持 符合一门大学课程的学习周期 短时间高密度的学习有利于形成知识的连贯性,对python理解也会更加深入 当然,这中间需要监督机制,你可以在社交平台打卡,可以制定自己的学习课程表,也可以和朋友一起学习。 Python的历史 / Python的优缺点 / Python的应用领域Python环境搭建 【参考资料】 第2天 使用python解释器 【参考资料】 关于python语法的简单介绍 【参考资料】 第3

    63420编辑于 2022-04-02
  • 来自专栏AI算法与图像处理

    | 37百赞

    11月17日深夜,这个问题出现在了乎上。 ? 两天之内,就引起了150多位用户来分享自身经验。因为话题非常具有干货导向,也引起了大量的围观。 截止发稿时,已经被浏览了94万余次,一度登上知乎热榜。 以前学前端和后端的知识都是看w3cschool、菜鸟教程、慕课网、国内人写的一些书或收藏大量读起来并不那么好理解的文章和博客,很多知识学得比较基础而零散,知识点都是靠死记硬背强行理解的而没有动手实战。 Github和Stack Overflow应该是程序员必,其中在Github搜awesome是我学编程语言必先看的,比如搜awesome python。 开始再回头看经典计算机书籍的时候。 经典的计算机书基本都是国外书的翻译版(排名分先后): 1、动物书,也就是O’Reilly出版的系列书,犀牛书、蝴蝶书等等都是必读经典; 2、图灵书,图灵书基本都是人民邮电大学出版社出版的,可以去京东上面去找; 3乎回答链接: https://www.zhihu.com/question/356351510/answer/898448815

    84420发布于 2019-11-27
  • 来自专栏Spark学习技巧

    乎质量平台的设计和实现

    Bug 信息 乎内部用 JIRA 作为 Bug 管理工具,当 QA 创建或更新一个 Bug 时,JIRA 会通过我们事先配置的 webhook 将这个 Bug 的全部信息发送给质量平台,质量平台会从中提取所需的信息存储在数据库中 需求信息 乎内部使用 JIRA 作为需求管理工具,但由于每个事业部需求管理方式差别较大,质量平台无法像 Bug 信息一样自动收集和匹配 JIRA 上的需求。 代码提交信息 乎内部使用 Gitlab 作为代码管理工具,由于乎客户端正在组件化重构过程中,目前代码变更的提交有两种方式:向主仓库提交 MR 和通过 组件管理平台 升级组件版本号。 乎质量平台从 2018 年 9 月投入使用至今,已记录多于 50 个客户端版本的质量数据并生成百余份客户端版本测试报告。 有了质量平台的支持,QA 团队的工作效率得到了明显的提升,质量平台提供的各项数据,也为各事业部和整个乎的质量文化建设工作提供了有力的支持。

    1.5K50发布于 2019-06-18
  • 来自专栏小林coding

    赞的 TCP 文章,我写错了一个点。。。

    TCP 三次握手的三个实验: 实验一:模拟 TCP 第一次握手的 SYN 丢包; 实验二:模拟 TCP 第二次握手的 SYN、ACK 丢包; 实验三:模拟 TCP 第三次握手的 ACK 包丢; 这篇文章在乎还挺高赞的 超时重传五次 从上图可以发现, 客户端发起了 SYN 包后,一直没有收到服务端的 ACK ,所以一直超时重传了 5 次,并且每次 RTO 超时时间是不同的: 第一次是在 1 秒超时重传 第二次是在 3

    1.6K40发布于 2021-10-19
  • 来自专栏量子位

    | 37百赞

    11月17日深夜,这个问题出现在了乎上。 ? 两天之内,就引起了150多位用户来分享自身经验。因为话题非常具有干货导向,也引起了大量的围观。 截止发稿时,已经被浏览了94万余次,一度登上知乎热榜。 以前学前端和后端的知识都是看w3cschool、菜鸟教程、慕课网、国内人写的一些书或收藏大量读起来并不那么好理解的文章和博客,很多知识学得比较基础而零散,知识点都是靠死记硬背强行理解的而没有动手实战。 Github和Stack Overflow应该是程序员必,其中在Github搜awesome是我学编程语言必先看的,比如搜awesome python。 开始再回头看经典计算机书籍的时候。 经典的计算机书基本都是国外书的翻译版(排名分先后): 1、动物书,也就是O’Reilly出版的系列书,犀牛书、蝴蝶书等等都是必读经典; 2、图灵书,图灵书基本都是人民邮电大学出版社出版的,可以去京东上面去找; 3乎回答链接: https://www.zhihu.com/question/356351510/answer/898448815 作者系网易新闻·网易号“各有态度”签约作者

    69530发布于 2019-11-22
  • 微电网核心平台 PRD 需求文档 - 慧开源充电桩平台

    微电网核心平台 PRD 需求文档 1. 文档概述 1.1 文档目的 本文档明确微电网核心平台产品需求,包含产品目标、功能范围、用户角色、核心模块、非功能需求、接口及验收标准等,作为微电网平台设计、开发、测试、交付、运维的唯一依据,统一各方认知 用户角色与权限分配;3. 系统运维、日志审计、数据备份恢复。 3. 非功能需求 4.1 性能需求 页面加载≤2s,数据查询≤3s,调度计划生成≤3min。 系统可用率≥99.9%,单故障修复时间≤4h。 可适配对接配网 EMS、园区能耗系统、充电桩平台、第三方气象平台。 4.4 可扩展性需求 可快速新增氢能、虚拟负荷、光储充一体化等资源类型。

    36610编辑于 2026-06-17
  • ITSM产品推荐:甄科技燕云与主流方案对比分析

    本文将围绕甄科技旗下的核心产品——燕云ITSM展开介绍,并与几款主流方案进行对比,为企业在ITSM产品推荐中提供参考。 一、甄科技燕云ITSM:国内领先的ITSM产品推荐1、核心优势·智能驱动的全流程闭环:作为一款AI驱动的ITSM产品推荐方案,燕云ITSM深度融合AIGC与大语言模型技术,实现从多模态智能提单、精准派单 ·ITIL标准与开箱即用:燕平台内置国际先进ITIL 4实践,提供标准化的事件、问题、变更管理模板,帮助企业快速构建ITSM体系,是企业落地ITIL框架的优秀ITSM产品推荐。 ·低代码与灵活集成:燕云内置低代码引擎,支持新流程3小时快速上线;同时与ERP、MES及飞书、企业微信等系统无缝对接,统一服务入口,员工体验提升80%。 ·燕云的全球化服务与“双重经验”:甄科技以“智能服务流,甄联全球”为愿景,将全球化布局作为核心方向,是被国内企业较为推荐的ITSM产品。

    77110编辑于 2025-09-22
  • 来自专栏罗超频道

    内容平台老问题,乎给出新答案

    日前乎完成2.7亿美元的E轮融资,本轮融资后,乎将加速全民知识内容平台的建设,加大在 AI技术、内容生态、知识服务和商业化等多个维度的投入。 连接源源不断的数字内容,满足用户精神层面的需求,就可算是内容平台,最典型的有三类:泛娱乐平台(视频、音乐、直播、短视频)、资讯媒体平台(信息流、社交媒体、新闻客户端)、内容社区(乎、贴吧、豆瓣、BBS 内容平台玩家如云,不过在知识内容平台这个赛道上,乎是绝对领先者,在全世界都没有可学习的对象,走得也比其他社区类产品都远。 乎带给内容平台的启发 乎的做法,也为内容平台解决三大经典问题提供了启发。 1、技术与管理双管齐下。 正是因为一碗水端平,让乎有了相对良性、活跃和理性的社区环境。 3平台管理不能一劳永逸。

    1.1K20发布于 2018-08-16
  • 来自专栏python3

    python3爬虫-乎登陆

    /cookies.txt") self.login_param = { "client_id": "c3cef7c66a1843f8b3a9e6a1e3160e20 __encrypt(self.login_param) url = "https://www.zhihu.com/api/v3/oauth/sign_in" # 进行登陆操作 lang=en" else: captcha_api = "https://www.zhihu.com/api/v3/oauth/captcha? lang=en" else: captcha_api = "https://www.zhihu.com/api/v3/oauth/captcha? & e } function r(e) { this.i = e >> 10 & 3, this.h = e >> 2 & 255, this.s = 3 &

    1.2K30发布于 2020-01-17
  • 来自专栏luozhiyun的技术学习

    深入理解Kafka必必会(3

    如果生产者开启事务并向某个分区值发送3条消息 msg1、msg2 和 msg3,在执行 commitTransaction() 或 abortTransaction() 方法前,设置为“read_committed 2和副本3就是 follower 副本,整个消息追加的过程可以概括如下: 生产者客户端发送消息至 leader 副本(副本1)中。 此时两个 follower 副本各自拉取到了消息,并更新各自的 LEO 为3和4。 此时 leader 副本收到来自 follower 副本的 FetchRequest 请求,其中带有 LEO 的相关信息,选取其中的最小值作为新的 HW,即 min(15,3,4)=3。 两个 follower 副本在收到新的消息之后更新 LEO 并且更新自己的 HW 为3(min(LEO,3)=3)。 Kafka在可靠性方面做了哪些改进?

    1.6K10发布于 2019-12-25
  • 来自专栏InvQ的专栏

    《sql必必会》——读书笔记(3

    视图一方面可以帮我们使用表的一部分而不是所有的表,另一方面也可以针对不同的用户制定不同的查询视图。比如,针对一个公司的销售人员,我们只想给他看部分数据,而某些…特殊的数据,比如采购的价格,则不会提供给他。特殊的数据,比如采购

    64920发布于 2020-09-27
  • 来自专栏CSDN社区搬运

    代码:交通路口智能监测平台实现

    主干特征提取网络由4个ResBlock堆叠组成,以对输入的图像进行多尺度特征提取,在这里会输出3个最终的有效特征层到特征金字塔融合结构中。 在特征金字塔结构中,来自主干特征提取网络的3个有效特征层会进行多尺度的特征融合。因为在高分辨率的特征层具有的细节信息较多,而低分辨率的特征层具有的语义信息较多。 3.系统可视化 系统使用了PyQt5作为可视化工具,PyQt和C++中的qt类似,具有良好的交互性,包含了日常开发常用的控件,像显示提示控件QLabel,按钮QPushbotton,输入框控件TextBrowser

    44410编辑于 2024-11-02
  • 上海AI实验室共建平台成立 | 阿里发布面图像生成模型

    上海人工智能实验室联合智源研究院、中科院计算所、商汤科技等十余家顶尖机构,发起国产软硬件适配验证合作计划,年内将上线覆盖AI全流程的软硬件验证平台与自主生态社区。 该平台聚焦国产算力底座与AI应用协同,提供资源接入、环境适配、评测验证、成果发布一体化服务,是首个面向信创落地的国家级AI全栈验证基础设施。 其意义在于破解AI模型在国产芯片、框架、OS上部署难、调优难、验证缺标准的瓶颈,为行百业AI规模化落地提供可复用、可度量、可认证的技术基座,对构建安全可控AI产业生态具有战略价值。 g9uztc7y94L82Eaw.html 04月01日 14:14 02 行业资讯 86 雷峰网 阿里发布Wan2.7-Image:告别‘AI标准脸’,支持面图像生成 值得注意的是,微软虽仍为重要股东,但公告中首次由OpenAI独立提出‘超级应用(Super App)’愿景——即整合ChatGPT、o3推理引擎、Sora视频生成及未来OS级能力的统一入口。

    26010编辑于 2026-06-25
  • 来自专栏Android技术分享

    乎客户端跨平台 Hybrid 调试实战

    背景 乎客户端中有一个自己维护的 Hybrid 框架,在此基础上开发了一些 Hybrid 页面,当需要前端或者客户端开发接口的时候,就涉及到联调的问题。 mainStyle = { "margin-top":60, "flex-direction":"column" } const commonStyle = { margin: 20, }; 3. 虽然还是要引入一个不必要的包 不好的地方可能就是如果官方没有实现 no-op 的库,就需要你自己写 例如: debugImplementation 'com.facebook.stetho:stetho-okhttp3:

    1.9K30发布于 2019-05-15
  • 来自专栏国内互联网大数据

    使用isomorphic-fetch和TypeScript采集平台

      乎是一个中文互联网高质量的问答社区和创作者聚集的原创内容平台,上面有很多有用的知识值得我们学习。 以下是一个使用isomorphic-fetch和TypeScript编写的程序,用于采集乎的内容,一起来学习一下吧。

    61230编辑于 2023-10-17
  • C语言之考勤模拟系统平台行代码)

    管理组成员 3. 创建打卡事件 6.4 正常打卡目录 打卡成功! { system("cls"); printf("你好%s\n输入序号以访问功能\n1 打卡\n2 发布新的打卡\n3 20; else if (temp_i == 4) ui_func = 10; else if (temp_i == 3)

    56710编辑于 2025-01-24
  • 开源虚拟电厂(VPP)核心平台PRD需求文档(大白话与专业结合版)- 慧开源充电桩平台

    虚拟电厂(VPP)核心平台PRD需求文档 1. ,仅明确平台与终端的对接需求。 查看参与虚拟电厂的收益明细;3. 接收平台下发的调节指令(可选);4. 管理自身资源档案。 系统管理员 系统配置、权限管理、运维监控、故障处理 1. 配置系统参数、通信协议、接口对接;2. 管理用户角色和权限;3. 监控系统运行状态,处理故障告警;4. 进行数据备份、系统升级和维护。 3. 第三方接口:与气象平台对接,获取气象数据;与支付平台对接,支持收益结算支付;与发票平台对接,实现发票管理,接口兼容主流第三方平台

    47010编辑于 2026-06-17
领券