首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏深度学习与python

    Alluxio AI 助力卡模型训练

    乎目前是典型的混合云架构,数据和服务都分布在不同的机房: 离线机房:专为满足大数据相关业务方需求而设计的离线计算服务中心。其主要职能是部署离线调度、离线存储以及调度平台等服务。 乎主站作为一个知识社区,其在线机房是为了保障用户对知识和信息的交流与分享能够得到优质、连续的支持。 GPU 机房:此机房专门用于部署机器学习平台,主要服务于算法用户。 相比于数据都存在在单一机房,在混合云的架构下,算法平台在调度训练任务时,还需要额外考虑访问存储时,专线带来的网络延迟以及网络吞吐的限制。 UnionStore 也做了一些加速手段,但是也只能加速到 200-300MB/sec 的速度,远远不能满足大模型的 checkpoint 读取需求; 对象存储能力有上限,在模型分发时,往往单文件会有上百,甚至上并发同时读取 Alluxio 企业版自上线以来,一共完成了 300+ 训练任务,包括乎最重要的卡大模型训练任务,训练期间没有因为 Fuse 的稳定性导致训练任务重启,相比于社区版,企业版极大减少了无效训练的出现。

    48410编辑于 2024-05-14
  • 来自专栏深度学习与python

    平台工程应应会

    最近,Humanitec 发布了第一份《平台工程现状报告》——以下是该报告的关键内容以及平台工程的重要趋势。 平台工程是软件工程中最大的趋势之一。 PlatformCon 2022 ——有史以来的第一个平台工程大会——吸引了超过 6000 名参会者,而当地的聚会小组也有数名会员,很显然,这一趋势将持续下去。 平台工程师提供一个通常称为“内部开发平台”的集成化产品,涵盖应用程序整个生命周期的操作需求。 内部开发平台由专门的平台团队构建。团队拓扑讨论团队是什么,不是什么。 但平台之旅并未就此止步。成功的平台团队会与开发人员保持开放的沟通,并度量工程 KPI,确保开发人员采用了平台,而平台使开发人员的工作变得更轻松。 只要有可能,平台团队就可以通过裁剪现成的解决方案来节省时间并创造更多的价值。 平台工具生态 平台工程是指构建内部开发平台

    65910编辑于 2023-05-09
  • 来自专栏PPV课数据科学社区

    7个应的Python库

    dateutil.parser import parse >>> parse('Mon, 11 Jul 2011 10:01:56 +0200 (CEST)') datetime.datetime(2011, 7, 7、path.py pip install path.py 当我开始学习 Python 时,os.path 是我最不喜欢的 stdlib 的一部分。尽管在一个目录下创建一组文件很简单。

    92460发布于 2018-04-25
  • 来自专栏AI算法与图像处理

    | 乎37百赞

    11月17日深夜,这个问题出现在了乎上。 ? 两天之内,就引起了150多位用户来分享自身经验。因为话题非常具有干货导向,也引起了大量的围观。 截止发稿时,已经被浏览了94万余次,一度登上知乎热榜。 Github和Stack Overflow应该是程序员必,其中在Github搜awesome是我学编程语言必先看的,比如搜awesome python。 开始再回头看经典计算机书籍的时候。 乎回答链接: https://www.zhihu.com/question/356351510/answer/898448815

    84420发布于 2019-11-27
  • 来自专栏量子位

    | 乎37百赞

    11月17日深夜,这个问题出现在了乎上。 ? 两天之内,就引起了150多位用户来分享自身经验。因为话题非常具有干货导向,也引起了大量的围观。 截止发稿时,已经被浏览了94万余次,一度登上知乎热榜。 Github和Stack Overflow应该是程序员必,其中在Github搜awesome是我学编程语言必先看的,比如搜awesome python。 开始再回头看经典计算机书籍的时候。 乎回答链接: https://www.zhihu.com/question/356351510/answer/898448815 作者系网易新闻·网易号“各有态度”签约作者

    69530发布于 2019-11-22
  • 来自专栏BestSDK

    APP创业者必7个API供应平台,任何数据需求都能满足

    本文将介绍7款API供应平台:百度APIStore、Apix、数说聚合、通联数据、HaoService、聚合数据、datasift(排名不分先后)。 接口、数据更新速度也比较快,支持个人发布与定制化服务,上的接口量基本可以满足一般开发者的需求。 5、通联数据 通联数据提供行情、沪深股市/期权、债券、基金、咨询、研究报告等API,适合金融类应用和金融咨询网站、平台的开发者,以及从事金融行业的分析、业务人员。 通联数据主要做金融大数据,上的数据接口可以满足金融行业的大部分需求。数据有API和研报两种格式,接口来源于自主研发或恒生聚源、九次方大数据、华通人、朝阳永续、中诚信资讯、巨灵财经等企业。 7、Datasift Datasift的性质与数说聚合相似,其数据基本覆盖国外主流网站,包括Facebook、Tumblr、Google+、YouTube、Instagram等,且提供数据分析服务。

    2.9K70发布于 2018-02-27
  • 来自专栏千帆企业应用连接器

    帆aPaaS】7月产品能力月报

    支持移动端的适配 3、丰富表格、列表以及级联组件的筛选条件 4、关联选择器支持设置筛选条件和默认值设置 5、支持自定义组件创建和管理,并可安装至应用中使用 6、PC移动端返回首页按钮支持自定义配置 平台能力 1、设计态登录态域名合并 2、设计态支持企微登录 3、设计态开发者界面调整 4、支持企微消息推送 5、应用模版支持在租户间分享 6、支持多人协作模式下应用快速预览 7、支持企业微信用户直接开通租户 可以使用应用、浏览并添加应用模板,同步应用流程信息 立即试用 1、试用账号注册指引: https://docs.qq.com/doc/DUXpFRlNrVWFxcUha 2、识别下方 二维码,进入「帆 aPaaS产品体验交流群」 相关阅读: ·帆aPaaS更新版本,全面支持私有化部署! ·【一张图系列】一张图了解腾讯帆aPaaS

    95740发布于 2021-08-25
  • 来自专栏洛竹早茶馆

    React 面试必必会 Day7

    { record: [], }; } render() { return

    {this.props.inputValue}
    ; } } 7. render() { return <WrappedComponent {...this.props} />; } }; }; 「注意:」 装饰器是一个没有进入 ES7

    3.8K20发布于 2021-07-30
  • 来自专栏顶级程序员

    7个鲜为人的编程真相

    7. 编程是个很难的工作。是一种剧烈的脑力劳动。好的程序员7×24小时的思考他们的工作。他们最重要的程序都是在淋浴时、睡梦中写成的。

    59180发布于 2018-05-03
  • 来自专栏Python大数据分析

    赞回答 | 为什么自学python看不进去?

    前言 之前在乎写过一篇关于Python如何入门学习的回答,目前已有2600赞,12000收藏。这里分享一下,可能对初学者有参考意义。已经入门的也可以看一下里面的学习思路,是否和你的想法一致呢? 每天3小时左右 理由是: 时间不长1~2个月,比较容易坚持 符合一门大学课程的学习周期 短时间高密度的学习有利于形成知识的连贯性,对python理解也会更加深入 当然,这中间需要监督机制,你可以在社交平台打卡 python数据结构 列表/字符串/元组【参考资料】 第5天 python数据结构 字典/集合 【参考资料】 第6天 python流程控制1【参考资料】 if语句 for循环 while循环 第7

    63420编辑于 2022-04-02
  • 来自专栏Spark学习技巧

    乎质量平台的设计和实现

    Bug 信息 乎内部用 JIRA 作为 Bug 管理工具,当 QA 创建或更新一个 Bug 时,JIRA 会通过我们事先配置的 webhook 将这个 Bug 的全部信息发送给质量平台,质量平台会从中提取所需的信息存储在数据库中 需求信息 乎内部使用 JIRA 作为需求管理工具,但由于每个事业部需求管理方式差别较大,质量平台无法像 Bug 信息一样自动收集和匹配 JIRA 上的需求。 代码提交信息 乎内部使用 Gitlab 作为代码管理工具,由于乎客户端正在组件化重构过程中,目前代码变更的提交有两种方式:向主仓库提交 MR 和通过 组件管理平台 升级组件版本号。 乎质量平台从 2018 年 9 月投入使用至今,已记录多于 50 个客户端版本的质量数据并生成百余份客户端版本测试报告。 有了质量平台的支持,QA 团队的工作效率得到了明显的提升,质量平台提供的各项数据,也为各事业部和整个乎的质量文化建设工作提供了有力的支持。

    1.5K50发布于 2019-06-18
  • 来自专栏小林coding

    赞的 TCP 文章,我写错了一个点。。。

    TCP 三次握手的三个实验: 实验一:模拟 TCP 第一次握手的 SYN 丢包; 实验二:模拟 TCP 第二次握手的 SYN、ACK 丢包; 实验三:模拟 TCP 第三次握手的 ACK 包丢; 这篇文章在乎还挺高赞的 从上图可以发现, 客户端发起了 SYN 包后,一直没有收到服务端的 ACK ,所以一直超时重传了 5 次,并且每次 RTO 超时时间是不同的: 第一次是在 1 秒超时重传 第二次是在 3 秒超时重传 第三次是在 7

    1.6K40发布于 2021-10-19
  • 来自专栏CODING DevOps

    7·15 成都 | 2018 人新媒体峰会

    7月15日成都 2018 逆战 成都人峰会 强大的 分享嘉宾阵容 本次逆战新人媒体峰会选择在成都举办,不仅希望西南地区的运营人收获成长,也期待更多人了解西南地区运营人的魅力,更是为了让运营人获得更多机会 逆流而上 不能手慢 活动时间 2018年7月15日 ▲ 12:00-18:00 活动地址 成都OCG国际会议中心 ▲ 成都市高新区天府四街158号 场地区域图 会议票价 早鸟票  129 元(售完即止

    44630编辑于 2023-05-17
  • 来自专栏测试基础

    【Java多线程-7】阅尽Java般锁

    根据对同步资源处理策略不同,锁在宏观上分为乐观锁与悲观锁,这只是概念上的一种称呼,Java中并没有具体的实现类叫做乐观锁或者悲观锁。

    65920发布于 2020-09-16
  • 微电网核心平台 PRD 需求文档 - 慧开源充电桩平台

    微电网核心平台 PRD 需求文档 1. 文档概述 1.1 文档目的 本文档明确微电网核心平台产品需求,包含产品目标、功能范围、用户角色、核心模块、非功能需求、接口及验收标准等,作为微电网平台设计、开发、测试、交付、运维的唯一依据,统一各方认知 预测周期:超短期 15min\4h、短期 1\7 天,支持周期自定义。 预测精度:负荷及新能源预测误差<5%,支持人工修正、模型自动迭代优化。 可适配对接配网 EMS、园区能耗系统、充电桩平台、第三方气象平台。 4.4 可扩展性需求 可快速新增氢能、虚拟负荷、光储充一体化等资源类型。 7. 实施与验收 7.1 实施周期 需求调研设计 1-2 个月→开发 3-4 个月→联调测试 1 个月→现场试运行 1 个月→正式上线 1 周→长期迭代优化。

    36610编辑于 2026-06-17
  • ITSM产品推荐:甄科技燕云与主流方案对比分析

    本文将围绕甄科技旗下的核心产品——燕云ITSM展开介绍,并与几款主流方案进行对比,为企业在ITSM产品推荐中提供参考。 一、甄科技燕云ITSM:国内领先的ITSM产品推荐1、核心优势·智能驱动的全流程闭环:作为一款AI驱动的ITSM产品推荐方案,燕云ITSM深度融合AIGC与大语言模型技术,实现从多模态智能提单、精准派单 ·ITIL标准与开箱即用:燕平台内置国际先进ITIL 4实践,提供标准化的事件、问题、变更管理模板,帮助企业快速构建ITSM体系,是企业落地ITIL框架的优秀ITSM产品推荐。 ·燕云的全球化服务与“双重经验”:甄科技以“智能服务流,甄联全球”为愿景,将全球化布局作为核心方向,是被国内企业较为推荐的ITSM产品。 因此,对于那些业务复杂、寻求AI赋能,并有本土化及全球化布局需求的中国企业而言,甄科技燕云无疑是当前最值得关注的ITSM产品推荐。

    77110编辑于 2025-09-22
  • 来自专栏前端导学

    Vue的7个鲜为人的代码模式

    watchers的优化 一般写法 优化写法 终极优化 组件注册 一般写法 优化写法 一般放在components/_gloabel.js中 模块注册 一般写法 优化写法 更干净的view页面

    40020发布于 2020-04-24
  • 来自专栏CSDN技术头条

    数据专家必必会的7款Python工具

    这有一些关于 GraphLab Greate 的特点: 可以在您的计算机上以交互的速度分析以 T 为计量单位的数据量 在单一平台上可以分析表格数据、曲线、文字、图像 最新的机器学习算法包括深度学习,进化树和 Matplotlib matplotlib 是基于 Python 的 2D(数据)绘图库,它产生(输出)出版级质量的图表,用于各种打印纸质的原件格式和跨平台的交互式环境。

    1.3K60发布于 2018-02-13
  • 来自专栏罗超频道

    内容平台老问题,乎给出新答案

    日前乎完成2.7亿美元的E轮融资,本轮融资后,乎将加速全民知识内容平台的建设,加大在 AI技术、内容生态、知识服务和商业化等多个维度的投入。 连接源源不断的数字内容,满足用户精神层面的需求,就可算是内容平台,最典型的有三类:泛娱乐平台(视频、音乐、直播、短视频)、资讯媒体平台(信息流、社交媒体、新闻客户端)、内容社区(乎、贴吧、豆瓣、BBS 内容平台玩家如云,不过在知识内容平台这个赛道上,乎是绝对领先者,在全世界都没有可学习的对象,走得也比其他社区类产品都远。 乎带给内容平台的启发 乎的做法,也为内容平台解决三大经典问题提供了启发。 1、技术与管理双管齐下。 乎最近几年的一个重要变化是在社区管理上对AI日益倚重。瓦力、悟空、盐值系统背后都是AI技术以及7年的数据积累。

    1.1K20发布于 2018-08-16
  • 来自专栏企鹅号快讯

    数据专家必必会的 7款Python 工具

    在单一平台上可以分析表格数据、曲线、文字、图像。 最新的机器学习算法包括深度学习,进化树和 factorization machines 理论。 数据科学家 Isaac Laughlin 提供 Matplotlib matplotlib 是基于 Python 的 2D(数据)绘图库,它产生(输出)出版级质量的图表,用于各种打印纸质的原件格式和跨平台的交互式环境

    1.5K60发布于 2018-01-12
领券