- 综合排序
- 最热优先
- 最新优先
离线推理精度问题分析
什么是精度问题离线推理（om模型在昇腾acl推理）的结果和在线推理（如：对原始模型通过pytorch/onnxruntime框架在gpu/cpu的推理）相差比较大，如在开源数据集的精度差距>1%，则认为离线推理精度不达标 精度问题定界定位精度问题定界1.保存在线推理的模型的输入输出：作为精度对比的标杆2.保存离线推理的模型的输入输出：离线推理需要保证和在线推理的原始输入是同一份数据3.数据对比：对比在线推理和离线推理的模型输入输出 ：Pytorch module -> onnx -> OM1.先对比pytorch model和onnx model的推理结果，如果结果差异大，则需要分析pytorch export onnx的脚本2. 精度问题分析实践以Reset50为样例, 提供在线推理，离线推理、结果比对：参考ACL_PyTorch docs:01~04步骤import numpy as npimport torchfrom torchvision.io /msit_compare查看result_{timestamp}.csvresult各字段说明及分析说明：链接使用专家建议：msit debug compare -gm .
47310编辑于 2025-06-23- 来自专栏西郊手记
Redis RDB文件离线分析
而RDB则是数据内存的一个snapshots，在存储时使用带压缩的紧凑二进制结构，对比AOF，RDB机制导出的数据量更小，在存储、全量复制和数据离线分析中更好的选择。 今天我们就来重点说说RDB文件的离线分析。 RDB文件格式简述 RDB文件格式为优化读写性能，将内存结构尽可能对齐文件格式，并在能使用压缩都使用压缩以减少文件大小。 Value的值，按2指示类型编码。 RDB文件分析 rdb分析的应用场景较多，比如Redis数据差异对比，大Key的分析，键值的统计等。 熟话说工欲善其事，必先利其器，虽然上述部分我们简单阐述了rdb的文件格式，但要自己写从零写一个分析器还是有较大的工作量。好在开源社区里已经有不少RDB文件分析组件了。
3.9K41发布于 2019-02-22 - 来自专栏跟牛老师一起学WEBGIS
mapboxGL2离线化应用
概述 mapboxGL升级到2的版本之后，用官方的引用token是必须要有的，为了能够离线使用，我们需要对源码做一定的修改后编译，本文讲述如何进行mapboxGL的离线应用。
2.1K10编辑于 2021-12-06 - 来自专栏量子化学
离线安装PySCF-2.x
本文介绍的是离线安装步骤，适合不允许联网或很难联网的内部节点。读者在开始编译前需确认自己机子上有gcc和g++编译器，有MKL数学库，以及cmake软件。 1.下载 先到官网下载PySCF压缩包 https://github.com/pyscf/pyscf/releases 本文以2.1.1版为例，但安装过程对目前所有2.x版均适用。 这个文件夹从pyscf-2.0开始被移出，需要用户手动下载，安装方法见《离线安装PySCF-2.x-extensions》 https://gitlab.com/jxzou/qcinstall/-/blob 注意这点与下述（2）是不同的问题，不能混为一谈。 （2）如果运行时报错找不到库mkl_def.so和mkl_avx2.so，可回到上述第5点中再次打开CMakeLists.txt文件，在-lmkl_avx后添加-lmkl_def -lmkl_avx2，
1.7K10编辑于 2022-12-07 - 来自专栏Albert陈凯
Hadoop离线数据分析平台实战——420订单分析Hadoop离线数据分析平台实战——420订单分析
Hadoop离线数据分析平台实战——420订单分析 项目进度 模块名称 完成情况 用户基本信息分析(MR)� 完成 浏览器信息分析(MR) 完成 地域信息分析(MR) 完成 外链信息分析(MR) 完成 用户浏览深度分析(Hive) 完成 订单分析(Hive) 未完成 事件分析(Hive) 完成 模块介绍 订单分析分别分析订单的数量和订单的金额， 以及将订单分为总订单、 支付成功订单以及退款订单三种类型的数据 ， 通过这六个分析指标的数据我们可以指定网站的订单情况。 代码步骤 hive中创建hbase对应的外部表 订单数量&订单金额的hive&sqoop分析 a. 实现自定义udf&自定义函数创建 c. hive+sqoop脚本 退款订单数量&金额&总金额的hive&sqoop分析 shell脚本编写以及测试（作业）
1.4K60发布于 2018-04-08 - 来自专栏Albert陈凯
Hadoop离线数据分析平台实战——320会话分析Hadoop离线数据分析平台实战——320会话分析
Hadoop离线数据分析平台实战——320会话分析 项目进度 模块名称 完成情况 用户基本信息分析(MR)� 未完成 浏览器信息分析(MR) 未完成 地域信息分析(MR) 未完成 外链信息分析(MR) 未完成 用户浏览深度分析(Hive) 未完成 订单分析(Hive) 未完成 事件分析(Hive) 未完成 模块介绍 会话分析主要同时计算会话个数和会话长度， 主要应用在用户基本信息分析模块和浏览器信息分析模块这两部分
1.2K70发布于 2018-04-08 - 来自专栏云数据库1
基于EMR离线数据分析
海量离线数据分析可以应用于多种商业系统环境，例如电商海量日志分析、用户行为画像分析、科研行业的海量离线计算分析任务等场景。 展示了如何构建弹性低成本的离线大数据分析。 体验此场景后，可以掌握的知识有： 1.EMR集群的基本操作，对EMR产品有初步的了解 2.EMR集群的数据传输和hive的简单操作，对如何进行离大数据分析有初步的掌握 产品优势 开源生态：提供高性能、稳定版本 hdfs dfs -mkdir -p /data/student 2.上传文件到hadoop文件系统。 a.
82440编辑于 2022-03-09 - 来自专栏Albert陈凯
Hadoop离线数据分析平台实战——410事件分析Hadoop离线数据分析平台实战——410事件分析
Hadoop离线数据分析平台实战——410事件分析 项目进度 模块名称 完成情况 用户基本信息分析(MR)� 完成 浏览器信息分析(MR) 完成 地域信息分析(MR) 完成 外链信息分析(MR) 完成 用户浏览深度分析(Hive) 完成 订单分析(Hive) 未完成 事件分析(Hive) 未完成 模块介绍 事件分析我们主要只是分析事件的触发次数， 通过查看事件的触发次数我们可以得到事件转换率或者用户会此类事件的兴趣所在之处以及不喜之处
1.3K80发布于 2018-04-08 - 来自专栏Albert陈凯
Hadoop离线数据分析平台实战——330会话分析Hourly分析Hadoop离线数据分析平台实战——330会话分析Hourly分析
Hadoop离线数据分析平台实战——330会话分析Hourly分析 项目进度 模块名称 完成情况 用户基本信息分析(MR)� 未完成 浏览器信息分析(MR) 未完成 地域信息分析(MR) 未完成 外链信息分析 (MR) 未完成 用户浏览深度分析(Hive) 未完成 订单分析(Hive) 未完成 事件分析(Hive) 未完成 模块介绍 Hourly分析指的是按照小时分析数据， 在本次项目中，只分析活跃用户、 我们通过修改现有的job来达到完成hourly分析数据统计的目标。 分别通过在active user和sessions这两个job中添加数据可以达到我们的分析要求。 计算规则 hourly分析分为hourly active user分析、hourly sessions分析以及hourly sessions length分析， 分别计算各个小时的活跃用户、会话个数以及会话长度来进行展示操作
1.2K100发布于 2018-04-08 - 来自专栏ahzoo.cn的博客分享
Aria2离线下载搭建
Aria2搭建 使用一键安装脚本快速安装 # wget -N --no-check-certificate https://www.moerats.com/usr/shell/Aria2/aria2.sh aria2，我这里是1.35.0 # wget https://github.com/aria2/aria2/releases/download/release-1.35.0/aria2-1.35.0. /configure # make # make install 配置aria2: 创建aria2文件夹 # mkdir /etc/aria2 创建aria2.session文件 # touch / /etc/aria2/aria2.conf 修改input-file和save-session： # 从会话文件中读取下载任务 input-file=/etc/aria2/aria2.session aria2.session # 在Aria2退出时保存`错误/未完成`的下载任务到会话文件 save-session=/etc/aria2/aria2.session # 定时保存会话, 0为退出时才保存
1.5K11编辑于 2022-08-01 - 来自专栏Albert陈凯
Hadoop离线数据分析平台实战——300活跃会员分析Hadoop离线数据分析平台实战——300活跃会员分析
Hadoop离线数据分析平台实战——300活跃会员分析 项目进度 模块名称 完成情况 用户基本信息分析(MR)� 未完成 浏览器信息分析(MR) 未完成 地域信息分析(MR) 未完成 外链信息分析(MR ) 未完成 用户浏览深度分析(Hive) 未完成 订单分析(Hive) 未完成 事件分析(Hive) 未完成 模块介绍 活跃会员的统计和活跃用户统计类似， 区别只是在于从不同的角度来进行分析访问网站的用户数量
1.2K70发布于 2018-04-08 - 来自专栏Albert陈凯
Hadoop离线数据分析平台实战——290活跃用户分析Hadoop离线数据分析平台实战——290活跃用户分析
Hadoop离线数据分析平台实战——290活跃用户分析 项目进度 模块名称 完成情况 用户基本信息分析(MR)� 未完成 浏览器信息分析(MR) 未完成 地域信息分析(MR) 未完成 外链信息分析(MR ) 未完成 用户浏览深度分析(Hive) 未完成 订单分析(Hive) 未完成 事件分析(Hive) 未完成 模块介绍 和分析新增用户一样，活跃用户也需要在用户基本信息分析模块和浏览器分析模块中展示，
1.1K140发布于 2018-04-08 - 来自专栏Albert陈凯
Hadoop离线数据分析平台实战——400用户浏览深度分析Hadoop离线数据分析平台实战——400用户浏览深度分析
Hadoop离线数据分析平台实战——400用户浏览深度分析 项目进度 模块名称 完成情况 用户基本信息分析(MR)� 完成 浏览器信息分析(MR) 完成 地域信息分析(MR) 完成 外链信息分析(MR) 完成 用户浏览深度分析(Hive) 未完成 订单分析(Hive) 未完成 事件分析(Hive) 未完成 模块介绍 用户浏览深度分析中，通过pv值来表示用户的浏览深度， 分别从两个不同的角度来展示浏览深度
949100发布于 2018-04-08 - 来自专栏Albert陈凯
Hadoop离线数据分析平台实战——370外链信息分析Hadoop离线数据分析平台实战——370外链信息分析
Hadoop离线数据分析平台实战——370外链信息分析 项目进度 模块名称 完成情况 用户基本信息分析(MR)� 完成 浏览器信息分析(MR) 完成 地域信息分析(MR) 完成 外链信息分析(MR) 未完成 用户浏览深度分析(Hive) 未完成 订单分析(Hive) 未完成 事件分析(Hive) 未完成 外链信息分析规则 和地域信息分析一样，在外链分析系统中， 我们也只是统计活跃用户、总会话以及跳出会话这三个指标的数据 b_1, b_2,b_3 访问页面为：b_1 -> b_2 -> b_3 先直接访问了本网站，然后再通过外部链接进入到本网站的情况:(b_n)+w_1(b_n)+ b_1, w_1, b_2, b_ w_1： 不是跳出会话 先通过外链1进入本网站，再通过外链2进入本网站:(b_n)+(w_1(b_n)+)+ b_1, w_1, b_2, w_2, b_3, b_4,w_3,b_5 访问页面为：b _1->w_1->b_2->w_2->b_3->b_4->w_3->b_5 跳出会话：通过外链进入本网站后，在通过其他外链进入之前，如果只访问过一次本网站就算作跳出会话。
1.1K111发布于 2018-04-08 - 来自专栏kali blog
Aria2+Alist实现离线下载
安装aria2 我们在centos中执行下载命令，进行安装。aria2的安装脚本比较多，大家也可以自行查找。 sign=GsbYlgmkkfMIRugifsVa2-g_7cE2oDJ5-qv2E75u1Bw=:0 -O aria2.sh && chmod +x aria2.sh #备用 wget https:/ /blog.bbskali.cn/aria2.sh -O aria2.sh && chmod +x aria2.sh . 到处，在alist中，我们的aria2就配置完成了。 下载 我们只需要到前台点击离线下载。输入磁力链接或者其他下载地址即可。 然后，在后台任务中，便可以看到，当前的下载进度。 怎么样，很方便吧！ 只需要将其放到后台，便可以实现离线下载，很方便！感兴趣的快来试试吧！ 更多精彩文章 欢迎关注我们
84610编辑于 2025-07-28 - 来自专栏HHTjim'S 部落格
使用aria2做离线下载
使用aria2做离线下载 作者：matrix 被围观: 4,327 次 发布时间：2018-12-19 分类：零零星星 | 7 条评论 » 这是一个创建于 1352 天前的主题，其中的信息可能已经有所发展或是发生改变 官网：https://aria2.github.io/ aria2属于垮平台的命令行下载工具，支持多协议BT磁力链.很多网盘下载工具都是用aria2作为下载器 远端服务器做为下载工具的话可以很方便的实现离线下载功能 https://github.com/aria2/aria2/releases/download/release-1.34.0/aria2-1.34.0.tar.gz tar -xvf aria2-1.34.0 /aria2/aria2.session #新建session文件 sudo chmod 777 /etc/aria2/aria2.session #设置aria2.session可写 sudo vi /etc/aria2/aria2.conf #创建并编辑下载操作的配置文件 若不特殊存放aria2默认会读取~/.aria2/aria2.conf中的配置文件 写入以下内容： # rpc加密密钥
1.4K30编辑于 2022-09-26 - 来自专栏frytea
使用aria2实现离线下载
在这样的环境下，自己搭建一个离线下载站就显得非常有必要。 aria2是一款开源的多线程文件下载工具，其强大的下载能力令人沉醉，同时其干净纯净的功能也非常吸引人。 在这里就介绍一下这三个部分，一个是配置aria，我将其配置在自己的云主机上实现了离线下载；第二个是web面板的配置，第三个是桌面版的下载工具。 ，发现了目前知道的最佳解决方案： Aria2 一键安装管理脚本 一键安装脚本GitHub Aria2 + Rclone 实现 OneDrive、Google Drive 等网盘离线下载 百度网盘转存到 OneDrive 、Google Drive 等其他网盘 参考文献 Aria2离线下载+H5ai在线观看 替代迅雷！ 在Linux下更新或安装curl Author: Frytea Title: 使用aria2实现离线下载 Link: https://blog.frytea.com/archives/36/
2.5K31发布于 2020-07-16 - 来自专栏轻扬小栈
aria2，SO COOL，用于迅雷离线
aria2，SO COOL，用于迅雷离线 可能有人会说我OUT了，“aria2 是我有人在玩了” 可能有人会说，”aria2是什么”。百度吧。 ARIA2最大的特点有2个， 1，支持迅雷离线下载 2，支持远程管理 我只实践了迅雷离线下载功能，这功能用好了，就不用装迅雷了！ （前提是你是迅雷VIP:-） 步骤一: 安装aria2 步骤二：运行 ，让aria2后面运行着 aria2c –enable-rpc –rpc-listen-all –rpc-allow-origin-all 步骤三：在chrome浏览器里安装2个插件，用于管理离线下载 迅雷离线助手：https://chrome.google.com/webstore/detail/eehlmkfpnagoieibahhcghphdbjcdmen 等我有装备时再来写篇文章吧， 有了aria2，linux下，关于下载东西的纠结，就不在有了，哈哈 linux没有迅雷与QQ，实在是硬伤啊
3K30发布于 2018-06-05 - 来自专栏腾讯云代码分析
CNB上极致简化当地离线代码分析
点击最下方【阅读原文】可直达）https://tca.tencent.com/ 官网介绍：https://cloud.tencent.com/product/tcap 零配置模式 ▼ 该模式是当地分析 使用默认的代码安全分析规则包，无需配置分析方案，只需在.cnb.yml中添加以下描述，开箱即用。 # .cnb.yml main: # 触发的分支名，按需修改 push: # push触发，也可以用merge_request等触发 - stages: # 代码分析 - name 默认是远端节点分析，通过配置参数mode为local可调整为当地分析（数据和报告产出在当地，便于后续自由使用）。 详情操作可参考该文章 腾讯云代码分析，公众号：腾讯云代码分析【腾讯云代码分析】支持在CNB上本地执行
21910编辑于 2025-07-08 - 来自专栏Albert陈凯
Hadoop离线数据分析平台实战——340浏览器PV分析Hadoop离线数据分析平台实战——340浏览器PV分析
Hadoop离线数据分析平台实战——340浏览器PV分析 项目进度 模块名称 完成情况 用户基本信息分析(MR)� 完成 浏览器信息分析(MR) 未完成 地域信息分析(MR) 未完成 外链信息分析(MR ) 未完成 用户浏览深度分析(Hive) 未完成 订单分析(Hive) 未完成 事件分析(Hive) 未完成 模块介绍 在浏览器信息分析模块中除了用户、会员和会话的分析外， 还有pv的分析，pv的计算可以代表网站的流量值 MapReduce代码编写 collector和xml配置等 测试 扩展：在计算pv值后，可以计算跳出率以及各个页面的情况， 可以将页面分为三大类，进入页面、正常浏览页面以及退出页面(按照会话来分析
847111发布于 2018-04-08
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号