首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏Hank’s Blog

    3-5 处理缺失值

    > x <- c(1,NA,2,NA,3) > is.na(x) [1] FALSE TRUE FALSE TRUE FALSE > x[!is.na(x)] #找出不是缺失值 [1] 1 2 3 > x <- c(1,NA,2,NA,3) > y <- c("a","b",NA,"c",NA) > z <- complete.cases(x,y) #都不是缺失值的元素 > x[z] [1] 1 > y[z] [1] "a" > library(datasets) #import dat

    54410发布于 2020-09-16
  • 来自专栏NetCore 从壹开始

    3-5 安装CICD管理平台:Jenkins

    大家这里可以先安装gitlab工具,我就省事了,直接用gitee做源代码管理平台了。

    37321编辑于 2023-01-09
  • 来自专栏叽叽西

    lagou 爪哇 3-5 spring cloud (下) 笔记

    TraceId唯⼀标识,span标识发起的请求信 息,各span通过parrentId关联起来 注意:我们往往把Spring Cloud Sleuth 和 Zipkin ⼀起使⽤,把 Sleuth 的数据信 息发送给 Zipkin 进⾏聚合,利⽤ Zipkin 存储并展示数据。 Bus) 官⽹:https://nacos.io 下载地址:https://github.com/alibaba/Nacos Nacos功能特性 服务发现与健康检查 动态配置管理 动态DNS服务 服务和元数据管理 【可选操作】这里顺便对 Nacos Server 数据持久化改造, 方便 nacos 服务端每次重启后还得重新进行配置. 修改${nacoshome}/conf/application.properties,增加 Mysql 数据源配置 spring.datasource.platform=mysql ### Count

    90920编辑于 2022-05-17
  • 来自专栏PHP实战技术

    3-5年的PHPer常见的面试题

    安全、还是数据挖掘、大数据处理? mysql 索引原理及sql性能优化 memcache与mongoDB、Redis各自的使用场景是什么? 为什么mongoDB与Redis非但没有形成竞争反而是互补关系? Redis数据类型有哪些? nginx 实战优化业务功能 ? 谈一下近三年来你的得意之作? 看看简历,会问一些过去做的项目的用户量、pv、吞吐量、相关难点和解决方法等 数据库设计经验,为什么进行分表? 分库? 一般多少数据量开始分表? 分库? 分库分表的目的? 什么是数据库垂直拆分? 水平拆分? 分区等等?可以举例说明 数据优化有哪些? 分别需要注意什么? web开发方面会遇到哪些缓存? 分别如何优化? 每个步骤需要注意什么如何优化等? 为什么要对数据库进行主从分离? 如何处理多服务器共享session? 一个10G的表,你用php程序统计某个字段出现的次数,思路是?

    1.6K100发布于 2018-03-09
  • jvm入门2:3-5运行时数据区+程序技术器+虚拟机栈

    即栈解决程序的运行问题,程序如何执行,如何处理数据。对解决数据的存储问题,数据怎么放,放哪?java虚拟机栈是什么? 1每个线程都有自己栈,栈中的数据都以栈帧的格式存在;2线程上正在执行的每个方法都对应一个栈帧;3栈帧是一个内存区块,一个数据集,维系着方法执行过程中的各种数据信息栈运行原理1jvm直接对栈的操作只有两个 ,数据引用(reference)、returnAddress类型;3由于局部变量表示建立在线程的栈上,线程的私有数据,不存在数据安全问题;4局部变量表所需的容量大小是编译期确定下来的,并保存在方法的code 属性maximum local variables数据项中。 只要被局部变量表中直接或间接引用的对象都不会被回收操作数栈1每一个独立的栈帧中除了包含局部变量表之外,还包含一个后进先出的操作数栈,也称为表达式栈;2操作数栈,在方法执行过程中,根部字节码指令,往栈中写入数据或提取数据

    40810编辑于 2025-02-24
  • 来自专栏PHP在线

    数据优化

    数据优化 读写分离,在X2的版本中,我们引入了多SQL服务器的支持,在主从服务器中,你可以配置写服务器跟读服务器,这样对于负载高的站点中可以使用这个 功能达到读写分离,降低由于写过程序中造成的MySQL 例如: /** * 数据库主服务器设置, 支持多组服务器设置, 当设置多组服务器时, 则会根据分布式策略使用某个服务器 * @example * $_config['db']['1']['dbhost / 字符集 * $_config['db']['1']['pconnect'] = '0';// 是否持续连接 * $_config['db']['1']['dbname'] = 'x1';// 数据库 2、查看帖子时,如果增量点击数到100,则使用进程锁将数据更新到thread表并更新增量点击数为0。 3、回贴时将增量点击数和回复数一起更新到thread表,并更新增量点击数为0。 4、执行计划任务:每天3点,5分钟一次,一次取500条数据更新到thread表, 并删除此500条数据,以减少forum_threadaddviews表的大小。

    78480发布于 2018-03-07
  • 来自专栏cwl_Java

    C++编程之美-结构之法(代码清单3-5)

    代码清单3-5 void RecursiveSearch(int* number, int* answer, int index, int n) { if(index == n)

    30020编辑于 2022-11-30
  • 来自专栏AI机器学习与深度学习算法

    机器学习入门 3-5 Numpy数组(和矩阵)的基本操作

    print(X.shape) # (3, 5) size 属性查看数组中的元素个数 print(x.size) # 10 print(X.size) # 15 (3 x 5) numpy.array 的数据访问

    90410编辑于 2022-05-25
  • 来自专栏跟着官方文档学小程序开发

    第二章 小程序开发指南3-5

    复制原始数据,防止原始数组被更改     let newItems = [];     for (let i = 0; i < this.data.itemsWidthAndFlexShrink.length 复制原始数据,防止修改原数组     let newItems = [];     for (let i = 0; i < this.data.itemsWidthAndFlexGrow.length; 宿主环境提供了统一的下拉刷新交互,开发者只需要通过配置开启当前页面的下拉刷新,用户往下拉动界面触发下拉刷新操作时,Page构造器的onPullDownRefresh回调会被触发,此时开发者重新拉取新数据进行渲染 enablePullDownRefresh": true } //page.js Page({   onPullDownRefresh: function () {     // 用户触发了下拉刷新操作     // 拉取新数据重新渲染界面

    39610编辑于 2025-08-25
  • 来自专栏授客的专栏

    MySQL 性能优化--优化数据库结构之优化数据大小

    通常,执行查询期间处理表数据时,小表占用更少的内存。 表列 l 尽可能使用最效率(最小)的数据类型。比如,使用更小的整型以便于获取更小的表。 同时,COMPACT行格式也会影响utf8或utf8mb4数据在CHAR类型列中的存储。 ROW_FORMAT=DYNAMIC选项创建的表 参考连接: http://dev.mysql.com/doc/refman/5.5/en/dynamic-format.html l 不同表中用相同的数据类型声明携带相同信息的数据列 标准化 l 正常,尽量保持数据不重复。赋予列名唯一ID,有必要的话,在其它更小表中使用这些id,而不是重复冗长的值,比如名称和地址,join子句中通过引用这些id来join表。 l 如果速度比磁盘空间,保存多份数据副本的维护成本更重要,例如,在一个商业智能场景中,分析来自大表的所有数据,可以适当放宽标准化规则,冗余数据信息或创建汇总表以获取更快的速度。

    3.1K20发布于 2019-09-10
  • 来自专栏全栈程序员必看

    数据优化 – SQL优化

    前面一篇文章从实例的角度进行数据优化,通过配置一些参数让数据库性能达到最优。但是一些“不好”的SQL也会导致数据库查询变慢,影响业务流程。本文从SQL角度进行数据优化,提升SQL运行效率。 获取问题SQL 不同数据库有不同的获取方法,以下为目前主流数据库的慢查询SQL获取工具 MySQL 慢查询日志 测试工具loadrunner Percona公司的ptquery等工具 SQL优化 执行计划 完成SQL优化一定要先读执行计划,执行计划会告诉你哪些地方效率低,哪里可以需要优化。 很可能SQL语句需要优化 接下来我们用一段实际优化案例来说明SQL优化的过程及优化技巧。 、增加索引、SQL改写等操作 查看优化后的执行时间和执行计划 如果优化效果不明显,重复第四步操作 版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。

    4.2K10编辑于 2022-10-04
  • 来自专栏JAVA杂谈

    数据优化 - SQL优化

    是时候 关注 我们一波了 前面一篇文章从实例的角度进行数据优化,通过配置一些参数让数据库性能达到最优。但是一些“不好”的SQL也会导致数据库查询变慢,影响业务流程。 本文从SQL角度进行数据优化,提升SQL运行效率。 获取问题SQL 不同数据库有不同的获取方法,以下为目前主流数据库的慢查询SQL获取工具 MySQL 慢查询日志 测试工具loadrunner Percona公司的ptquery等工具 Oracle AWR SQL优化 执行计划 完成SQL优化一定要先读执行计划,执行计划会告诉你哪些地方效率低,哪里可以需要优化。 (每个数据库的执行计划都不一样,需要自行了解) explain sql ?

    2.4K20发布于 2019-11-06
  • 来自专栏Java帮帮-微信公众号-技术文章全总结

    数据库】数据优化(SQL优化

    数据库】数据优化(SQL优化) sql语句优化 1.查询的模糊匹配 尽量避免在一个复杂查询里面使用 LIKE '%parm1%'—— 红色标识位置的百分号会导致相关列的索引无法使用,最好不要用。 11.对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引。 用下面的语句替换: select num from a where exists(select 1 from b where num=a.num) 23.并不是所有索引对查询都有效,SQL是根据表中数据来进行查询优化的 29.在新建临时表时,如果一次性插入数据量很大,那么可以使用 select into 代替 create table,避免造成大量 log , 以提高速度;如果数据量不大,为了缓和系统表的资源,应先create 33.尽量避免向客户端返回大数据量,若数据量过大,应该考虑相应需求是否合理。

    6.3K40发布于 2018-03-15
  • 来自专栏AI研习社

    未来 3-5 年内,哪个方向的机器学习人才最紧缺?

    但在回答前,我还是忍不住吐槽一下那种简单回答 “深度学习”,“大数据”,“NLP”,“机器视觉” 的人。 但有没有必要通晓数学,擅长优化呢? 工业界的另一个特点就是大量的数据缺失,大部分情况都没有标签。以最常见的反诈骗为例,有标签的数据非常少。所以我们一般都需要使用大量的无监督,或者半监督学习来利用有限的标签进行学习。 所以以 3-5 年的跨度来看,这些工具依然会非常有用,甚至像 CNN 和 LSTM 之类的深度学习算法还在继续发展迭代当中。 虽不可尽信,但对特定领域的深刻理解往往就是捅破窗户的那最后一层纸,只理解模型但不了解数据数据背后的意义,导致很多机器学习模型只停留在好看而不实用的阶段。

    73060发布于 2018-03-19
  • 来自专栏JAVA杂谈

    数据优化 - 实例优化

    从网上去搜数据优化基本都是从SQL层次进行优化的,很少有提及到数据库本身的实例优化。 减少数据库服务器CPU使用率 减少数据库服务器IO使用率 减少数据库服务器内存使用率 指标 SQL平均响应时间变短 优化前:数据库平均响应时间500ms 优化目标:数据库平均响应时间200ms 数据库服务器 CPU占用率变少 优化前:数据库高峰期CPU使用率70% 优化目标:数据库高峰期CPU使用率50% 数据库服务器IO使用率变低 优化前:数据库IO WAIT为30% 优化目标:数据库IO WAIT低于10% 数据优化误区 在进行数据优化的时候可能会有以下几个误区: 优化之前一定要深入了解数据库内部原理 优化是有“套路”的,照着这些“套路”你也可以很好的完成数据优化 不断调整数据库参数就可以最终实现优化 数据库实例优化 数据库实例优化遵循三句口诀:日志不能小、缓存足够大、连接要够用。 数据库事务提交后需要将事务对数据页的修改刷( fsync)到磁盘上,才能保证数据的持久性。

    2K30发布于 2019-10-30
  • 来自专栏授客的专栏

    MySQL 性能优化--优化数据库结构之优化数据类型

    优化数字数据(Numeric Data) l 对于唯一ID或其它可用字符串或数字表示的值,选择用数字列好过用字符串列。 参考连接: http://dev.mysql.com/doc/refman/5.7/en/optimize-character.html 优化BLOB l 当存储一个包含文本数据的大二进制对象 l 由于检索和展示BLOB值的性能要求和其它数据类型不一样,可以考虑把特定于BLOB的表放在不同的存储设备,甚至是一个单独的数据库实例。 optimize-blob.html 使用PROCEDURE ANALYSE ANALYSE([max_elements[,max_memory]]) ANALYSE()检测来自查询的结果并返回分析结果,为每列的数据类型给出可能帮助减小表的优化建议 ANALYSE()用于检测优化数据类型是否应该为ENUM,如果有多余max_elements个补重复值,则ENUM不为建议类型。

    5.5K20发布于 2019-09-10
  • 来自专栏cwl_Java

    性能优化-MySQL数据优化

    2、mysql数据优化 可以从哪几个方面进行数据库的优化?如下图所示: ? 这个时候就要了解sql优化 B、数据库表结构优化 根据数据库的范式,设计表结构,表结构设计的好直接关系到写SQL语句。 C、系统配置优化 大多数运行在Linux机器上,如tcp连接数的限制、打开文件数的限制、安全性的限制,因此我们要对这些配置进行相应的优化。 D、硬件配置优化 选择适合数据库服务的cpu,更快的IO,更高的内存;cpu并不是越多越好,某些数据库版本有最大的限制,IO操作并不是减少阻塞。 注:通过上图可以看出,该金字塔中,优化的成本从下而上逐渐增高,而优化的效果会逐渐降低。

    5.1K20发布于 2020-02-13
  • 来自专栏iOS逆向与安全

    写作小技能:卡片式写文章(用3-5张卡片写文)

    挑战->核心概念->该怎么做->总结->升华 找到1张卡做大的核心概念 找到3-5张卡做子概念的内容 把这些卡片的“行动指引”总结下,列在最后做个行动指引大全。 .… 用3-5张卡片写文是个很好的体验:1.主题是自下而上生成,而不是逼你针对命题写一个。2. 内容是过去知识卡片的积累,而不是临时写一句,出去找一段儿。3.

    1.6K10编辑于 2022-08-22
  • 来自专栏架构驿站

    【DB优化】MySql数据优化概述

    多端口绑定监听 II 操作系统级优化 使用64位的操作系统,更好的使用大内存。 含有NULL的列比较特殊,SQL难优化,如果是一个组合索引,那么这个NULL 类型的字段会极大影响整个索引的效率。 索引 索引的缺点:极大地加速了查询,减少扫描和锁定的数据行数。 使用推荐的GA版本,提升性能 利用分区新功能进行大数据数据拆分 V Mysql配置优化 注意:全局参数一经设置,随服务器启动预占用资源。 3. 2表示在每次事务提交后,执行log数据写入到cache,每秒执行一次flush log到磁盘。 VI Mysql语句级优化 1. 开启慢查询,定期用explain优化慢查询中的SQL语句。

    3.2K60编辑于 2022-03-25
  • 来自专栏互联网大杂烩

    优化模型数据挖掘之优化模型

    数据挖掘之优化模型 1.1数学规划模型 线性规划、整数线性规划、非线性规划、多目标规划、动态规划。 ---- 1.2微分方程组模型 阻滞增长模型、SARS传播模型。 ---- 1.3图论与网络优化问题 最短路径问题、网络最大流问题、最小费用最大流问题、最小生成树问题(MST)、旅行商问题(TSP)、图的着色问题。 ---- 1.5组合优化经典问题 多维背包问题(MKP) 背包问题:n个物品,对物品i,体积为iw,背包容量为W。如何将尽可能多的物品装入背包。 解决这一类经典组合优化问题的方法有: 穷举法,贪心法,动态规划法,分支限界法,回溯法等传统算法以及一些智能算法如蚁群算法和遗传算法。

    1.5K20发布于 2018-08-22
领券