首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏VBA 学习

    VBA一转二

    前面说过了二转一,现在来看看一转二。 1、需求: 将1个一表格转换为二表格: ? 2、实现方法: 数据透视 要实现这个方法,其实熟练数据透视的处理起来是非常的简单的: ? VBA代码实现 使用VBA代码来实现自然也是没有问题的,使用字典来分别记录行和列的序号,然后输出到1个二数组就可以: Sub TarnsTable2() Dim drow As Object

    2.1K30发布于 2020-07-28
  • 来自专栏VBA 学习

    VBA二转一

    1、需求: 将1个二表格转换为方便数据统计的一表格: ? 3、代码实现 这个功能的逻辑还是挺简单的,2个循环就可以覆盖数据所有的范围,然后输出到1个二数组,主要是要注意计算数组的下标: Sub TarnsTable() On Error GoTo

    2.1K30发布于 2020-07-28
  • 来自专栏公众号PowerBI大师

    、二那些事

    今天想谈谈一和二 这两样如果搞不清,数据清洗时仍然会陷入事倍功半的泥潭 什么是二? 看下图,确定一个数值,必须通过行列两个条件去定位,这是二最显著的特征 ? 那什么是一呢? 最早接触一的,是那些数据库从业者,因为一大都是系统自动生成的。 ,就是二;仅靠单行就能锁定全部信息的,就是一 当然,一、二可以相互转换 一转二用透视,反之用逆透视 我们把一称为源数据,特点是数据丰富详实,适合做流水账,方便存储,有利于做统计分析 一表显然不适合人类阅读,想了解汇总信息,只能通过透视功能转换为二。一信息越详实,二可展示的方式就越灵活 ? ? ? 至此,二转一过程结束(注意修改列名) 接下来就可以建度量值拉图表搭建可视化页面了 ? ?

    5.4K22发布于 2020-05-27
  • 来自专栏用户8950297的专栏

    和二,透视及逆透视

    大海:嗯,一和二的概念了解吗? 小勤:好像是算知道的,一个一对一,一个一对多? 首先,关于一和二、透视和逆透视,我先做个简单的例子给你们看一下。 大海:其实,所谓透视,就是从一到二(甚至更多维度)形成交叉汇总的过程;相反,从二向一的过程就是逆透视。 比如可以练一下没有PQ的时候,用数据透视做逆透视的方法,具体参考案例《二转一用多重数据透视?弱爆了!》,体会一下两者之间的差别和优缺点。

    1.3K20发布于 2021-08-30
  • 来自专栏Flink实战剖析

    flink关联系列之Hbase关联:LRU策略

    关联系列目录: 一、服务与Flink异步IO 二、Mysql关联:全量加载 三、Hbase关联:LRU策略 四、Redis关联:实时查询 五、kafka关联:广播方式 六、自定义异步查询 在Flink中做关联时,如果的数据比较大,无法一次性全部加载到内存中,而在业务上也允许一定数据的延时,那么就可以使用LRU策略加载数据。 但是如果一条数据一直都被缓存命中,这条数据永远都不会被淘汰,这时的数据已经发生改变,那么将会在很长时间或者永远都无法更新这条改变,所以需要设置缓存超时时间TTL,当缓存时间超过ttl,会强制性使其失效重新从外部加载进来 接下来介绍两种比较常见的LRU使用: LinkedHashMap LinkedHashMap是双向链表+hash的结构,普通的hash访问是没有顺序的,通过加上元素之间的指向关系保证元素之间的顺序, 可配置淘汰策略 非常适用于Flink关联LRU策略,使用方式: cache = CacheBuilder.newBuilder() .maximumSize(1000

    1.6K21编辑于 2022-04-18
  • 来自专栏VBA 学习

    常用功能加载宏——二转一

    #13;" size="large" imageMso="TableSummarizeWithPivot"> <button id="rbbtnTarnsTable2To1" label="二<em>维</em><em>表</em>转一<em>维</em><em>表</em>

    94141发布于 2020-07-28
  • 来自专栏Flink实战剖析

    flink关联系列之kafka关联:广播方式

    关联系列目录: 一、服务与Flink异步IO 二、Mysql关联:全量加载 三、Hbase关联:LRU策略 四、Redis关联:实时查询 五、kafka关联:广播方式 六、自定义异步查询 广播状态用于关联 如果需求上存在要求低延时感知数据的更新,而又担心实时查询对外部存储数据的影响,那么就可以使用广播方式将数据广播出去,既能满足实时性、又能满足不对外部存储产生影响,仍然以用户行为规则匹配为例 broadcastStateDesc).put(value.actionType,value) } }) env.execute() 以上就是简易版使用广播状态来实现关联的实现 ,由于将数据存储在广播状态中,但是广播状态是非key的,而rocksdb类型statebackend只能存储keyed状态类型,所以广播数据只能存储在内存中,因此在使用中需要注意的大小以免撑爆内存

    1.4K31编辑于 2022-04-18
  • 来自专栏Flink实战剖析

    flink关联系列之Redis关联:实时查询

    在做关联如果要求低延时,即数据的变更能够被立刻感知到,所以就要求在查询时没有缓存策略,直接查询数据库信息。 clientId1,1,1571646006000 输出: AdData(1,1,clientId1,1,1571646006000) AdData(0,3,clientId1,1,1571646006000) 验证完毕,也算是补上系列里面的空缺

    2.3K31编辑于 2022-04-18
  • 来自专栏VBA 学习

    常用功能加载宏——一转二

    实现了二表格转换为一表格,反过来的功能偶尔也是会用到的: 首先在customUI.xml中增加代码: <button id="rbbtnTarnsTable1To2" label="一<em>维</em><em>表</em>转二<em>维</em><em>表</em>

    1.1K20发布于 2020-07-28
  • 来自专栏数据STUDIO

    MySQL高频面试题:一转二

    本文所用的信息 学生stu 字段名 数据类型 约束条件 s_id varchar(10) primary key s_name varchar(10) not null s_birth date varchar(10) c_id varchar(10) score int 面试题 查询所有学生的课程及分数情况 分析,课程与分数情况,用到学生及成绩,两张都是一,将其转化为右图所示的二 *,c_id,score FROM stu LEFT JOIN sc ON stu.s_id=sc.s_id; 第二步,将上面得到的结果转换为二 ? 成绩。" 以如下形式显示:课程ID,课程name,最高分,最低分,平均分,及格率,中等率,优良率,优秀率,及格为:>=60,中等为:70-80,优良为:80-90,优秀为:>=90 分析,从需要显示的列看出需要用到课程和成绩

    1.4K30发布于 2021-06-24
  • 来自专栏Flink实战剖析

    flink关联系列之Mysql关联:全量加载

    关联系列目录: 一、服务与Flink异步IO 二、Mysql关联:全量加载 三、Hbase关联:LRU策略 四、Redis关联:实时查询 五、kafka关联:广播方式 六、自定义异步查询 在关联中定时全量加载是针对数据量较少并且业务对数据变化的敏感程度较低的情况下可采取的一种策略,对于这种方案使用有几点需要注意: 全量加载有可能会比较耗时,所以必须是一个异步加载过程 内存数据需要被流数据关联读取 、也需要被定时重新加载,这两个过程是不同线程执行,为了尽可能保证数据一致性,可使用原子引用变量包装内存数据对象即AtomicReference 查内存数据非异步io过程 具体实例:广告流量统计, ,给用户发出警告 全量加载是在每个task里面执行,那么就会导致每个task里面都有一份全量的数据,可采取优化方式是在关联前根据关联字段做keyBy操作,那么就会根据关联字段hash然后对并行度取余得到相同的值就会被分配到同一个 task里面,所以在加载数据的时候也可以在每个task加载与其对应的数据, 就可以减少加载的数据量。

    3K20编辑于 2022-04-18
  • 来自专栏Flink实战剖析

    flink关联系列之服务与Flink异步IO

    关联系列目录: 一、服务与Flink异步IO 二、Mysql关联:全量加载 三、Hbase关联:LRU策略 四、Redis关联:实时查询 五、kafka关联:广播方式 六、自定义异步查询 一、服务 维度或者是概念熟知应该从数据仓库维度建模开始了解的,区别于事实业务真实发生的数据,通常用来表示业务属性,比喻订单业务中,商品属性、商家属性都可以称之为维度。 在flink 流处理实时分析中或者实时数仓中,同样需要使用来完成一些数据过滤或者字段补齐操作,但是我们所需要的维度数据通常存储在Mysql/Redis/Hbase/Es这样的外部数据库中,并且可能是会随时变动的 ,根据业务要求数据的时效性,需要不同程度的感知数据的变化,在实际使用中常常会有以下几种方案可供选择: 在维度数据量比较小并且业务要求的时效性不高,可以定时全量加载维度数据到内存中,直接从内存中查询维度数据

    1K30编辑于 2022-04-18
  • 来自专栏全栈程序员必看

    拉链表案例_善优案例

    一.数据准备 下表为分区增量数据(userinfo) 创建加载数据 用户信息 create table test.userinfo( userid string comment 用户信息' partitioned by(dt string) row format delimited fields terminated by ','; 拉链表(存放用户历史信息) 拉链表不是分区: set serdeproperties('field.delim'=','); 向中间中加入数据 load data local inpath '/data/userinfo.dat' overwrite into table test.tmp1; 从中间向分区加载数据 set hive.exec.dynamic.partition.mode=nonstrict; insert into table 2020-06-23 2020-06-23 Time taken: 0.398 seconds, Fetched: 15 row(s) 二.拉链表实现 我们的数据来源是来自test.userinfo分区,

    43220编辑于 2022-11-03
  • 来自专栏数据小魔方

    excel数据转置——一与二之间的转化!

    今天跟大家分享excel数据转置——一与二之间的转化! 选择性粘贴仅仅是把行列互换了 显然并没有改变数据显示的维度 也就是说选择性粘贴转来换去 表格一仍然是一仍然是二 但是使用上述插件工具转化后 大家可以明确的发现 数据已经确确实实从二转化为一了 一的典型特征: 列代表属性 行代表记录 因而同一列中会有重复记录 我们在数据采集环节 接触到的原始数据更多的是一 即列代表属性、行代表记录 ●●●●● 下面对比一下Eviews、SPSS、Stata 等主流的数据分析软件界面 以及一些主流的数据库产品 默认的都是列代表属性 行代表记录 SPSS22界面 stata12界面 Eviews9.0界面 因此在数据整理的时候 不要随便将一转化为二 或者务必要保存原始一数据 在新的工作中再生成二 以防一丢失之后 想要再转化回来就需要费些功夫了 其实一与二之间的转化 数据透视也可以轻松做到 但是需要对数据透视有些基本了解 以后会出数据透视的教程

    5.7K50发布于 2018-04-10
  • 来自专栏PowerBI入门100例

    1.9 PowerBI数据准备-逆透视,将二或多维转换为一

    每一行都是描述一个事物的一次性产生的完整属性信息,便于存储数据和后期计算、汇总;二直观易读,便于展示数据,不利于后期计算、汇总。 一通过透视可以生成二;二通过逆透视可以还原成一。PowerBI中获取数据后生成的,一般使用一,方便建立之间的关系、书写度量值、生成透视或图表。 因此,很多时候需要在PowerQuery中将二的甚至更多维的数据源转换为一。举例1二转一,年月横向展开的。 图片举例2多维转一,多层表头+多列维度。 STEP 8 修改字段的名称和数据类型,就得到一了。

    1.7K10编辑于 2025-02-21
  • 来自专栏VBA 学习

    VBA与数据库——简化程序编写-一转二

    在一转二表里介绍了使用字典来转换表格的方法,可以看到使用字典的方法代码量还是有一点多的,有点复杂。

    1K30发布于 2021-07-20
  • 来自专栏用户8950297的专栏

    转一用多重数据透视?弱爆了!

    小勤:部门里有个烦屎了,交上来的都是二,我每次都要转成一才好跟其他数据合并分析。 大海:呵呵。二是出了名的貌似很好看,但不方便分析的。你现在是怎么干的? 你看: 第一步:Alt+D+P调出数据透视向导窗口,选择【多重合并计算区域】 第二步:选择【创建单页字段】 第三步:选择和添加要转换的二区域 第四步:在生成的透视表里双击总计数,就搞定了。 看着: 第一步:【新建查询】-【从文件】-【从工作簿】 第二步:选择数据所在文件,【导入】 第三步:选择数据所在的,【编辑】 第四步:选中原来的“行”那一列,【转换】-【逆透视】-【逆透视其他列 那以后他们给我的二要转换成一的话,是不是就可以直接放进去,刷新就好? 大海:对的。以后直接放数据进去。刷新。搞定!你可以直接在原来的上加一条数据试试就知道了。 小勤:太赞了!

    97820发布于 2021-08-30
  • 来自专栏用户8950297的专栏

    PQ-数据转换10:一和二,透视及逆透视

    大海:嗯,一和二的概念了解吗? 小勤:好像是算知道的,一个一对一,一个一对多? 首先,关于一和二、透视和逆透视,我先做个简单的例子给你们看一下。 大海:其实,所谓透视,就是从一到二(甚至更多维度)形成交叉汇总的过程;相反,从二向一的过程就是逆透视。 比如可以练一下没有PQ的时候,用数据透视做逆透视的方法,具体参考案例《二转一用多重数据透视?弱爆了!》,体会一下两者之间的差别和优缺点。

    1.4K20发布于 2021-08-31
  • 来自专栏章鱼carl的专栏

    【Flink】第二篇:Join之版本

    ):Lookup DB Join、版本Join 以kafka-json事实关联upsert-kafka版本的Demo入手,对版本Join的水位线机制作简要分析。 首先,澄清一下相关的概念: 动态(Dynamic Table) / 时态(Temporal Table):与表示批处理数据的静态不同,动态是随时间变化的。 Flink的流批一体的语义使得我们可以像查询批处理中的静态一样查询动态。查询动态将生成一个连续查询。一个连续查询永远不会终止,结果也会生成一个动态。 版本:如果时态中的记录可以追踪和并访问它的历史版本,这种我们称之为版本,来自数据库的 changelog 可以定义成版本。 普通:如果时态中的记录仅仅可以追踪并和它的最新版本,这种我们称之为普通,来自数据库 或 HBase 的可以定义成普通

    1.7K30编辑于 2022-03-31
  • 来自专栏千帆企业应用连接器

    金山轻一键自动跨同步

    有没有适合HR使用的工具,可以自动将表格中的数据进行跨同步,不需要手动复制粘贴呢?当然可以。推荐使用腾讯云HiFlow,可以实现金山轻自动同步。如何实现金山轻一键自动跨同步? 首先,我们需要进入腾讯云HiFlow官网,找到【金山轻一键自动跨同步】模板,点击立即使用。我们以上述场景作为案例,演示如何自动同步。 Step1:触发节点我们选择【金山文档轻-新增或修改的内容满足指定条件】,我们将查询条件设置为“手机号不为空”。这个时候,当有新的手机号填入的时候,则会触发此流程。 最后,当我们更新A时,数据也能在B中一键自动跨同步。 是什么产品腾讯云HiFlow是腾讯云推出的零代码的自动化工作流程平台,目前已经实现了连接了比如企业微信、腾讯会议、腾讯文档、腾讯电子签、TAPD、乐享、兔小巢、微信小商店、企点、公众号、EC SCRM、

    1.5K52编辑于 2023-03-07
领券