- 综合排序
- 最热优先
- 最新优先
大数据挖掘企业服务平台典型合作案例都有哪些
大数据挖掘企业服务平台典型合作案例1. 中国电科院：电力大数据分析平台电力大数据平台拥有数据采集、数据存储、数据加工处理、数据分析挖掘、数据管控、平台管控、安装部署等功能，但是平台在组件融合、权限控制、对外接口封装等方面还存在不足， 不能够满足企业未来不同类型的大数据应用 运用大数据挖掘算法完善数据分析挖掘模块，实现对 Mahout、Rhadoop 等分析挖掘工具中的算法封装，通过企业数据挖掘应用流程化的模式，使得数据应用开发速度更快，成本更低， 让企业大数据挖掘应用更简单 2. 泰迪大数据挖掘企业服务平台是一款通用的、企业级、智能化的数据分析模型构建与数据应用场景设计工具，能够一体化地完成数据集成、模型构建、模型发布，为数据分析、探索、服务流程提供支撑，提供完整的数据探索、多数据源接入
71010编辑于 2024-06-26- 来自专栏R语言 / Linux
GEO数据挖掘-2
GEO数据挖掘—2 四、代码分析流程 1. 下载数据并从中提取有用信息 gse_number = "GSE56649" eSet <- getGEO(gse_number, destdir = '. (1)提取表达矩阵exp exp <- exprs(eSet) dim(exp) exp[1:4,1:4] 关于表达矩阵里的负值 取过log，有负值 —— 正常 没取过log，有负值 ——错误<em>数据</em> acc=GPL570 if(F){ #注：表格读取参数、文件列名不统一，活学活用，有的表格里没有symbol列，也有的GPL<em>平台</em>没有提供注释表格 b = read.delim("GPL570-55999 （目的是得到一个10列的<em>数据</em>框） rm(list = ls()) load(file = "step<em>2</em>output.Rdata") #差异分析，用limma包来做 #需要表达矩阵和Group，不需要改 number = Inf) #为deg<em>数据</em>框添加几列 #1.加probe_id列，把行名变成一列 library(dplyr) deg <- mutate(deg,probe_id=rownames(deg
1.1K01编辑于 2023-03-18 - 来自专栏火星娃统计
geo数据挖掘-2
geo数据挖掘-2 sunqi 2020/7/11 1.概述 对下载的数据进行处理，提取表达矩阵，并匹配探针信息，基因名 教程来自：https://github.com/jmzeng1314/GEO/ 2.数据下载 2.1 获得表达数据‘ rm(list=ls()) # 设置默认转换因子为否 options(stringsAsFactors = F) # 目标文件 f='GSE42872_eSet.Rdata file=f) ## 保存到本地 } # 为了避免自动化错误，这里再次导入 load('GSE42872_eSet.Rdata') ## 载入数据 # 查看数据类型为list class(gset colnames(Table(gpl)) head(Table(gpl)[,c(1,12)]) probe2gene=Table(gpl)[,c(1,12)] head(probe2gene ) save(probe2gene,file='probe2gene.Rdata') } # 获得平台的所有探针 load(file='probe2gene.Rdata') # 需要的时候通过
1.5K21发布于 2020-09-15 企业为什么需要数据挖掘平台？哪个比较好用呢？
数据挖掘平台功能：助力企业数据挖掘 1、数据抓取 挖掘平台是企业挖掘数据的重要工具。 2、数据清洗 数据抓取得来的数据大多是杂乱无章的，挖掘平台的数据清洗功能可以帮助企业处理非结构化数据，去除噪音和冗余信息，并进行数据格式转换、数据合并等操作，使得数据更容易分析。 5、数据挖掘平台可以应用于多个应用场景 数据挖掘平台广泛应用于企业的各个领域，如市场营销、风险管理、人力资源管理、医疗健康等，可实现精准营销、风险分析、员工管理、疾病诊断等。 数据挖掘平台不仅适用于大企业也适用于普通人 企业：分布式云计算，线性扩展，保证性能，与BI平台无缝整合，一键发布挖掘模型，模型库提高知识复用，减少重复投入，支持跨库查询，统一控制数据访问权限，训练自动化 泰迪智能科技企业数据挖掘平台由泰迪智能科技自主研发，面向企业级用户的大数据挖掘建模平台。
94310编辑于 2024-06-20- 来自专栏数据STUDIO
一个企业级数据挖掘实战项目｜教育数据挖掘
自从分享了一篇能够写在简历里的企业级数据挖掘实战项目，深受读者朋友们青睐，许多读者私信云朵君，希望多一些类似的数据挖掘实际案例。这就来了。 本项目旨在探讨影响学生学业表现的人口统计学和家庭特征。 语言2 Lang3 语言3 Lang4 语言4 Religion 宗教信仰 RESULT 结果标签 数据样例 探索性数据分析 探索性数据分析有多种方法，这里直接通过绘制柱状图查看每个字段的分布状况。 离散型变量 性别有男女，学校有学校1和学校2，身体健康状况有是否残疾，宗教信仰分是否是穆斯林。 连续型变量 本次数据集中兄弟姐妹数量及在校兄弟姐妹数量分布情况可以由下面四张分布图很好地展示出来。 大部分学生家中的兄弟姐妹有2-4个 大部分学生家中的姐妹都不是在校生 大部分学生家中的兄弟中也只有1-2个是在校生 哑变量 本次数据集共有四种语言，其数量分布由下图所示。 本文后续工作可以是通过正文中得到的结果，选择几个合适的模型，通过适当的模型调参方法选择恰当的参数，以确定本次数据挖掘的最终模型。
2.3K31发布于 2021-09-26 Python数据挖掘编程基础2
2.数据结构2.1Python中有4个内置的数据结构：List(列表)、Tuple(元组)、Dictionary(字典）和Set(集合），可以统称为容器(container),而这4个内置数据结构实际上是一些 简而言之，容器里的数据结构可以是任意的，且容器内部的元素类型不需要相同。<1>列表或元组a.列表和元组都是序列结构，两者都相似，但又有一些不同的地方。 因为容器的数据结构可以是任意类型，所以如下关于列表p的定义也是成立的。 一些常见的与列表或元组相关的函数如表2-1所示。此外，列表作为对象，自带了很多实用的方法(元组不允许被修改，因此方法很少),如表2-2所示。此外，列表还有"列表解析"这一功能。 代码清单2-3 使用append()方法对列表元素进行操作c=[1,2,3]d=[]for i in c:d.append(i+1)print(d)//输出结果为[2,3,4]将代码清单2-3使用列表解析进行简化
15710编辑于 2025-05-09- 来自专栏cloudskyme
跟我一起数据挖掘（19）——什么是数据挖掘（2）
对于数据仓库的概念我们可以从两个层次予以理： ①数据仓库用于支持决策,面向分析型数据处理,它不同于企业现有的操作型数据库； ②数据仓库是对多个异构数据源的有效集成,集成后按照主题进行了重组,并包含历史数据 企业数据仓库的建设是以现有企业业务系统和大量业务数据的积累为基础。数据仓库不是静态的概念,只有把信息及时交给需要这些信息的使用者,供他们作出改善其业务经营的决策,信息才能发挥作用,信息才有意义。 2、聚类 聚类：将数据对象划分为若干类，同一类的对象具有较高的相似度，不同类的对象相似度较低。从这个简单的描述中，可以看出聚类的关键是如何度量对象间的相似性。 并将这些目的与数据挖掘的定义以及结果结合起来。 2: data understanding: 数据的理解以及收集,对可用的数据进行评估。 (数据挖掘报告)。 ?
1.4K50发布于 2018-03-20 - 来自专栏CDA数据分析师
成为“大数据企业”，献给不懂数据挖掘的你！
在这种策略下，大规模多源异构数据的采集、清洗和整合方法，将成为大数据管理的核心支撑。 如何挖掘企业大数据的价值 企业大数据的价值开发高度依赖于深度数据分析能力。 对于这一平台所积累的大量数据的价值开发，首先体现在对其信息内容的提炼上。 平台上与工作相关的博文内容，如客服案例、经验分享等，经自动筛选分类、主题识别、关键词索引之后，被构建成企业知识库，为业务及管理工作提供快速有效的知识支撑，同时成为员工培训和自学的有力工具。 通过对这些关系结构的深度分析和挖掘，G公司获得了对员工及团队的影响力、凝聚力、创造力的更为准确而深入的评估手段。 例如，当G公司试图整合博客平台、业务系统、人力资源系统中的数据以全方位分析员工、团队特质以及绩效信息时，大量的数据属性之间所构成的复杂潜在关联网络，就需要强有力的关联发现技术来加以处理。
1.1K60发布于 2018-02-11 - 来自专栏灯塔大数据
成为“大数据企业”，献给不懂数据挖掘的你
在这种策略下，大规模多源异构数据的采集、清洗和整合方法，将成为大数据管理的核心支撑。 如何挖掘企业大数据的价值 企业大数据的价值开发高度依赖于深度数据分析能力。 对于这一平台所积累的大量数据的价值开发，首先体现在对其信息内容的提炼上。 平台上与工作相关的博文内容，如客服案例、经验分享等，经自动筛选分类、主题识别、关键词索引之后，被构建成企业知识库，为业务及管理工作提供快速有效的知识支撑，同时成为员工培训和自学的有力工具。 通过对这些关系结构的深度分析和挖掘，G公司获得了对员工及团队的影响力、凝聚力、创造力的更为准确而深入的评估手段。 例如，当G公司试图整合博客平台、业务系统、人力资源系统中的数据以全方位分析员工、团队特质以及绩效信息时，大量的数据属性之间所构成的复杂潜在关联网络，就需要强有力的关联发现技术来加以处理。
75170发布于 2018-04-04 - 来自专栏搜狗测试
软件品质评测系统- 数据挖掘处理平台
软件品质评测体系建立之后，在进行评测之前首先要确定评测使用的数据，这就需要数据挖掘平台发挥作用了，本文将以输入法评测语料制作为例介绍我们的评测数据挖掘处理平台。 1 数据挖掘处理原则 全面性 使用场景 依照不同用户需要的打字环境的差别，结合当前使用频率较高的几种应用，尽可能全面地覆盖用户使用的打字场景，主要分为以下两个类别： 聊天场景：用户聊天的打字内容，例如 因此我们在挖掘用户打字行为时，除了满足普通打字需求的同时也设计了多种用户可能的行为，包括联想、组词、纠错、退格等。 2评测数据的获取 通过定期抓取上文介绍的所有来源的评测数据，进行数据的获取，数据获取方式可参考我们评论爬虫的github开源项目： https://github.com/sogou-qa/LightCommentCrawler expect_cand": ""} //表示退格 {"pinyin": "#", "expect_cand": ""} //表示换行 ], "键盘类型":26 } 4结语 评测数据挖掘不是一成不变的
93020发布于 2020-07-16 - 来自专栏韩曙亮的移动开发专栏
【数据挖掘】数据挖掘总结 ( 数据挖掘相关概念 ) ★★
用于挖掘的数数据源 必须 真实 : ① 存在的真实数据 : 数据挖掘处理的数据一般是存在的真实数据 , 不是专门收集的数据 ; ② 数据收集 : 该工作不属于数据挖掘范畴 , 属于统计任务 ; 2 . , 如金融领域数据挖掘结果 , 只能在金融领域及相关领域使用 ; 参考博客 : 【数据挖掘】数据挖掘简介 ( 数据挖掘引入 | KDD 流程 | 数据源要求 | 技术特点 ) 二、 数据挖掘组件化思想 模型或模式结构 : 通过 数据挖掘过程 得到知识 ; 是算法的输出格式 , 使用 模型 / 模式 将其表达出来, 如 : 线性回归模型 , 层次聚类模型 , 频繁序列模式 等 ; 2 . \rm D , 1 项集 \rm C_1 , 2 项集 \rm C_2 , \cdots , \rm k 项集 \rm C_k , 这些项集都是候选项集 , 根据 原始数据集 \rm L_1 , 创造 2 项集 \rm C_2 , 然后对 \rm C_2 执行 数据集扫描函数 , 找到其中的 频繁 2 项集 \rm L_2 , \vdots 根据 频繁
5.3K00编辑于 2023-03-28 - 来自专栏CDA数据分析师
测试：你是否具备企业的数据挖掘能力？
1.某超市研究销售纪录数据后发现，买啤酒的人很大概率也会购买尿布，这种属于数据挖掘的哪类问题？ A. 关联规则发现 B. 聚类 C. 分类 D. 数据挖掘与知识发现 B. 领域知识发现 C. 文档知识发现 D. 动态知识发现 6.使用交互式的和可视化的技术，对数据进行探索属于数据挖掘的哪一类任务？ A. 探索性数据分析 B. 建模描述 C. 考虑值集{1、2、3、4、5、90}，其截断均值（p=20%）是 A 2 B 3 C 3.5 D 5 19.下面哪个属于映射数据到新的空间的方法？ 考虑值集{12 24 33 2 4 55 68 26}，其四分位数极差是： A 31 B 24 C 55 D 3 24. 关于基本数据的元数据是指: A.基本元数据与数据源,数据仓库,数据集市和应用程序等结构相关的信息; B.基本元数据包括与企业相关的管理方面的数据和信息; C.基本元数据包括日志文件和简历执行处理的时序调度信息
1.2K60发布于 2018-02-11 - 来自专栏数据科学与人工智能
【数据挖掘】图数据挖掘
那么图数据挖掘是干什么的呢？难道是开着挖掘机来进行挖掘？还是扛着锄头？下面讲讲什么是图数据挖掘。 一、什么是图数据挖掘 这个话题感觉比较沉重，以至于我敲打每个字都要犹豫半天，这里我说说我对图数据挖掘的理解。数据是一个不可数名字，那么说明数据是一个没有边界的东西。 那么不难理解，数据挖掘就是挖掘数据里面的“宝贝”，图数据挖掘，就是以图的结构来存储、展示、思考数据，以达到挖掘出其中的“宝贝”。那这个“宝贝”是什么？ 这就是我认为的图数据挖掘。 从学术上讲，图数据挖掘分为数据图，模式图两种。至于这两个类型的区别，由于很久没有关注这块，所以只能给出一个字面意义上的区别。 2、Bidirectional Expansion For Keyword Search on Graph Databases 这个算法则是在第一个基础上面进行了扩展，支持双向搜索。
3.3K81发布于 2018-02-27 - 来自专栏PPV课数据科学社区
☞【观点】成为“大数据企业”，献给不懂数据挖掘的你
在这种策略下，大规模多源异构数据的采集、清洗和整合方法，将成为大数据管理的核心支撑。 如何挖掘企业大数据的价值 企业大数据的价值开发高度依赖于深度数据分析能力。 对于这一平台所积累的大量数据的价值开发，首先体现在对其信息内容的提炼上。 通过对这些关系结构的深度分析和挖掘，G公司获得了对员工及团队的影响力、凝聚力、创造力的更为准确而深入的评估手段。 来源：软件定义世界 PPV课其他精彩文章： ---- 1、回复“干货”查看干货 数据分析师完整知识结构 2、回复“答案”查看大数据Hadoop面试笔试题及答案 3、回复“设计”查看这是我见过最逆天的设计 知识无极限 6、回复“啤酒”查看数据挖掘关联注明案例-啤酒喝尿布 7、回复“栋察”查看大数据栋察——大数据时代的历史机遇连载 8、回复“数据咖”查看数据咖——PPV课数据爱好者俱乐部省分会会长招募 9、
73970发布于 2018-04-20 - 来自专栏华章科技
如何成为大数据企业?献给不懂数据挖掘的你
在这种策略下，大规模多源异构数据的采集、清洗和整合方法，将成为大数据管理的核心支撑。 如何挖掘企业大数据的价值 企业大数据的价值开发高度依赖于深度数据分析能力。 对于这一平台所积累的大量数据的价值开发，首先体现在对其信息内容的提炼上。 平台上与工作相关的博文内容，如客服案例、经验分享等，经自动筛选分类、主题识别、关键词索引之后，被构建成企业知识库，为业务及管理工作提供快速有效的知识支撑，同时成为员工培训和自学的有力工具。 通过对这些关系结构的深度分析和挖掘，G公司获得了对员工及团队的影响力、凝聚力、创造力的更为准确而深入的评估手段。 例如，当G公司试图整合博客平台、业务系统、人力资源系统中的数据以全方位分析员工、团队特质以及绩效信息时，大量的数据属性之间所构成的复杂潜在关联网络，就需要强有力的关联发现技术来加以处理。
38820发布于 2018-08-14 - 来自专栏韩曙亮的移动开发专栏
【数据挖掘】数据挖掘总结 ( 拉普拉斯修正 | 贝叶斯分类器示例2 ) ★
文章目录 一、 贝叶斯分类器分类的流程 二、 拉普拉斯修正 三、 贝叶斯分类器示例2 参考博客 : 【数据挖掘】贝叶斯分类 ( 贝叶斯分类器 | 贝叶斯推断 | 逆向概率 | 贝叶斯公式 | 贝叶斯公式推导 | 使用贝叶斯公式求逆向概率 ) 【数据挖掘】贝叶斯公式应用 拼写纠正示例分析 ( 先验概率 | 似然概率 | 后验概率 ) 【数据挖掘】贝叶斯公式在垃圾邮件过滤中的应用 ( 先验概率 | 似然概率 | 后验概率 ) 【数据挖掘】朴素贝叶斯分类器 ( 多属性概率计算 | 朴素贝叶斯分类案例分析 ) 【数据挖掘】拉普拉斯修正 ( 判别模型 | 概率模型 | 贝叶斯分类 | 拉普拉斯修正 | 朴素贝叶斯分类应用场景 | 朴素贝叶斯优缺点 ) 【数据挖掘】贝叶斯信念网络 ( 马尔科夫假设 | 结构 | 有向无环图 | 参数 | 条件概率表 | 案例分析 ) 一、 贝叶斯分类器分类的流程 ---- 已知条件 : 已知样本 }{11} 注意是所有的分量的概率都要进行拉普拉斯修正 , 不能只修正这一个 ; 具体的详细的公式以及理论查看 【数据挖掘】拉普拉斯修正 ( 判别模型 | 概率模型 | 贝叶斯分类 | 拉普拉斯修正 |
62400编辑于 2023-03-28 - 来自专栏PPV课数据科学社区
数据挖掘系列（2）--关联规则FpGrowth算法
上一篇数据挖掘系列（1）关联规则挖掘基本概念与Aprior算法介绍了关联规则挖掘的一些基本概念和经典的Apriori算法，Aprori算法利用频繁集的两个特性，过滤了很多无关的集合，效率提高不少，但是我们发现 FpGrowth算法通过构造一个树结构来压缩数据记录，使得挖掘频繁项集只需要扫描两次数据记录，而且该算法不需要生成候选集合，所以效率会比较高。 Step 2：再次扫描数据记录，对每条记录中出现在Step 1产生的表中的项，按表中的顺序排序。 构造好条件树后，对条件树进行递归挖掘，当条件树只有一条路径时，路径的所有组合即为条件频繁集，假设{啤酒}的条件频繁集为{S1,S2,S3}，则{啤酒}的频繁集为{S1+{啤酒},S2+{啤酒},S3+{ 2）接下来找header表头的倒数第二个项{尿布}的频繁集，同上可以得到{尿布}的前缀路径为：{面包：1}，{牛奶：1}，{牛奶，面包：2}，条件FpTree的数据集为： TID Items T1 {面包
1.5K90发布于 2018-04-23 - 来自专栏人生代码
数据挖掘实践指南读书笔记2
写在之前 本书涉及的源程序和数据都可以在以下网站中找到：http://guidetodatamining.com/ 这本书理论比较简单，书中错误较少，动手锻炼较多，如果每个代码都自己写出来，收获不少。 (ratings[band1] - avg)**2 dem2 += (ratings[band2] - avg)**2 return num / (sqrt(dem1) * sqrt (dem2)) 相似矩阵预测： ? & rating2 in that set of ratings: for (item2, rating2) in ratings.items(): ratings[item2] /= self.frequencies[item][item2] # test code for ComputeDeviations(self) #r = recommender
42340发布于 2019-10-30 - 来自专栏NLPIR
NLPIR中文数据挖掘帮助企业执行最佳商业决策
大数据在生活中应用增加，数据仓库，数据安全，数据分析，数据挖掘这些技术的热度居高不下。其中，数据挖掘能够对企业的业务数据进行抽取，转换和分析，促成企业执行最佳商业决策。 同时，在企业进行营销方面，从海量数据中挖掘信息，将复杂数据设置成量化数据进行分析，是企业实行数字化营销的重要方面，对数据的准确分析能够实现最佳商业决策。 灵玖软件NLPIR大数据语义智能分析平台针对中文数据挖掘的综合需求,融合了网络精准采集、自然语言理解、文本挖掘和语义搜索的研究成果,先后历时十八年,服务了全球四十万家机构用户,是大时代语义智能分析的一大利器 NLPIR-Parser大数据语义分析平台为企业提供了一体式全链条服务，包括分词词性、情感分析、实体识别、关键词提取，实现对语法、词法和语义的综合应用。 NLPIR大数据语义智能分析平台是根据中文数据挖掘的综合需求,融合了网络精准采集、自然语言理解、文本挖掘和语义搜索的研究成果,并针对互联网内容处理的全技术链条的共享开发平台。
99640发布于 2019-09-24 - 来自专栏PPV课数据科学社区
【R应用】R 语言企业级数据挖掘应用
有奖转发活动 回复“抽奖”参与《2015年数据分析/数据挖掘工具大调查》有奖活动。 三月底参加了中国人民大学统计学院海峡两岸数据挖掘研讨会，和大家简单聊了聊R语言在京东商城的数据挖掘应用。 但我个人觉得这可能还不是最主要的原因，对于互联网企业来说，数据虽然获取更容易，但环境更为复杂。开源软件可以根据业务的变化 进行调整，但商业的闭源软件则很难做到。 R并不是通吃所有的数据场景，它只是在出现在该出现的分析建模环节。 R的位置在哪里？先让我们看看所谓的大数据是如何从企业中传递的（摘自本次人大的演讲材料） ? 1、回复“数据分析师”查看数据分析师系列文章 2、回复“案例”查看大数据案例系列文章 3、回复“征信”查看相关征信的系列文章 4、回复“可视化”查看可视化专题系列文章 5、回复“SPPS”查看SPSS系列文章 6、回复“答案”查看hadoop面试题题目及答案 7、回复“爱情”查看大数据与爱情的故事 8、回复“笑话”查看大数据系列笑话 9、回复“大数据1、大数据2、大数据3、大数据4”查看大数据历史机遇连载
1.2K60发布于 2018-04-23
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号