首页
学习
活动
专区
圈层
工具
发布

微软用于大数据管理、分析和挖掘的Hadoop发布版HDInsight

Hadoop与SQL Server 2012兼容的特性是微软与Hortonworks合作开发的,微软最近也宣布Microsoft HDInsight Server和Windows Azure HDInsight...Service已经可以预览,这都使用户能够使用微软开发的Hadoop连接器来从数据中获得最好的观点。...通过Hive ODBC Driver把SQL Server连接到Hadoop,客户现在可以使用如PowerPivot和Power View等微软的BI工具在SQL Server 2012中分析各种类型的数据...为实现与Apache Hadoop百分之百的兼容性,微软的Hadoop发布版HDInsight是基于Hortonworks Data Platform(HDP)构建的。...此外,在Windows Server和Azure平台上提供这些功能,也使客户能够利用熟悉的工具(如Excel、PowerPivot for Excel和Power View)轻松地从数据中抽取可行的观点

1.4K90
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    最佳实践分析:IBM Cognos 11如何链接Hadoop

    开发人员已经发布了 ODBC 连接器来访问配置单元数据库 (这仅仅是您的 Hadoop 数据的数据仓库视图, 可以使用称为 Hive QL 的类似 SQL 的语言进行查询)。...由于 Cognos 可以从 ODBC 数据库中提取数据, 因此 Cognos 可以通过配置单元从 Hadoop 提取数据。...然而, 为什么要使用 Hadoop 来连接Cognos呢?...你可以通过下载 Hortonworks 的沙箱学习:它是一个预配置的虚拟机, 在 VMware中运行。所以你不必安装或配置任何东西。...Cognos与Hadoop的连接架构图 总结 通过Hadoop的链接,有许多新的信息来源现在可以在Cognos 商业智能上进行分析,而这些重要的数据来源以前却因技术限制而被放弃。

    2K100

    【学习】开源大数据查询分析引擎现状

    当我们还浸淫在GFS、Map-Reduce、 Bigtable等Google技术中,并进行理解、掌握、模仿时,Google在2009年之后,连续推出多项新技术,包括:Dremel、 Pregel、Percolator...在Google的第 二波技术浪潮中,基于Hive和Dremel,新兴的大数据公司Cloudera开源了大数据查询分析引擎Impala,Hortonworks开源了 Stinger,Fackbook开源了...例如,Impala在两表,多表连接查询中优势明显; 4) 充分利用缓存的系统在内存充足的情况下性能优势明显。...例如,Shark,Impala在小数据量时性能优势明显;内存不足时性能下降严重,Shark会出现很多问题; 5) 数据倾斜会严重影响一些系统的性能。...,Imapla的综合性能是最稳定的,时间 性能也是最好的,而且其安装配置过程也相对容易。

    3.7K70

    Power Query 系列 (03) - 从数据库导入数据

    Excel 支持部分数据库数据导入和基于 ODBC 的数据库导入,Power Query (以下简称 PQ) 扩大了直连数据库的范围,并且使用起来更加直观。...从数据库导入数据,有两个要点: 数据库驱动:默认情况下, PQ 支持 MS Access 和 SQL Server 数据库的连接,其他数据库在机器上要有相应驱动的支持。...对于菜单上没有列明的其他数据库,可以使用 ODBC 或 OLEDB 的方式连接,当然也要下载和安装数据库的 ODBC/OLEDB 驱动。...在 Windows 上打开运行命令窗口(Win + R),输入 odbcad32,然后确定,打开 odbc 数据管理界面,配置 mysql 数据库的 odbc 连接。...Excel 界面中,切换到【数据】选项卡,通过 【获取数据】-【自其他源】- 【从 ODBC】打开连接界面。

    3.4K30

    在VS2010下进行单元测试 C#

    2)在测试视图窗口中选择需要配置成数据驱动方式的单元测试方法,然后按F4,打开单元测试的属性窗口 ? 3)编辑"数据连接字符串"属性,在"属性"窗口中单击该属性,然后单击省略号 (…)。...选择一个数据源后将打开一个特定于该数据源类型的对话框;可以使用此对话框配置该数据源的连接属性。配置完数据连接后,连接字符串会作为"数据连接字符串"的值出现。...5)在建立与数据源的连接之后,可以选择一个数据表。当您单击"属性"窗口的值列中的下拉列表时,将会列出所连接的数据库中的表。从此列表中选择的表就是在运行单元测试时将检索其中的行的表。...3.2、读取Excel的方法: 1)在桌面新建一个txt文件,更改文件名为data.dsn 2)选中"数据库连接字符串",单击右边列的按钮,更改数据源为Microsoft ODBC数据源,点击"确定"按钮...3)选择使用连接字符串,点击生成 ? 4)选择Excel数据源的驱动程序,点击"下一步" ? 5)选择data.dsn为数据源保存文件,一直选择"下一步"。 ?

    2.3K10

    spss C# 二次开发 学习笔记(一)——配置数据源

    (大致操作为,在系统按钮点击等事件触发统计分析时,将统计数据的查询语句,以及统计分析方法及其相应的参数值传递给中间件,中间件调用Spss进行查询统计分析,然后将统计结果反馈给系统调用者,统计结果包括统计数据以及统计图表...实际项目中要统计的数据,不是Demo中要录入的几个简单的数据,它们存放在数据库中,我们可以直接使用Spss连接数据库并查询数据,而不需要将数据查询得出Excel,然后让Spss去统计Excel中的数据。...SqlServer或者Oracle等特定数据库连接,无非是JDBC或者是ODBC两者之一)。...添加数据源,则打开数据库向导,Spss列出了用户配置的ODBC数据源,点击下方的添加,可以调用Windows系统的ODBC数据源添加程序来添加新的数据源。...不管是Windows集成验证,还是SqlServer验证方式,ODBC添加测试没问题,但是在Spss中不通。最后使用SqlServer驱动程序连接,OK了。 ? 选择Windows集成验证。 ?

    1.6K60

    RayData Plus常见问题-数据接入

    Q14:读取 excel 本地文件时,如果一个 excel 文件内有多个工作簿,节点属性中" sheet 名称”如何填写?A14:将该字段为空即可读取整个工作簿。Q15:网络请求接口如何解决认证问题?...A16:坐标数据可以接入后连接到坐标轴 Axis,标注内容可以接入后连接到文本 Text 2D;Q17:如何实现当漫游到某个位置时,动态获取该位置已经分析好的数据,在场景中进行显示?...A17:可以利用判断条件 Boolean Expression 和触发机制 Event 实现,当位置满足条件时触发显示数据。Q18:正确连接并导入数据文件后,依然显示’未能找到文件’?...Q20:读取 excel 文件时,执行后在 Result 中没有看到执行的结果?A20:① 首先检查【DataReader】节点属性里设置和文件位置有没问题的。...在操作过程中,由于没有配置完整也会有“错误提示”,同样也是正常现象。

    1.3K00

    RayData Plus常见问题-数据接入

    Q14:读取 excel 本地文件时,如果一个 excel 文件内有多个工作簿,节点属性中" sheet 名称”如何填写?A14:将该字段为空即可读取整个工作簿。Q15:网络请求接口如何解决认证问题?...A16:坐标数据可以接入后连接到坐标轴 Axis,标注内容可以接入后连接到文本 Text 2D;Q17:如何实现当漫游到某个位置时,动态获取该位置已经分析好的数据,在场景中进行显示?...A17:可以利用判断条件 Boolean Expression 和触发机制 Event 实现,当位置满足条件时触发显示数据。Q18:正确连接并导入数据文件后,依然显示’未能找到文件’?...Q20:读取 excel 文件时,执行后在 Result 中没有看到执行的结果?A20:① 首先检查【DataReader】节点属性里设置和文件位置有没问题的。...在操作过程中,由于没有配置完整也会有“错误提示”,同样也是正常现象。

    1.5K10

    Hive数据交互的桥梁:JDBCODBC连接与操作全解析

    在Excel中,选择"数据"->“获取数据”->“从其他源”->“从ODBC”,然后选择配置好的DSN,即可建立与Hive的连接并执行查询。...对于开发者而言,在Windows上使用ODBC连接Hive时,需要注意驱动程序的位数匹配问题。如果应用程序是32位的,就必须使用32位的ODBC驱动和DSN配置,否则会出现连接失败的情况。...这个问题在同时安装多个Office版本或开发工具时尤为常见。 Linux平台连接实施 在Linux系统中配置ODBC连接Hive时,需要先安装unixODBC库,这是Linux下ODBC的基础设施。...特别是在云环境中,建议优先使用IAM角色或OAuth 2.0认证,这些方式在2025年已成为云上数据访问的安全最佳实践。 常见配置问题与解决方案 在配置ODBC连接时,经常会遇到驱动加载失败的问题。...连接Hive执行数据操作 ODBC连接适用于跨平台应用,尤其在Windows环境下与Excel、Tableau等工具集成时非常实用。

    1.2K10

    Python 连接数据库的多种方法

    , MongoDB还有其他常用的 Microsoft Access,Microsoft Excel等。...今天主要介绍比较常用的库,其中两个是:pyodbc 和 pymssql,他们可以连接多个常用数据库。 首先是需要安装Python, 根据操作系统选择对应平台的Pyhon版本,可以在官网下载。...然后我们就可以对数据库进行操作了,比如:连接、查询、插入、修改、删除等操作。 下面主要介绍如何实现对数据库的操作: 第一,连接数据库。...从GitHub上可以查询到如下 pyodbc 连接 SQL Server 的要求: Microsoft have written and distributed multiple ODBC drivers...products(id, name) values ('3', 'abd')") #使用SQL的insert语句向数据库的表products插入一条记录 cnxn.commit() #操作提交,如果中途出错

    3K10

    WorkBuddy 实战:解决VBA无法直连Oracle,开发报告生成与打印小软件

    在日常办公与开发中,很多场景需要用VBA开发自动化工具(如Excel报告生成、批量打印),但VBA存在一个核心痛点——无法直接连接Oracle数据库,导致无法直接读取Oracle中的业务数据,同时还会面临跨库数据交互困难...,手动配置ODBC数据源不仅步骤繁琐,还容易出现连接失败、驱动不兼容问题,无法直接读取Oracle中的业务数据,这是开发的核心瓶颈;2.跨数据库数据交互困难:需要将Oracle中的业务数据同步到SQLServer...(如连接失败提示),确保读取的Oracle同步数据能直接适配Excel报告模板,无需手动转换格式”,WorkBuddy快速调整代码,添加异常提示、简化参数配置;4.将生成的VBA代码复制到VBA编辑器,...编码格式不兼容),给出修改建议:将代码保存为UTF-8格式、修改VBA编辑器的编码设置,同时自动修正乱码部分,生成可直接使用的无乱码代码;2.嵌套复杂公式:向WorkBuddy输入需求“编写VBA代码,在Excel...代码开发,同时解决代码乱码、公式嵌套等附加难题,无需手动查阅大量技术文档,大幅降低开发门槛;2.避坑要点:-跨库连接时,需准确配置Oracle连接参数(TNS地址、用户名、密码),可让WorkBuddy

    74910

    基于WiReport的工业生产报表快速开发

    数据的获取还有部分需要人工手动抄表,汇总时又极易出错,大大降低工作效率及准确率。 根据实际需求,以多样化的数据格式汇总所需生产数据,成为很多企业的迫切需求。...WiSCADA 3.0版具备包括数据采集和网页呈现功能,项目配置存储在关系数据库中,采用JSON格式存储,驱动配置支持在线修改和删除,支持多种数据库的历史、报表归档,操作便捷性和易用性比传统组态软件有了较大提升...进入配置页面,勾选启用,点击连接字符串格式,修改连接字符串内相关信息为实际数据库参数。点击测试连接,连接成功说明WiSCADA 3.0 已经和MySQL连接成功。...打开报表设计软件,拖入表格控件,创建一个表格; 在右侧工具栏选择数据源,右击点击数据源,弹出添加数据源按钮,点击添加数据源,并选择Microsoft ODBC Provider。...在连接字符串里输入: Driver={MySQL ODBC 8.0 UNICODE Driver}; server=127.0.0.1;port=3306;database=ys;user=root;password

    2.8K10

    还在写SQL做SAP二开?通过RFC调用NetWeaver,让HANA数据库操作更可靠

    (通过ODBC操作HANA) 首先,我们需要在开发环境、测试环境和生产环境的服务器上,配置SAP提供的ODBC数据源。...(创建到HANA的ODBC数据源) 配置完成后,我们就可以像操作其他数据库一样,对 SAP HANA的数据进行读写了。回到活字格里面,我们使用"连接到外联表"功能,引入HANA中需要操作的所有数据表。...所以,在涉及到稍微复杂一点的应用场景时,通过ODBC直接操作原始数据的做法的风险较高。 (纯代码,通过ODBC操作HANA的数据表) 基于多年的技术支持经验,我们通常不会推荐客户采用这个方案。...首先,开发和测试的环境下,我们通常会连接不同的SAP数据库,所以,我们需要将连接NetWeaver所需的必要信息存储到数据库中,随程序一同发布,而不是写死在代码或全局配置文件中。...(存储在数据库中的NetWeaver连接信息) 在需要操作SAP的数据时,我们需要先使用"设置变量命令",从数据库中读取当前环境所使用的HANA数据库的参数,拼接成连接字符串;然后使用"发送HTTP请求命令

    2.4K20

    Kylin正式发布:面向大数据的终极OLAP引擎方案

    我们的用户——比如在分析与业务部门当中希望能在保持最低延迟水平的前提下继续使用自己所熟悉的工具方案,例如Tableau与Excel。...•交互式查询功能:用户可以通过Kylin以秒级以下延迟水平实现与Hadoop数据的交互——在面对同一套数据集时,其性能表现优于Hive查询机制。...• 开源ODBC驱动程序: Kylin的ODBC驱动程序从零开始逐步构建而成,而且能够与Tableau实现良好的协作效果。我们也已经对这部分驱动程序进行开源处理并发布至技术社区当中。...下一步发展规划 在高基数维度上支持TopN算法(即对大量对象进行排序并从中选取前N位结果):目前的MOLAP技术在高基数维度上进行查询时的表现尚算不上完美——例如对单一列中的数百万个不同值进行TopN运算...在Owen O’Malley(Hortonworks公司联合创始人兼Apache成员)与Julian Hyde(Apache Calcite缔造者,目前供职于Hortonworks公司)等Hadoop

    1.2K90

    Kylin正式发布:面向大数据的终极OLAP引擎方案

    我们的用户——比如在分析与业务部门当中希望能在保持最低延迟水平的前提下继续使用自己所熟悉的工具方案,例如Tableau与Excel。...•交互式查询功能:用户可以通过Kylin以秒级以下延迟水平实现与Hadoop数据的交互——在面对同一套数据集时,其性能表现优于Hive查询机制。...当数据规模变得越来越大时,预计算处理机制就会变得无法实现——即使硬件性能再强大也于事无补。不过在Hadoop强大的分布式计算能力支持下,计算任务能够借助成百上千个计算节点的总体资源。...下一步发展规划 • 在高基数维度上支持TopN算法(即对大量对象进行排序并从中选取前N位结果):目前的MOLAP技术在高基数维度上进行查询时的表现尚算不上完美——例如对单一列中的数百万个不同值进行TopN...在Owen O’Malley(Hortonworks公司联合创始人兼Apache成员)与Julian Hyde(Apache Calcite缔造者,目前供职于Hortonworks公司)等Hadoop开发者社区支持者的鼎力协助

    1.6K40

    Odbc微软开发式数据库操作和使用

    [TOC] 0x00 前言简介 描述:在开发之中常常使用 OCCI接口进行编程的它得优点: 一个原因是自己比较喜欢纯C++编程 二是考虑到程序是要往Linux服务器移植的少走冤枉路 百度百科:开放数据库连接...实用范围: 用ODBC可以访问各类计算机上的DB文件,甚至访问如Excel 表和ASCI I数据文件这类非数据库对象。...-12.1.0.2.0.zip 分别解压base包里面有oci.dll链接数据库驱动,然后将ODBC包中的文件复制到解压了的Base文件夹里面 以管理员权限运行odbc_install.exe 配置...ODBC Data Sources (32-bit)[C:\WINDOWS\SysWOW64\odbcad32.exe] ---- 0x02 配置Odbc链接 描述:采用Excl的Access进行ODBC...数据库连接设置; 1.Odbc数据库新建立->机器数据源->设置系统数据源 WeiyiGeek. 2.选择我们导入的 数据源驱动程序 WeiyiGeek. 3.连接数据库进行测试 WeiyiGeek

    1.9K20

    『数据库』数据库编程(概念性的东西,应用一般,甚至有点过时,用来考试)

    ,程序中会含有两种不同计算模型的语句 1.SQL语句 描述性的面向集合的语句 负责操纵数据库 2.高级语言语句 过程性的面向记录的语句 负责控制逻辑流程 3.数据库工作单元与源程序工作单元之间的通信...>@: b.包含服务器标识的SQL串常量 c.DEFAULT d.connect-name是可选的连接名,连接名必须是一个有效的标识符 e.在整个程序内只有一个连接时可以不指定连接名...断开与数据源的连接 3.驱动程序管理器:用来管理各种驱动程序 包含在ODBC32.DLL中 管理应用程序和驱动程序之间的通信 建立、配置或删除数据源,并查看系统当前所安装的数据库ODBC驱动程序 4....、当前在环境上分配的连接句柄等 一个环境句柄可以建立多个连接句柄,每一个连接句柄实现与一个数据源之间的连接 ?...在一个连接中可以建立多个语句句柄,它不只是一个SQL语句,还包括SQL语句产生的结果集以及相关的信息等 在ODBC 3.0中又提出了描述符句柄的概念,它是描述SQL语句的参数、结果集列的元数据集合 3.

    2.3K20

    大数据神器Kylin驱动下载、使用方法及异常处理 | PBI实战技能

    Kylin数据仓库时,就会出现错误: 就是因为:Kylingence不是Kylin!...- 2 - 那么,用Power BI,要怎么连接Kylin呢? 其实也很简单,下载上面给的Kylin ODBC驱动,安装后配置ODBC数据源即可。具体如下。...,连接成功后,下方的Project里会显示出当前Kylin服务端有效的项目名称,按自己的需要选择后点击【done】即可: Step 04-通过前面的操作完成ODBC数据源的创建后,在Power BI里连接就很简单了...,如下图所示: Power BI会直接读取前面我们在Windows里配置的ODBC数据源名称,选择好后确定: 后面可能会再让你输入一次连接的用户名和密码,输入后确定,就连Kylin...服务端可以开始抽取数据了: - 3 - 我在使用Kylin的时候,曾碰到个小问题,不知道大家会不会碰到,稍作提醒:如果从Kylin加载的数据表名称和Power BI原有查询名称相同,直接加载时会出错

    1.3K20

    配置ODBC数据源

    开放数据库互连) 从字面意思就可以看出来,ODBC是相当于一个中间协议,它可以连接各类数据库,甚至包括EXCEL和文本。...下面来大概叙述一下如何建立ODBC数据源连接。         ...exe,打开便是,好多朋友可能遇到过这种情况,在Win7 64位中控制面板或system32中的odbc32,只能添加SQL Server),打开后的界面(如下图): ?        ...一切就绪后,单击确定,ODBC数据源便配置成功,无论您以哪种支持数据库访问的程序访问您的数据库都会轻松无阻哦!       ...填写对数据源的描述,选择local服务器,没有local服务器时可以找到控制面板—管理工具—服务,在“扩展”选项卡中开启SQL的相关服务。单击“下一步”: ? 选择或填写SQL验证,下一步: ?

    7.5K40
    领券