回答情况：
提问时间：
问题标签：
使用一些开放源码的ETL工具(如Talend、Kettle、Clover等)。因此，数据将传递给ETL，并在那里定义所有转换逻辑。也可以适应未来的情况，当它们出现或可能是一个过度..。
。
浏览 1提问于2013-01-30得票数 1
回答已采纳
2回答
我有两个大型的Hive表，比如TableA和TableB (它们是从不同的源加载的)。我需要根据某些(相同的)筛选标准从每个表中筛选记录。有8到10个这样的查找表，例如，LookupA、LookupB、LookupC等。
查找查找表，并将过滤记录中的“代码”替换为各自的“值”。如果“代码”或“值”分别在筛选的记录或查找表中不可用，则需要用零或空字符串替换它。
浏览 6修改于2016-05-22得票数 0
回答已采纳
1回答
SSIS ETL设计表名- ErrorLog它是如何工作的
每当作业失败时，作业详细信息表将有助于确定哪个是最后一个错误的表，ETL与此示例相关的任何与ETL设计相关的书签/博客文章也会有帮助。
浏览 1修改于2011-07-22得票数 0
回答已采纳
3回答
但是，当我一开始使用它的时候，我想在转换阶段我可以对我从数据源提取的数据做很多不同的连接，后来我意识到在不同的ETL上做一个连接并不是那么容易。计算和输出结果？如果联接并不方便，那么我们应该只在ETL中进行高级别的转换吗？
谢谢
浏览 0修改于2011-08-15得票数 3
回答已采纳
2回答
我们正在设计一个ETL流程，我们将从客户端获得一个每日帐户文件(可能有50万条记录，可能会增长)，然后将该文件加载到我们的数据库中。如果kafka是可行的，或者我们只是过度杀死了一个简单的ETL过程，我们只需将数据加载到一个临时表，最后加载到目标表，我将非常感谢您的反馈。
浏览 6提问于2020-03-13得票数 0
3回答
我知道ETL代表提取、转换和将数据加载到一个新的目标数据库中。但它在什么范围内仍然可以算作ETL？例如，如果我想将一个有7000条记录的联系人数据库移动到CRM软件中，这个过程也算ETL吗？
浏览 2提问于2018-04-23得票数 2
回答已采纳
4回答
我正在寻找一些开源技术，可以让我创建预定的批处理(例如，每1小时查询一些SQL数据库，如Oracle，并插入到Kafka。可能会对之间的数据进行一些转换)。问题是，我需要能够传输大量数据(“大数据”- Oracle查询可能返回10 or或更多)。我还可以使用哪些其他技术来实现此目的？
浏览 2修改于2021-09-14得票数 3
2回答
今天，我们大部分的ETL开发都是在ODI (Oracle数据集成器)中完成的。例如
今天，我们已经开始使用NIFI将数据从源转移到Azure blob存储。
浏览 12提问于2021-12-08得票数 1
1回答
我有以下数据并希望验证它的值( integer、float或string属性)：id度量属性: name属性: cake_name None属性: time属性: time "key‘id“不是字符串，got”键“不是整数，got <class 'str'>”键’点‘不是整数，got <class 'NoneType'>“
浏览 2修改于2022-09-12得票数 0
回答已采纳
我有CSV文件的不同列和几个公共列，我们目前正在使用Excel删除不需要的行清理数据，并生成报告，我正在考虑使用Elasticsearch作为数据存储，转换，加载和报告的解决方案。
浏览 0提问于2014-05-13得票数 0
2回答
我在PostgreSQL表中有以下数据。这是每小时的数据，有几个小时没有。我想为每一个丢失的小时数据插入空值。time id 9/9/2018 16:00 22d52ac5-6fdc-42c8-8a0e-0a7570ed6b92
浏览 0修改于2018-10-08得票数 0
回答已采纳
1回答
该datawarehouse的ETL处理大部分是在夜间加载期间完成的，除了几个SSIS包一整天运行，然后是SSAS处理之后，所以当我早上到达时，没有任何活动的监视可以执行。我显然可以查看计划缓存，但由于夜间ETL大约需要6小时，计划缓存并不能保存晚上使用的所有计划。
有没有人遇到过任何性能监视/日志记录工具，成本越低越好，它们在试图调查和调优这样的夜间负载时是有用的吗？
浏览 0提问于2018-10-10得票数 1
我不能让ETL进口商工作。(Ljava/lang/String;Ljava/lang/Throwable;)V中的异常:尝试从com.orientechnologies.orient.etl.OETLProcessor.parseConfigAndParameters(OETLProcessor.java:136) at com.orientechnologies.orient.etl.OETLProcessor.main(OETLProcessor.java:113)的com.orientechno
浏览 2修改于2016-08-05得票数 0
回答已采纳
是否有人将基于REST的方法用于ETL /数据存储操作？换句话说，通过REST REST服务调用调用ETL和OLAP /数据库刷新作业：在我看来，REST是一种非常适合和干净的架构风格
浏览 7提问于2010-07-16得票数 2
回答已采纳
1回答
在csv的etl使用一个到多个特性的文档中，我想将它扩展到许多特性。所以我做了三次倾诉，一次是为了发帖，一次是为了评论，还有一次是为了关系。v.2.1.9-SNAPSHOT (build 2.1.x@r; 2016-01-07 10:51:24+0000) www.orientdb.com at com.orientechn
浏览 1提问于2016-04-12得票数 0
回答已采纳
2回答
首先是一些背景知识；我们正在开发一个数据仓库，并研究在我们的ETL过程中使用什么工具。团队非常以开发人员为中心，每个人都对C#了如指掌。在评估这些ETL工具时，有没有什么我应该特别注意的事情？有没有其他我们也应该调查的工具？
浏览 3提问于2011-10-04得票数 7
1回答
我有一些关于ETL的问题，我不是很清楚，如下所示： 1)测试计划和测试策略的具体组成部分是什么?2) ODS和ETL中的中转区有什么不同？源数据库(数据仓库)和目标数据库(数据仓库)之间的ETL中都存在还是只存在一种？如果两个都存在，哪一个先出现？
浏览 19提问于2020-05-01得票数 0
当构建ETL/ELT进程将数据加载到Snowflake数据仓库(在Azure上运行)时，我正在寻找关于在哪里最好地存储ETL元数据的建议。ETL元数据指的是编排复杂ETL工作流所需的表格数据--例如，进程之间的依赖关系，每个进程的当前状态信息，我们可以在ETL中用来迭代要加载的各个数据源的“控制表”，等等。在新的实现中，Snowflake似乎不是存储ETL元数据的合适位置。然而，仅仅为了这个目的而旋转另一个云数据库(例如Azure SQL数据库)将需要大量的额外费用。我们正计划
浏览 4提问于2021-01-08得票数 2
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号