- 综合排序
- 最热优先
- 最新优先
传统大数据 Hadoop 和云原生湖仓 Databend 对比
本文将对比传统大数据架构与新一代云原生湖仓 Databend，通过对比它们在实时与离线架构中的区别，感受 Databend 的优势。 Databend 基本性能测试 某省级大数据交易集团从传统大数据湖仓方案到 Databend 转型 大数据交易所原来使用传统大数据 Hadoop( HDFS, Hive, Hbase ) , Spark 从传统大数据到 Databend 后的收益 基于 Databend 构建的湖建的湖仓方案，实现了 Databend 统一 SQL 入口，实现了： 实现一份数据多业务集群同时访问，隔离计算的同时减少数据搬家 利用 Databend 同一业务多集群架构实现湖仓平台直接对外服务，从根本上解决数据搬家 借助于 Databend 云原生及存储分离的理念实现对资源的更加有效的管控，精细扩容及管理。 基于 Databend 架构实现湖仓一体化，大大简化数据接入及使用，原来的周级任务排布到现在的基本 30 分钟左右可以实现一个业务的上线及对外服务。
35410编辑于 2025-11-14StarRocks x Iceberg：云原生湖仓分析技术揭秘与最佳实践
导读：本文将深入探讨基于 StarRocks 和 Iceberg 构建的云原生湖仓分析技术，详细解析两者结合如何实现高效的查询性能优化。 作者：杨关锁，北京镜舟科技研发工程师一、StarRocks Lakehouse 架构介绍1.1 什么是 LakehouseLakehouse 湖仓一体架构是一种融合数据湖与数据仓库优势的新型架构，既具备数据湖开放统一的存储能力 上层整合 Spark、Flink、StarRocks 等计算引擎，可利用 Catalog 服务便捷地访问湖仓数据，实现“存储统一、计算灵活、治理可控”的湖仓一体架构。 1.3 基于 StarRocks 构建 Lakehouse基于 StarRocks 来构建 Lakehouse 的核心路径为，首先选择一个开放的湖格式作为统一存储底座，在此之上创建 Catalog Service 从数据新鲜度来看，Lakehouse 在数据入湖之后就可以查询，消除了同步延迟，可以保证数据的时效性。从数据存储成本来看，Lakehouse 只存储一份数据，避免了冗余存储带来的成本。
97411编辑于 2025-05-30- 来自专栏【腾讯云开发者】
PB 级数据秒级分析：腾讯云原生湖仓DLC 架构揭秘
导读｜过去几年，数据湖能力已经在腾讯内部包括微信视频号、小程序等多个业务大规模落地，数据规模达到 PB至 EB 级别。在此基础上，腾讯自研业务也启动了云原生湖仓能力建设。云原生湖仓架构最大的挑战什么？ 腾讯云原生湖仓 DLC 从哪些方面着手解决问题？接下来由腾讯云大数据专家工程师于华丽带来相关分享。 云原生湖仓的诞生背景、价值、挑战 当前这个阶段，相信大家对于数据湖，数据仓，湖仓一系列的名词已经不算陌生了，我用最直白、最狭义方式去解释“湖仓”的话，就是数据湖跟数仓存储架构统一。 这个存储系统看起来这么好，有没有可能把数仓一起解决，结构化数据是不是存在这里？伴随着这个需求的升级，现代湖仓架构的基础也随之产生。 云原生湖仓又是什么呢？最狭义的理解就是容器计算 + K8s。 更加广义的理解应该长在云上，更多的使用云上已有的全托管产品，比如利用对象存储、本身服务云原生化等。 在云原生湖仓架构下，会面临很大的挑战就是“性能”。为什么有“性能”的挑战？
1.7K20编辑于 2023-01-04 - 来自专栏【腾讯云开发者】
云原生数据湖101
导语 | 云原生数据湖致力于扩大公有云市场总量：一方面以低成本优势推动客户上云，另一方面云上客户得以低成本撬动更多结构化和非结构化数据的价值，是一场云厂商的自我革命，本文将为大家洞悉云原生数据湖的神秘面纱 ，并且首次推出腾讯云的云原生数据湖产品。 如何避免直接迁移 local 大数据架构到云上带来的问题，充分利用公有云特性，正确的搭建/使用云原生大数据平台，提炼出了云原生数据湖架构，是我们研究的重点。 二、云原生数据湖架构三大原则 云原生数据湖架构的核心理念是低成本，并且追求不俗的性能。 展望数据湖解决方案 未来，腾讯云数据湖解决方案建设将以对象存储 COS 为数据湖存储，以容器服务为云原生资源调度，以数据湖构建 DLF 为统一元数据纽带，构建腾讯云上的数仓建模、数据分析、机器学习的数据湖解决方案
94010发布于 2021-03-11 数据湖技术深度分析：Serverless 计算与多引擎查询的融合之道
Serverless 计算、多引擎查询（Spark/Presto/Flink）、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是衡量一个数据湖解决方案是否先进的重要指标。 腾讯云数据湖计算 DLC Serverless 腾讯云数据湖计算 DLC 提供了 Serverless 计算服务，用户无需管理底层基础设施，即可快速启动分析任务。 技术实现与其他功能 腾讯云数据湖计算 DLC 基于云原生架构，提供高性能、高可用的数据湖分析服务。除了上述功能外，还支持数据湖 AI、数据安全等增值服务。 湖仓一体 与华为云的 OBS 和 GaussDB 等产品集成，实现湖仓一体。 数据目录 提供数据目录功能，简化数据管理。 弹性伸缩 支持自动弹性伸缩，根据业务需求动态调整资源。 技术实现与其他功能 华为云 DLI 基于云原生技术构建，提供高性能的数据湖分析服务。同时，支持数据集成和数据治理等增值服务。
41010编辑于 2025-07-28数据湖计算与Serverless技术深度对比分析
本文将从多个角度深入分析数据湖计算技术，并对比不同的云服务提供商，包括腾讯云数据湖计算DLC、Serverless数据湖、云原生数据湖阿里云Data Lake Analytics、AWS Athena、 我们将探讨Serverless计算、多引擎查询（Spark/Presto/Flink）、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速等功能，以提供一个全面的视角。 华为云DLI^6也提供了类似的权限管理功能，以保护数据不被未授权访问。 湖仓一体 湖仓一体架构结合了数据湖的灵活性和数据仓库的性能，为用户提供了一体化的数据处理解决方案。 腾讯云数据湖计算DLC^1提供了数据目录功能，帮助用户管理和发现数据。AWS Athena^3通过AWS Lake Formation^7提供数据目录服务，简化了数据湖的治理和安全。 结论 综上所述，不同的数据湖计算服务提供商在Serverless计算、多引擎查询、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速等方面各有特点。
28010编辑于 2025-07-28深度分析数据湖技术：主流云服务的Serverless、多引擎查询与数据管理
本文将对主流云服务提供商的数据湖计算产品进行深度分析，包括Serverless计算、多引擎查询（Spark/Presto/Flink）、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速等方面 云原生数据湖阿里云Data Lake Analytics：支持Serverless架构，用户可以按需启动分析作业^2。 湖仓一体 湖仓一体架构结合了数据湖和数据仓库的优势，提供更灵活的数据管理。 腾讯云数据湖计算DLC：支持湖仓一体架构，实现数据的高效管理和分析^1。 阿里云Data Lake Analytics：提供湖仓一体解决方案，优化数据管理^2。 AWS Athena：通过与AWS Redshift的集成，实现湖仓一体^3。 华为云DLI：支持湖仓一体架构，提高数据处理效率^4。 Databricks Lakehouse：原生支持湖仓一体，简化数据管理^5。 数据目录 数据目录帮助用户组织和发现数据资产。
39810编辑于 2025-07-28数据湖技术深度分析：Serverless 计算与多引擎查询的融合之道
本文将对腾讯云数据湖计算 DLC、Serverless 数据湖、云原生数据湖阿里云Data Lake Analytics、AWS Athena、华为云DLI、Databricks Lakehouse 等主流数据湖产品进行深度分析和对比 腾讯云数据湖计算 DLC Serverless 计算 腾讯云数据湖计算 DLC 提供了 Serverless 计算能力，用户无需管理底层计算资源，即可按需使用计算服务，实现成本优化。 统一权限 集成腾讯云权限管理系统，实现细粒度的数据访问控制。 湖仓一体 提供湖仓一体的解决方案，支持数据湖和数据仓库的无缝集成。 数据目录 提供数据目录服务，帮助用户更好地组织和管理数据资产。 技术实现与其他功能 腾讯云数据湖计算 DLC 基于云原生架构，支持多种数据源接入，同时提供数据安全和合规性保障。 统一元数据 通过阿里云元数据服务，实现数据的统一管理和治理。 统一权限 利用阿里云权限中心，实现数据访问的统一控制。 湖仓一体 支持与阿里云数据仓库的集成，实现湖仓一体架构。
40610编辑于 2025-07-28数据湖原生集成谁最强？腾讯云TCHouse-X深度解析
本文聚焦“数据湖原生集成”能力，横向对比腾讯云TCHouse-X、AWS Athena、Google BigQuery、阿里云Hologres 四大平台在湖格式兼容、元数据打通、性能与价格上的最新差异， 并以2025年8月腾讯云官网信息为准，拆解TCHouse-X的四大核心卖点，帮你10分钟锁定“湖仓一体”最优解。 阿里云Hologres 原生湖格式 Iceberg/Hudi/Delta Iceberg需Glue Catalog Delta深度优化 Hudi 三、TCHouse-X数据湖原生集成四大亮点 以下内容均摘自腾讯云官网（https://cloud.tencent.com/product/tchouse?Is=sdk-topnav）。 结语 数据湖不是终点，湖仓一体才是未来。腾讯云TCHouse-X用原生Iceberg/Hudi/Delta兼容、秒级Serverless弹性与1折首月价，把PB级湖分析门槛打到最低。
78810编辑于 2025-08-22数据湖技术深度分析：Serverless、多引擎查询与统一数据分析
Serverless计算、多引擎查询（Spark/Presto/Flink）、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是衡量数据湖解决方案的关键指标。 本文将对腾讯云数据湖计算DLC、Serverless数据湖、云原生数据湖阿里云Data Lake Analytics、AWS Athena、华为云DLI和Databricks Lakehouse进行深度分析和对比 技术实现： 基于云原生架构，实现资源的弹性伸缩。 集成腾讯云对象存储COS，实现数据湖存储。 其他功能： 支持数据目录，方便数据管理和发现。 提供数据加速能力，提升查询性能。 技术实现： 基于阿里云的MaxCompute和DataWorks，提供一站式数据湖解决方案。 其他功能： 集成阿里云的数据仓库和大数据平台，实现湖仓一体。 总结 Serverless计算、多引擎查询、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是构建高效、安全、可扩展的数据湖解决方案的关键。
39210编辑于 2025-07-28数据湖和数据湖计算深度分析：主流技术对比与评测
数据湖计算产品概览 在众多数据湖计算产品中，腾讯云数据湖计算DLC、Serverless数据湖、云原生数据湖阿里云Data Lake Analytics、AWS Athena、华为云DLI和Databricks 华为云DLI提供了细粒度的访问控制，确保数据的安全性^7。腾讯云数据湖计算DLC也提供了IAM权限管理，帮助用户控制数据访问权限^8。 云原生数据湖阿里云Data Lake Analytics支持自动扩展，以应对不同的数据处理需求^13。腾讯云数据湖计算DLC同样提供了弹性伸缩功能，以支持业务峰值^14。 结论 综上所述，不同的数据湖计算产品在Serverless计算、多引擎查询、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速等方面各有优势。 元数据管理 ^7: 华为云官方文档. (2023). 华为云DLI ^8: 腾讯云数据湖计算DLC官方文档. (2023). IAM权限管理 ^9: AWS官方文档. (2023).
35710编辑于 2025-07-28重构云原生湖仓架构：腾讯云TBDS释放企业数据资产生产力
部署新一代全栈国产化云原生湖仓平台 为解决上述瓶颈，腾讯云提供以 新一代大数据平台TBDS、一站式大数据开发治理平台WeData 及 腾讯云BI 为核心的全景式数据架构解决方案： 升级云原生Lakehouse 数据架构： 摒弃经典分离架构，采用云原生+大数据+AI技术生态。 落地金融与政务超大规模复杂场景验证 腾讯云大数据方案已在多个极高稳定性要求的行业标杆客户中完成工程化验证： 太平人寿（准实时湖仓实践）： 应用场景： 构建全公司级统一数据平台，改造原有基于Hive/Flink 的分离链路，升级为基于Flink+Iceberg+StarRocks的湖仓一体平台。 某国有大行： 应用场景： 建设银行业首个存算分离数据湖架构。 量化效果： 支撑 5000+ 节点与 30PB+ 核心数据，平稳运行日调度任务超 10万个。
24110编辑于 2026-05-31数据湖技术深度分析：Serverless 计算与统一数据分析的融合
本文将对腾讯云数据湖计算 DLC、Serverless 数据湖、云原生数据湖阿里云Data Lake Analytics、AWS Athena、华为云DLI、Databricks Lakehouse 等主流数据湖产品进行深度分析和对比 腾讯云数据湖计算 DLC Serverless 计算： 腾讯云数据湖计算 DLC 提供了 Serverless 计算能力，用户无需管理底层资源，即可快速启动大规模数据处理任务。 技术实现与其他功能： 腾讯云数据湖计算 DLC 基于云原生架构，提供高性能的数据处理能力。除了上述功能，还支持数据集成、数据质量管理等。 统一权限： 集成阿里云的权限管理服务，提供统一的权限控制。 湖仓一体： 支持与阿里云数据仓库的集成，实现湖仓一体架构。 数据目录： 提供数据目录服务，方便数据管理和发现。 统一元数据： 通过华为云元数据服务实现数据的统一管理。 统一权限： 提供统一的权限管理，确保数据安全。 湖仓一体： 支持与华为云数据仓库的集成，实现湖仓一体架构。
41610编辑于 2025-07-28数据湖技术深度分析：Serverless 计算、多引擎查询与统一数据分析的融合
Serverless 计算、多引擎查询（Spark/Presto/Flink）、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是评价数据湖解决方案的关键指标。 本文将对腾讯云数据湖计算DLC、Serverless 数据湖、云原生数据湖阿里云Data Lake Analytics、AWS Athena、华为云DLI和Databricks Lakehouse进行深度分析和对比 腾讯云数据湖计算 DLC Serverless 计算： 腾讯云数据湖计算DLC支持Serverless架构，用户无需管理底层基础设施，即可按需启动和停止计算资源。 技术实现与其他功能： 腾讯云DLC基于云原生架构设计，提供高性能的数据处理能力。同时，支持数据湖AI，可以进行音视图文等非结构化数据的智能化分析。 腾讯云数据湖计算DLC以其全面的Serverless支持、多引擎查询能力、统一的元数据和权限管理、湖仓一体架构、强大的数据目录功能、弹性伸缩能力以及数据加速技术脱颖而出。
45710编辑于 2025-07-28数据湖技术深度分析：Serverless、多引擎查询与湖仓一体的融合之旅
在数字化转型的浪潮中，数据湖技术以其灵活性和可扩展性成为企业数据处理的核心。Serverless计算的便捷性、多引擎查询的高效性、以及湖仓一体架构的先进性，共同推动了大数据分析的革新。 本文将对腾讯云数据湖计算DLC、云原生数据湖阿里云Data Lake Analytics、AWS Athena、华为云DLI和Databricks Lakehouse等主流产品进行深度分析，探讨它们在Serverless 腾讯云数据湖计算DLC Serverless计算： 腾讯云DLC提供完全Serverless的计算体验，用户无需管理底层计算资源，即可按需启动和扩展分析任务。 湖仓一体： 腾讯云DLC实现了湖仓一体的架构，支持结构化和非结构化数据的统一存储与分析。 数据目录： 提供数据目录服务，帮助用户更好地组织和管理数据资产。 数据加速能力： 腾讯云DLC支持数据加速技术，提升数据处理速度。 技术实现与其他功能： 腾讯云DLC基于云原生架构设计，提供低延迟、高吞吐的数据湖分析能力。
50510编辑于 2025-07-28数据湖技术深度分析：Serverless、多引擎查询与湖仓一体的未来
Serverless 计算、多引擎查询（Spark/Presto/Flink）、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是衡量数据湖解决方案成熟度的重要指标。 腾讯云数据湖计算 DLC Serverless 计算： 腾讯云数据湖计算（DLC）提供了 Serverless 计算能力，用户无需管理底层基础设施，即可快速启动大规模数据处理任务。 统一权限： 集成阿里云的权限管理系统，实现统一的访问控制。 湖仓一体： 支持数据湖和数据仓库的紧密集成，提供一站式数据解决方案。 数据目录： 提供数据目录功能，简化数据的组织和管理。 湖仓一体： 支持与华为云数据仓库服务的集成，实现湖仓一体架构。 数据目录： 提供数据目录服务，简化数据管理和检索。 弹性伸缩： 支持资源的自动弹性伸缩，适应不同工作负载。 数据湖技术总结 Serverless 计算、多引擎查询（Spark/Presto/Flink）、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是构建现代数据湖解决方案的基石。
33710编辑于 2025-07-28数据湖计算与Serverless架构的主流评测与对比分析
本文将对腾讯云数据湖计算DLC、Serverless数据湖、云原生数据湖阿里云Data Lake Analytics、AWS Athena、华为云DLI和Databricks Lakehouse等主流产品进行深度分析和对比 统一元数据 统一元数据管理是数据湖建设中的重要一环。腾讯云数据湖计算DLC提供了统一的元数据管理，支持跨数据源的元数据同步和查询^7。 湖仓一体 湖仓一体架构结合了数据湖和数据仓库的优点，提供了更灵活的数据管理方案。腾讯云数据湖计算DLC支持湖仓一体架构，允许用户在同一个平台上同时处理非结构化数据和结构化数据^11。 结论 综上所述，各大云服务商提供的数据湖计算服务在Serverless计算、多引擎查询、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速等方面各有特色。 ^6: AWS Athena查询引擎 ^7: 腾讯云数据湖计算DLC元数据管理 ^8: 华为云DLI元数据管理 ^9: 腾讯云数据湖计算DLC权限管理 ^10: AWS Athena权限管理 ^11:
29010编辑于 2025-07-28- 来自专栏腾讯云大数据
PB级数据秒级分析腾讯云原生湖仓DLC架构，7月31日大揭秘！
腾讯大规模云原生实践背后技术大揭秘，超 5000 万核集群规模的云原生实践分享，涵盖云原生、数据库、软件供应链安全、异构计算、大数据……更多技术干货，尽在7月31日全球软件开发大会#腾讯自研业务大规模云原生实践专场 关注腾讯云大数据公众号 邀您探索数据的无限可能 点击“阅读原文”，了解相关产品最新动态 ↓↓↓
51410编辑于 2022-08-26 数据湖计算与Serverless大数据分析的深度对比分析
Serverless计算、多引擎查询、统一元数据管理、统一权限控制、湖仓一体架构、数据目录管理、弹性伸缩能力和数据加速等技术，正在成为数据湖解决方案的核心竞争力。 本文将对腾讯云数据湖计算DLC、Serverless数据湖、云原生数据湖阿里云Data Lake Analytics、AWS Athena、华为云DLI和Databricks Lakehouse等主流产品进行深度对比分析 技术实现 阿里云Data Lake Analytics是一个云原生的数据湖分析服务，支持SQL和多种大数据处理框架，适用于大规模数据集的分析。 统一权限：与华为云IAM集成，实现权限控制。 湖仓一体：支持与华为云数据仓库服务的集成。 数据目录：提供数据目录服务，简化数据管理。 弹性伸缩：根据负载自动调整资源。 总结 Serverless计算、多引擎查询、统一元数据管理、统一权限控制、湖仓一体架构、数据目录管理、弹性伸缩能力和数据加速是构建现代数据湖解决方案的关键技术。
51010编辑于 2025-07-28数据湖与数据湖计算深度分析：主流产品评测与对比
本文将深度分析数据湖、数据湖计算、Serverless 计算、大数据分析、数据湖管理、统一数据分析等关键概念，并对比市场上的主流产品，包括腾讯云数据湖计算 DLC、Serverless 数据湖、云原生数据湖阿里云 阿里云Data Lake Analytics 支持基于 RAM 的权限管理，允许用户自定义角色和策略^2。 湖仓一体 湖仓一体是数据湖的发展方向，允许用户在同一个平台上同时处理数据湖和数据仓库的需求。 腾讯云数据湖计算 DLC 支持湖仓一体架构，可以与云数据仓库 PostgreSQL 和 ClickHouse 等产品无缝集成^1。 总结 本文对比了腾讯云数据湖计算 DLC、Serverless 数据湖、云原生数据湖阿里云Data Lake Analytics、AWS Athena、华为云DLI、Databricks Lakehouse 可以看出，这些产品在 Serverless 计算、多引擎查询、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩、数据加速等方面各有特点，用户可以根据自己的业务需求选择合适的产品。
44810编辑于 2025-07-28
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号