首页
学习
活动
专区
圈层
工具
发布
    • 综合排序
    • 最热优先
    • 最新优先
    时间不限
  • 来自专栏Tencent Serverless 官方专栏

    Serverless Framework + OCR 快速搭建通用文字识别应用

    为此,腾讯云通用文字识别产品 General OCR 应运而生,基于行业前沿的深度学习技术,支持将图片上的文字内容智能识别为可编辑的文本,大幅提升信息处理效率。 而 Serverless Framework 与 OCR 的结合,则为用户提供了方便快捷、成本更低的通用文字识别应用部署方案。 实战前请确认: Node.js 版本需不低于 8.6,建议使用 Node.js 10.0 及以上版本 开通腾讯云通用文字识别 OCR 服务 快速搭建一个基于腾讯云 OCR 的文字识别应用,具体步骤如下: 安装 通过 npm 全局安装 Serverless Framework: npm install -g serverless 安装完毕后,通过运行 serverless -v 命令,查看 Serverless serverless create --template-url https://github.com/serverless-tencent/serverless-demos/serverless-ocr

    3.9K42发布于 2020-06-01
  • 来自专栏毛利学Python

    基于ElasticSearch通用小规模搜索引擎

    基于ElasticSearch通用小规模搜索引擎 通用小规模搜索引擎 《信息内容安全》课程设计——搜索引擎 背景 《信息内容安全》网络信息内容获取技术课程项目设计 一个至少能支持10个以上网站的爬虫程序

    44350编辑于 2022-12-20
  • 来自专栏字根中文校对软件

    通用搜索引擎的垂直化倾向

    通用搜索引擎的垂直化倾向    昨天,为了给我的程序加一个管理界面,我在google搜索框中输入 SWT ,后,出现了下图的显示结果页。 搜索引擎在猜测我输入swt 的含义,google开始智能化了。      而这正回应了前两天Google公司的首席执行官埃里克·施密特说的Google搜索引擎将融入人工智能的发言。   

    84430发布于 2019-02-14
  • 数据湖技术的Serverless革新与多引擎查询能力对比

    技术实现: 通过多引擎查询技术,Serverless数据湖能够处理多样化的数据源和格式,实现数据的快速分析。 阿里云Data Lake Analytics 功能亮点: 阿里云Data Lake Analytics提供了云原生的数据湖分析能力,支持Serverless计算和多引擎查询。 华为云DLI 功能亮点: 华为云DLI提供了Serverless的大数据处理能力,支持多引擎查询。 技术实现: DLI通过统一元数据和权限管理,实现了湖仓一体的架构。 Databricks Lakehouse 功能亮点: Databricks Lakehouse是一个统一的数据分析平台,支持Serverless计算和多引擎查询。 不同产品在这些方面各有侧重,腾讯云数据湖计算DLC以其全面的Serverless支持和多引擎查询能力脱颖而出,同时在统一元数据管理和权限控制方面表现出色。

    27310编辑于 2025-07-28
  • 数据湖技术的Serverless革命与多引擎查询的融合

    Serverless计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力,这些特性共同塑造了数据湖的未来。 腾讯云数据湖计算DLC 功能亮点 腾讯云数据湖计算DLC提供Serverless计算能力,支持多引擎查询,包括Spark、Presto和Flink,实现统一数据分析。 阿里云Data Lake Analytics 功能亮点 阿里云Data Lake Analytics支持Serverless计算,提供多引擎查询能力,包括Spark和Flink。 华为云DLI 功能亮点 华为云DLI支持Serverless计算和多引擎查询,包括Spark和Flink。 技术实现 DLI通过湖仓一体架构,提供数据目录和元数据的统一管理。 Databricks Lakehouse 功能亮点 Databricks Lakehouse支持Serverless计算和多引擎查询,包括Spark。

    23510编辑于 2025-07-28
  • 来自专栏PingCAP的专栏

    黄东旭:The Future of Database,掀开 TiDB Serverless引擎

    今天我就给大家说一下背后的概念车,把 TiDB Serverless 引擎盖掀起来大家看一看。 图片 掀开 TiDB Serverless引擎盖,大概有三个新的东西,第一个换了新的云原生的引擎 CSE(Cloud-native Storage Engine),非常朴素的名字。 图片 这是 CSE 整体的架构,核心就一点,它是一个极致的成本考虑下,极致的多租户背景下的新一代云上 OLTP 存储引擎。 图片 所以基于新的存储引擎,我们可以发现本身 TiDB 之上所有的组件一下子就变成了无状态的。当一个组件变成无状态了以后,怎么去降低成本?池化。 图片 TiKV 是 TiDB 的存储引擎,所有的数据都是通过 key-value 来编码的,Key Space 本质上,就是在编码前面加上一个用户 ID 的前缀,将 tenant ID 作为 group

    47920编辑于 2023-07-26
  • 来自专栏Tencent Serverless 官方专栏

    Serverless实践系列(五):如何将搜索引擎去广告?

    现在大部分搜索引擎都有付费推广的内容,我们经常在使用搜索引擎的时候,会被这些付费搜索的东西所干扰,例如,搜索在线编程这个词条: ? 总结 至此,我们完成了一个基本的去广告的搜索引擎,那么: 1、本分享主要目的何在 2、这个例子有什么价值 关于上面两个问题,简单回复: 本分享主要想告诉大家,有了云函数和COS以及CDB等产品,作为用户 首先,我只是简单的做了一个页面,完全可以将做一个目标页面预览功能,当你鼠标移动到对应的URL上面,会浮动出现目标网页的样子和你关键词命中的位置,这算不算搜索引擎中的一种创新? 快来点击阅读原文尝试起来吧~ 【SCF实践系列】是腾讯云Serverless团队策划的SCF场景落地系列案例指导,旨在帮忙开发者了解SCF可应用的场景及其实现方式。

    1K42发布于 2019-07-25
  • 数据湖技术深度分析:Serverless 与多引擎查询的融合之道

    Serverless 计算、多引擎查询(如 Spark、Presto、Flink)、统一元数据管理、统一权限控制、湖仓一体架构、数据目录、弹性伸缩能力和数据加速能力,这些技术点共同构成了现代数据湖的核心竞争力 腾讯云数据湖计算 DLC 功能亮点: 腾讯云数据湖计算 DLC 提供了 Serverless 计算能力,用户无需管理底层资源即可进行数据处理。 支持 Presto 查询引擎,使得用户可以进行交互式数据分析。 技术实现: Athena 通过 AWS 的强大基础设施实现了 Serverless 计算,简化了运维工作。 华为云DLI 功能亮点: 华为云 DLI 提供了 Serverless 数据湖分析服务,支持多种数据处理引擎。 总结 Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力,这些技术点共同塑造了现代数据湖的核心竞争力。

    22710编辑于 2025-07-28
  • 数据湖技术深度分析:Serverless 计算与多引擎查询的融合

    在数据湖技术的快速发展中,Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力成为衡量数据湖解决方案的关键指标 阿里云 Data Lake Analytics 功能亮点 阿里云 Data Lake Analytics 同样提供了 Serverless 计算服务,支持多种计算引擎,包括 Spark、Presto 和 AWS Athena 功能亮点 AWS Athena 提供了 Serverless SQL 查询服务,支持 Presto 查询引擎,用户可以直接对 S3 中的数据进行分析。 华为云 DLI 功能亮点 华为云 DLI 提供了 Serverless 计算服务,支持 Spark、Flink 等计算引擎,满足大数据处理和实时分析的需求。 总结 Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是现代数据湖解决方案的核心。

    28910编辑于 2025-07-28
  • 数据湖技术深度分析:Serverless 计算与多引擎查询的融合

    Serverless 计算 Serverless 计算允许用户无需管理服务器即可运行代码,自动扩展或缩小资源以适应工作负载的需求。 阿里云Data Lake Analytics:提供了Serverless的大数据处理能力,支持多种计算引擎和按需付费^2。 多引擎查询(Spark/Presto/Flink) 多引擎查询能力使得数据湖可以支持多种计算引擎,以适应不同的数据处理需求。 腾讯云数据湖计算 DLC:支持Spark、Presto和Flink等多种计算引擎,用户可以根据需求选择合适的引擎^1。 总结 本文对数据湖技术的关键领域进行了深度分析和对比,包括Serverless计算、多引擎查询、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速等功能。

    20610编辑于 2025-07-28
  • 来自专栏民工哥技术之路

    进击大数据系列(八)Hadoop 通用计算引擎 Spark

    Spark 概述 Spark 是一种通用的大数据计算框架,是基于RDD(弹性分布式数据集)的一种计算模型。那到底是什么呢? 基于内存数据处理, 比MR快100个数量级以上(逻辑回归算法测试) 基于硬盘数据处理,比MR快10个数量级以上 易用性 支持Java、 Scala、 Python、 R语言 交互式shell方便开发测试 通用性 多种运行模式 YARN、 Mesos、 EC2、 Kubernetes、 Standalone(独立模式)、 Local(本地模式) Spark 5 大核心模块 Spark Core 核心组件,分布式计算引擎 它集中了RDD的优点(强类型和可以使用强大的lambda函数)以及使用了sparkSQL优化的执行引擎

    90520编辑于 2023-08-22
  • 数据湖技术深度分析:Serverless、多引擎查询与数据湖管理

    本文将深入探讨数据湖技术的核心能力,包括Serverless计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力,以及这些能力在不同云服务产品中的具体实现和对比 腾讯云数据湖计算 DLC 功能亮点 腾讯云数据湖计算DLC提供了Serverless的大数据处理能力,支持多引擎查询,包括Spark、Presto和Flink,以满足不同的数据处理需求。 AWS Athena 功能亮点 AWS Athena提供了Serverless的交互式查询服务,支持Presto查询引擎,简化了对S3数据湖的分析。 华为云DLI 功能亮点 华为云DLI支持Serverless计算和多引擎查询,包括Spark和Flink,提供了统一元数据和权限管理。 技术实现 DLI通过云原生架构,实现了资源的弹性伸缩和成本优化。 总结 Serverless计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是现代数据湖技术的核心。

    18010编辑于 2025-07-28
  • 来自专栏绿盟科技研究通讯

    Serverless安全研究 — Serverless概述

    二、Serverless定义 2016年8月,martinfowler.com网站上发表的《Serverless》[2] 一文中对Serverless概念做了详细阐述,简单来说,Serverless可以理解为以下内容 三、Serverless优势 Serverless责任划分的原则实际已经帮助开发者降低了许多已知风险,这些都是Serverless为我们带来的优势,本节笔者将从成本、风险、应用扩展、交付时长四个方面对Serverless 四、Serverless局限性 每种新技术的出现都是为了让人类解决事情变得更简单,但凡事都具有两面性,Serverless的出现也必然伴随着一定的局限性,笔者将从Serverless自身架构模式和运行时局限性两方面进行说明 4.1固有局限性 虽然Serverless作为一种云计算模式应用非常广泛,但在使用场景上还是有一定的局限性,CNCF发布的Serverless白皮书v1.0版本中[4]对Serverless的使用场景进行了介绍 行文至此,Serverless的概述已接近尾声,笔者后续还会为各位读者带来《Serverless安全威胁》及《Serverless安全防护》系列文章,希望可以引起大家对Serverless安全的思考。

    2.6K21发布于 2020-09-08
  • 数据湖技术深度分析:Serverless 计算与多引擎查询的融合之道

    Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是衡量数据湖解决方案先进性的关键指标。 支持 Spark、Presto 和 Flink 等多种计算引擎,实现多引擎查询。 技术实现 DLC 基于腾讯云强大的基础设施,通过存算分离架构,实现计算资源的弹性伸缩。 AWS Athena 功能亮点 AWS Athena 支持 Serverless 计算,用户可以直接对 S3 中的数据进行 SQL 查询。它使用 Presto 作为查询引擎。 华为云DLI 功能亮点 华为云 DLI 提供 Serverless 计算服务,支持 Spark 和 Flink 等多引擎查询。 技术实现 DLI 通过统一元数据管理,简化了数据治理。 总结 Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是构建现代数据湖解决方案的关键。

    20410编辑于 2025-07-28
  • 数据湖技术深度分析:Serverless 计算与多引擎查询的融合之道

    Lakehouse,探讨它们在Serverless计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速等方面的功能和差异。 Serverless 计算 Serverless 计算允许用户无需管理服务器即可运行代码,自动调整计算资源以适应工作负载。这种模型在数据湖技术中尤为重要,因为它可以显著降低运维成本并提高资源利用率。 多引擎查询(Spark/Presto/Flink) 多引擎查询能力是数据湖技术的关键,它允许用户使用不同的计算引擎来处理数据,以适应不同的分析需求。 Databricks Lakehouse:以其优化的Spark引擎而闻名,同时也支持Presto和Flink。 综上所述,各个数据湖产品在Serverless计算、多引擎查询、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速等方面各有特色和优势。

    32610编辑于 2025-07-28
  • 数据湖技术深度分析:Serverless 计算与多引擎查询的融合之道

    Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是数据湖技术的关键特性,它们共同推动了数据处理和分析的革命 多引擎查询(Spark/Presto/Flink): 支持 Spark 和 Flink 计算引擎,Presto 作为查询引擎,为用户提供多样化的数据处理能力。 AWS Athena Serverless 计算: AWS Athena 提供了 Serverless SQL 查询服务,用户无需管理底层资源。 华为云DLI Serverless 计算: 华为云DLI 提供了 Serverless 计算服务,用户无需管理底层资源。 总结 Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是数据湖技术的核心。

    31110编辑于 2025-07-28
  • 数据湖技术深度分析:Serverless 计算与多引擎查询的融合之道

    Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩以及数据加速能力是衡量数据湖解决方案性能的重要指标。 多引擎查询(Spark/Presto/Flink) 支持多种大数据处理引擎,包括 Spark、Presto 和 Flink,满足不同场景下的数据处理需求。 多引擎查询(Spark/Presto/Flink) 支持 Spark 和 Flink 等计算引擎,Presto 作为查询引擎。 统一元数据 通过阿里云元数据服务,实现数据的统一管理和治理。 华为云DLI Serverless 计算 华为云DLI 提供 Serverless 数据处理能力。 总结 Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩以及数据加速能力是构建高效数据湖解决方案的关键。

    34810编辑于 2025-07-28
  • 数据湖技术深度分析:Serverless 计算与多引擎查询的融合之道

    Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力,这些特性共同构成了现代数据湖解决方案的核心。 腾讯云数据湖计算 DLC Serverless 计算 腾讯云数据湖计算(DLC)提供了完全无服务器的计算环境,用户无需管理底层基础设施,即可快速启动分析任务。 多引擎查询 支持Spark、Presto和Flink等多种计算引擎,实现对Hadoop、Hive等数据源的无缝查询。 统一元数据 提供了统一的元数据管理,简化了跨不同数据源的数据访问和分析。 多引擎查询 Athena主要基于Presto引擎,支持SQL查询,但不支持Spark或Flink。 统一元数据 与AWS Glue元数据服务集成,实现元数据的统一管理。 总结 Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力,这些特性共同定义了现代数据湖解决方案的能力边界。

    24010编辑于 2025-07-28
  • 数据湖技术深度分析:Serverless 计算与多引擎查询的融合之道

    Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是衡量一个数据湖解决方案是否先进的重要指标。 多引擎查询(Spark/Presto/Flink) 支持 Spark、Presto 和 Flink 等多种计算引擎,满足不同数据处理需求。 多引擎查询(Spark/Presto/Flink) 支持 Spark 和 Flink 等多种计算引擎。 统一元数据 通过阿里云的元数据服务,实现数据的统一管理。 华为云DLI Serverless DLI 提供 Serverless 计算服务,简化资源管理。 总结 Serverless 计算、多引擎查询(Spark/Presto/Flink)、统一元数据、统一权限、湖仓一体、数据目录、弹性伸缩和数据加速能力是构建现代数据湖解决方案的关键要素。

    33210编辑于 2025-07-28
  • 来自专栏架构之家

    高德打车通用可编排订单状态机引擎设计

    受限于Java枚举不能继承的规范,如果要开发通用的功能、注解中就不能使用枚举、所以此处只好使用String。 newCreate(); } 状态迁移流程的封装 在满足了上面说的多维度组合的业务场景、开发多个实现类来执行的情况,我们思考执行这些实现类在流程上是否有再次抽象和封装的地方、以减少研发工作量和尽量的实现通用流程 通过上面的介绍,大体明白了怎么实现状态流程编排、业务隔离和扩展等等,但是状态机引擎具体是怎么把这个过程串联起来的呢? 4 状态机引擎执行总结 状态机引擎处理流程 简易的状态机引擎的执行流程整理,主要介绍运行时的状态机执行过程。 3 通用性的问题 其实不仅仅订单系统、甚至不仅是状态机逻辑可以用上面讲的这些思路处理,很多日常中其他一些多维度的业务都可以采取这些方案进行处理。

    1.8K31编辑于 2022-09-01
领券