快讯 - 腾讯云开发者社区-腾讯云

周日
2020-10-04

美团外卖离线数仓建设实践
导读：美团外卖数据仓库主要是收集各种用户终端业务、行为数据，通过统一口径加工处理，通过多种数据服务支撑主题报表、数据分析等多种方式的应用。数据组作为数据基础部门，支持用户端、商家端、销售、广告、算法等各个团队的数据需求。本文主要介绍美团外卖离线数仓的历史发展历程，在发展过程中碰到的痛点问题，以及针对痛点做的一系列优化解决方案。 01 业务介绍首先介绍下美团外卖的业务场景，核心交易链路为：用户可以通过美团的各种用户终端（包括美团外卖的APP或者美团 APP、QQ/微信等）下单，然后商家接...
面试官：开发过Maven插件吗？我：开发过啊。。。
写在前面转眼间，今天已经是假期的第4天了。今天要给大家分享点啥呢？想了半天，想起了之前去某宝面试的情景。记得面试前自己基于Maven开发过一些简单实用的插件，而且在自己的本地环境中一直在使用，极大的提高了我的开发和工作效率。恰好在面试时，某宝的面试官问了我一个问题：开发过Maven插件吗？我：开发过啊。面试官：那你给我讲讲你是如何开发的呢？我：吧啦吧啦吧啦。。。面试官：下周入职吧！我：好的。就这样，我拿到了Offer。 Maven插件的相关概念插件坐标定位插件与普通jar包一样包含坐...
比Keras更好用的机器学习“模型包”：0代码上手做模型
做机器学习模型时，只是融合各种算法，就已经用光了脑细胞？又或者觉得，数据预处理就是在“浪费时间”？一位毕业于哥廷根大学、做机器学习的小哥也发现了这个问题：原本只是想设计个模型，结果“实现比设计还麻烦”。于是他自己动手做了个项目igel （德语中意为“刺猬”，但也是Init、Generate、Evaluate Machine Learning的缩写），无需编写任何多余代码，就能设计出想要的模型。也就是说，用户只需要知道各种机器学习模型的原理，但不需要再自己动手写代码。相比于Kera...
英伟达开源「Imaginaire」：九大图像及视频合成方法
图像和视频等视觉数据的生成是机器学习和计算机视觉领域重要的研究问题之一。近几年，英伟达提出了 SPADE、MUNIT 等多个图像及视频合成模型。近日，英伟达又开源了一个新的 PyTorch 库「Imaginaire」，共包含 9 种英伟达开发的图像及视频合成方法。项目地址：https://github.com/NVlabs/imaginaire 这九种方法分别为：有监督的图像到图像转换 1、pix2pixHD 2、SPADE/GauGAN 无监督的图像到图像转换 1、UNIT 2、MU...
组合设计模式编写程序
请用组合设计模式编写程序，打印输出图1的窗口，窗口组件的树结构如图2所示。 1、新增接口IForm public interface IForm { public void print(); } 2、实现接口的默认实现AbstractForm public abstract class AbstractForm implements IForm { private String label; public AbstractForm(String _label){ ...
硬核测试：Pulsar 与 Kafka 在金融场景下的性能分析
背景 Apache Pulsar 是下一代分布式消息流平台，采用计算存储分层架构，具备多租户、高一致、高性能、百万 topic、数据平滑迁移等诸多优势。越来越多的企业正在使用 Pulsar 或者尝试将 Pulsar 应用到生产环境中。腾讯把 Pulsar 作为计费系统的消息总线来支撑千亿级在线交易。腾讯计费体量庞大，要解决的核心问题就是必须确保钱货一致。首先，保证每一笔支付交易不出现错账，做到高一致、高可靠。其次，保证计费承载的所有业务 7*24 可用，做到高可用、高性能。计费消息总线必...
Salesforce发布数据库自然语言接口Photon
来自Salesforce Research和香港中文大学的一个科学家团队发布了一种叫作“Photon”的数据库自然语言接口(NLIDB)。该团队使用深度学习技术构建了一个在通用基准测试中达到63%准确率的解析器，以及一个可以提示用户澄清模糊问题的错误检测模块。该团队在最近的ACL 2020大会上演示了Photon，团队成员Victoria Lin在最近的博文中描述了该系统。Photon的核心是一个基于神经网络的语义解析器，它可以将人类用户的自然语言问题转换成SQL查询。解析器在Spider数据...
携程如何基于ARIMA时序分析做业务量的预测
一、前言时间序列分析是统计学科的一个重要分支。它主要是通过研究随着时间的推移事物发展变化过程中的规律，来进行事物未来发展情况的预测。在我们的日常生活中，股票的价格走势，奶茶店每天的销售额，一年的降雨量分布，河水四季的涨落情况等都属于时间序列。时间序列的分析深入诸多行业。时间序列的分类：图1 根据指标的平稳性，分为平稳时间序列和非平稳时间序列；根据指标的性质分类，分为总量指标时间序列，相对指标和平均指标时间序列；根据指标的时间属性分类，分为时期指标时间序列，时点指标时间序列；时...
Facebook如何用分片来扩展服务？
多年来，随着我们在规模和功能上的扩展，Facebook已经从单一基本的web服务器架构演进成一个包含数千个在后台工作的服务的复杂架构。扩展Facebook产品所需的各种后端服务并不是一件小事。而且，我们发现我们许多团队都在构建自己的具有重叠功能的定制化分片解决方案。为解决这个问题，我们将Shard Manager构建为一个通用平台，它能促进可靠的分片应用程序的高效开发和运维。事实上，用分片来扩展服务的概念并不新鲜。然而，据悉，我们是业界唯一在我们的规模内得到广泛采用的通用分片平台。Shar...

周六
2020-10-03

周五
2020-10-02

周四
2020-10-01

微服务部署测试简单实践
微服务特别适合业务复杂，开发队伍庞大的项目。微服务可以到达化整为零，简化单个服务，降低沟通成本的效果。但微服务在性能上比单体服务低，也会有数据冗余的问题，要结合自身情况，不要盲目崇拜。本文介绍一种简单的微服务技术架构。帮助大家对微服务如何部署，如何开发有个初步的认识。一个简单的微服务架构部署图如下 nginx：对外统一入口，根据url将请求分发到不同微服务，用ip:port区分不同的微服务。也会直接处理一些静态资源的访问，本身就是web服务器。 springboot+d...

快讯

美团外卖离线数仓建设实践

面试官：开发过Maven插件吗？我：开发过啊。。。

比Keras更好用的机器学习“模型包”：0代码上手做模型

英伟达开源「Imaginaire」：九大图像及视频合成方法

组合设计模式编写程序

硬核测试：Pulsar 与 Kafka 在金融场景下的性能分析

Salesforce发布数据库自然语言接口Photon

携程如何基于ARIMA时序分析做业务量的预测

Facebook如何用分片来扩展服务？

分布式系统的核心：共识问题

KuAI平台 | 模型在线推理系统的高可用设计

移除“测试”任务栏，加快交付速度

用了VS Code、IDEA等十几款编辑器后，我总结出优秀编辑器的特质

最完整的PyTorch数据科学家指南（1）

小心“移植税”：Kubernetes不能使应用程序具有可移植性

百微秒时延，腾讯云云硬盘CBS架构深度解密

GitHub Satellite 2020：让GitHub和NPM为JavaScript开发者带来更多价值

我是如何解决一个基于GraphQL网站的扩展性问题？

如何使用 fastai v2 在 15 行代码下构建深度学习图像分类器

微服务部署测试简单实践

对话祥峰中国夏志进：AI技术不会出现革命性突破，更关注深入产业降本增效

GitHub Copilot抄袭实锤！GitHub：我们的AI没有「背诵」代码

脚踩也没事 科学家以昆虫为灵感研发出高度灵敏性小型机器人

谁在发起抵制Copilot？代码版权争议不休，有开发者退出GitHub

突发！网信办通知应用商店下架滴滴，没说什么时候可以恢复

报告：混合工作模式将加大 IT 工作难度

一天狂揽2000+星，微软面向初学者ML课程来了，完全免费

韩国用AI预防汉桥自杀：正在用救援数据训练机器学习模型

IEEE技术领域大奖公布：ML先驱上榜，大陆唯一获奖学者来自清华

这个 App，想用你的「良心」赚钱

云+社区 × 知乎 ：AI 与传统行业的融合

云+社区 × 知乎 ：开发者云办公模式洞察

云+社区×知乎：共探 5G

"清华-腾讯联合实验室"疫情分析专题

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

脚踩也没事科学家以昆虫为灵感研发出高度灵敏性小型机器人

云+社区 × 知乎：AI 与传统行业的融合

云+社区 × 知乎：开发者云办公模式洞察