美团点评基于Flink的实时数仓建设实践

上传:宁毅22549 浏览: 17 推荐: 0 文件:PDF 大小:350KB 上传时间:2021-02-01 04:20:55 版权申诉
近些年,企业对数据服务实时化服务的需求日益增多。本文整理了常见实时数据组件的性能特点和适用场景,介绍了美团如何通过 Flink引擎构建实时数据仓库,从而提供高效、稳健的实时数据服务。本文主要阐述使用Flink在实际数据生产上的经验。在实时数据系统建设初期,由于对实时数据的需求较少,形成不了完整的数据体系。我们采用的是“一路到底”的开发模式:通过在实时计算平台上部署 Storm作业处理实时数据队列来提取数据指标,直接推送到实时应用服务中。
上传资源
用户评论
相关推荐
点评DBProxy实践
这次分享的主要内容包括6个部分:第一是我的简单介绍一下美团点评DBProxy;第二部分,会介绍一下美团点评DBProxy的整体架构;第三个是美团点评DBProxy的主要模块,主要模块介绍我们美团点评在
PDF
2.03MB
2021-05-03 02:18
时数沙龙技术.pdf
实时数仓美团沙龙技术.pdf
PDF
1.87MB
2021-03-27 20:46
点评算法实践精选
美团点评将持续加大研发投入,大力加强工程师特别是人工智能科学家队伍建设,大力建设能支持前台复杂业务的技术平台和业务中台,大力投入大数据、人工智能等技术,大力增强科技创新,为生活服务业高质量发展提供新动
PDF
0B
2018-12-25 08:10
高效实践Flink与Doris构建实时数
深入学习2023最新实战课程,掌握Flink与Doris联合应用的技能。课程提供全方位学习资源,包含高质量视频教程、详细源码解析、实用文档说明以及虚拟机环境下载。通过本课程,学员能够系统性地了解并应用
rar
1.88KB
2023-11-24 12:37
基于Flink SQL构建实时数.pdf
OPPO作为手机厂商,基于Android定制了自己的ColorOS系统,当前日活跃用户超过2亿。围绕ColorOS,OPPO构建了很多互联网应用,比如应用商店、浏览器、信息流等。在运营这些互联网应用的
PDF
0B
2019-06-04 00:54
点评SRE发展与实践
SRE(SiteReliabilityEngineering)是Google于2003年提出的概念,将软件研发引入运维工作。现在渐渐已经成为各大互联网公司技术团队的标配。美团点评作为综合性多业务的互联
PDF
682KB
2021-02-08 06:57
点评机器学习实践试读
人工智能技术正以一种前所未有的速度深刻地改变着我们的生活,引导了第四次工业革命。美团作为国内O2O领域领先的服务平台,结合自身的业务场景和数据,积极进行了人工智能领域的应用探索:在美团的搜索、推荐、计
PDF
0B
2019-04-29 03:03
点评微服务架构实践
美团点评微服务架构实践 基础架构部 张熙 在微服务专题会上的分享
PDF
0B
2019-01-02 00:35
点评TiDB深度实践之旅
在美团,基于MySQL构建的传统关系型数据库服务已经难于支撑公司业务的爆发式增长,促使我们去探索更合理的数据存储方案和实践新的运维方式。随着近一两年来分布式数据库大放异彩,美团 DBA团队联合架构存储
PDF
532KB
2021-01-30 01:55
FlinkForwardChina2018基于Flink点评实时计算平台实践和应用.pdf
主要章节:
PDF
5.27MB
2020-08-09 12:37
Flink平台实践与应用
上图呈现的是当前美团实时计算平台的简要架构。最底层是数据缓存层,可以看到美团测的所有日志类的数据,都是通过统一的日志收集系统收集到Kafka。Kafka作为最大的数据中转层,支撑了美团线上的大量业务,
PDF
762KB
2021-02-01 04:15
点评React Native设计和实践
随着美团点评业务的快速发展,业务方对B端产品(商家端)版本迭代速度和资源方面提出更高要求,ReactNative的出现恰恰解决了这两个问题。时至今日,已经使用ReactNative一年有余,开发了近十
PDF
0B
2020-05-13 05:12
点评移动端底层架构实践
美团点评移动端底层架构实践、移动端底层架构实践、美团点评移动端底层架构实践
PDF
0B
2018-12-09 00:18
艺人直播Flink时数课程
艺人直播Flink实时数仓课程分享视频源码
txt
63B
2023-02-08 15:33
终稿尤勇点评监控体系建设.pdf
终稿-尤勇-美团点评监控体系建设.pdf
PDF
0B
2019-09-16 21:26