【案例分享】ApacheKylin在美团点评的应用

上传:zy_wx 浏览: 16 推荐: 0 文件:PDF 大小:687.67KB 上传时间:2021-03-14 17:50:44 版权申诉
美团点评的OLAP需求大体分为两类:即席查询:指用户通过手写SQL来完成一些临时的数据分析需求。这类需求的SQL形式多变、逻辑复杂,对响应时间没有严格的要求。固化查询:指对一些固化下来的取数、看数的需求,通过数据产品的形式提供给用户,从而提高数据分析和运营的效率。这类需求的SQL有固定的模式,对响应时间有比较高的要求。我们针对即席查询提供了Hive和Presto两个引擎。而固化查询由于需要秒级响应,很长一段时间都是通过先在数仓对数据做预聚合,再将聚合表导入MySQL提供查询实现的。但是随着公司业务数据量和复杂度的不断提升,从2015年开始,这个方案出现了三个比较突出的问题:随着维度的不断增加,
上传资源
用户评论
相关推荐
ApacheKylin点评应用
即席查询:指用户通过手写SQL来完成一些临时的数据分析需求。这类需求的SQL形式多变、逻辑复杂,对响应时间没有严格的要求。固化查询:指对一些固化下来的取数、看数的需求,通过数据产品的形式提供给用户,从
PDF
625KB
2021-02-01 01:20
深度学习点评应用
近年来,深度学习在语音、图像、自然语言处理等领域取得非常突出的成果,成了最引人注目的技术热点之一。美团点评这两年在深度学习方面也进行了一些探索,其中在自然语言处理领域,我们将深度学习技术应用于文本分析
PDF
0B
2020-05-22 13:56
点评算法干货分享
2018年,是美团技术团队官方博客第5个年头, 博客网站 全年独立访问用户累计超过300万,微信公众 号(meituantech)的关注数也超过了15万。 由衷地感谢大家一直以来对我们的鼓励和陪伴!
PDF
0B
2019-02-19 14:39
SQL解析点评应用
数据库作为核心的基础组件,是需要重点保护的对象。任何一个线上的不慎操作,都有可能给数据库带来严重的故障,从而给业务造成巨大的损失。为了避免这种损失,一般会在管理上下功夫。比如为研发人员制定数据库开发规
PDF
623KB
2021-02-07 18:49
点评技术年货分享附件资源
美团点评技术年货分享-附件资源
TXT
23B
2021-04-06 17:02
点评业务容器化实战分享.pdf
演讲者在CCTC2017中国云计算技术大会上做了主题为《DeepDive:HowSparkUsesMemory》的演讲,就关于美团云(MOS)介绍,为什么引入容器,美团云容器平台设计,容器化实践之路
PDF
0B
2020-06-10 23:32
点评DBProxy实践
这次分享的主要内容包括6个部分:第一是我的简单介绍一下美团点评DBProxy;第二部分,会介绍一下美团点评DBProxy的整体架构;第三个是美团点评DBProxy的主要模块,主要模块介绍我们美团点评在
PDF
2.03MB
2021-05-03 02:18
2018点评技术
美团点评技术,美团点评技术,美团点评技术,为何重复三遍?因为这个案例是美团和大众点评如何企业整合,针对它们的云计算大数据技术实现的,全面剖析,如果对自己的水平有源码以上的认识,推荐阅读,帮助发散思维。
PDF
0B
2019-04-18 00:36
2.12点评技术
http://s3.meituan.net/v1/mss_e63d09aec75b41879dcb3069234793ac/file/2018年美团点评技术年货(中).pdf这个年货真的好东西,看来要
PDF
127KB
2021-01-31 08:50
点评技术团队博客
美团点评技术团队博客集锦,离线版,方便大家查阅
CHM
0B
2019-05-07 17:55
点评cat剖析.docx
美团点评CAT监控平台详解,可由浅入深的学习CAT的部署、搭建、使用及核心概念理解
DOCX
0B
2020-01-03 20:48
点评算法实践精选
美团点评将持续加大研发投入,大力加强工程师特别是人工智能科学家队伍建设,大力建设能支持前台复杂业务的技术平台和业务中台,大力投入大数据、人工智能等技术,大力增强科技创新,为生活服务业高质量发展提供新动
PDF
0B
2018-12-25 08:10
领域驱动设计点评业务系统实践
至少30年以前,一些软件设计人员就已经意识到领域建模和设计的重要性,并形成一种思潮,Eric Evans将其定义为领域驱动设计(Domain-DrivenDesign,简称DDD)。在互联网开发“小步
PDF
706KB
2021-02-01 07:54
腾讯新浪Docker应用案例
分别为:腾讯docker平台应用美团docker平台应用新浪docker平台应用
PDF
0B
2019-09-10 08:11
点评SRE发展与实践
SRE(SiteReliabilityEngineering)是Google于2003年提出的概念,将软件研发引入运维工作。现在渐渐已经成为各大互联网公司技术团队的标配。美团点评作为综合性多业务的互联
PDF
682KB
2021-02-08 06:57