【IT168 专稿】本文根据夏军老师在2018年10月18日【第十届中国系统架构师大会】现场演讲内容整理而成。 讲师简介: ...夏军,小米数据流平台负责人,曾就职于腾讯和百度,主要负责消息...
Kyuubi 在小米大数据平台的应用实践 为 Spark on Kubernetes 提供更完善的调度能力! 阿里云 EMR StarRocks 介绍 百度AutoDL:自动化可解释的深度学习 OpenMLDB:开源实时特征计算全栈解决方案 Alluxio 加速云上深度...
提到小米,我们首先想到的这是一家互联网企业,主要产品除了手机,还有如空气净化器,净水器,小米手环等智能化产品。从某种角度来说,小米已被打...其实,小米能有今天的发展,大数据平台在其中扮演了最重要的角色...
aaa
2018-SACC大会-基于大数据平台的应用实践 1. 曾林西 - 美团点评Spark演进与实践.pdf 2. 夏军 - 小米大数据集成架构演化之路.pdf 3. 郭跃鹏 - ApacheGriffin.pdf 4. 张建伟 - 百度云Spark优化及大规模应用.pdf
公众号推文规则变了,点击上方"数据社",设为星标后台回复【加群】,申请加入数据学习交流群大家好,我是一哥,给大家分享一下京东金融大数据分析平台总体架构介绍,废话不说,干...
如果我们能够化整为零,在企业内部从宏观、整体的角度设计和实现一个统一的大数据平台,引入单一集群、单一存储,统一服务和统一安全的架构思想,就能很好的帮助企业解决很多问题。提到大数据分析平台,...
移动大数据分析平台的架构思想及演进当问及加入友盟之后和之前工作有何不同时,吴磊这样回答,“之前工作主要是做数据搜索,大数据的源头和搜索引擎有分不开的联系,可以说,大数据是从搜索开始的,加入友盟之后,...
MySQL由于自身简单、高效、可靠的特点,成为小米内部使用最广泛的数据库,但是当数据量达到千万/亿级别的时候,MySQL的相关操作会变的非常迟缓;如果这时还有实时BI展示的需求,对于mysql来说是一种灾难。 为了解决...
如今的小米不仅是一家手机公司,更是一家大数据与人工智能公司。随着小米公司各项业务的快速...小米大数据,目前主要负责设计、完善公司级数据仓库解决方案,提供完备及全链条的数据治理一站式平台,连通各业务线...
本文来自 Apache Kylin Meetup 北京站上小米大数据平台 OLAP 负责人陈学辉的分享。关注过往记忆大数据公众号并回复 kylin 获取本文ppt。小...
作者 | 小米大数据 如今的小米不仅是一家手机公司,更是一家大数据与人工智能公司。随着小米公司各项业务的快速发展,数据中的商业价值也愈发突显。而与此同时,各业务团队在数据查询、分析等方面的压力同样...
摘要:友盟大数据平台的架构借鉴了Lambda架构思想,数据接入层让Kafka集群承担,后面由Storm消费,存储在MongoDB里面,通过Kafka自带的Mirror功能同步,两个Kafka集群,可以分离负载;计算有离线和实时两部分,实时...
2019独角兽企业重金招聘Python工程师标准>>> ...
2019独角兽企业重金招聘Python工程师标准>>> ...
小米业务线众多,从信息流,电商,广告到金融等覆盖了众多领域,小米流式平台为小米集团各业务提供一体化的流式数据解决方案,主要包括数据采集,数据集成和流式计算三个模块。目前每天数据量达到 1.2 万亿条,实时...
说明 本篇博客整理自参考内容,完整内容请查看原文章; 技术选型 ...与Druid相类似的实时数据分析工具,还有Linkedln...Pinot,Linkedln开发的类似于Druid的多维数据分析平台,它的功能实际上要比Druid强大一些,但
在2018年8月Apache Kylin meetup@北京活动上,小米大数据架构师分享了小米 OLAP 平台,基于 Apache Kylin 和其它实时引擎组成的 Lambda 架构,以满足业务对数据查询性能以及及时性的多重要求。 篇幅过长,...