滴滴大数据离线和实时平台架构分析.docx

滴滴大数据离线和实时平台架构分析本文主要介绍了滴滴的大数据平台，包括3大平台架构体系，分别是实时平台架构体系、离线平台架 构体系、HBase平台架构体系等大数据基础设施和基础平台的技术积累和应用实践同时也会介绍滴 滴的数据治理体系，数据全链路建设，以及这些基础建设怎么样为滴滴的线上业务服务等方面的实践 经验和积累分享大数据架构体系毂『1在这!ElII：書里X里划10托也--一肚塁f;. 一Krifka窃pHecIliCE HfcViL'. TfHhI尿大数据架构体系实时平台架构体系1窝时计算集群架构It吋计贰甑平台・ Spark 1.6.1/Z1.・ Flink J.Z・ Druid O.ia.L-琳胪了知嵌聲包曲呷柏Hin硒齢I計烫引1g-Druid买旳集台数据诣扳-独立的实吋樂酔」跟阁燼分洱-任膏级陪営揑/施揑摄澈曰舌谨断^融埋作业阪刼Djuid nkSpurk £lica±iuEiijHrak S(rc aimiHg；VARN实时计算集群架构与流系统隼成的通用架构C =t^Wi!•数据上游:扁fkl，流计律数赔淸洗、改造・ fr^i]典型流式系统集成架构实时监控数据流臼实时监控弭因+.炉丈:时就抿情*4ft t-比.圧矗味对MUHAt t-靠年.剧风车・tt亂.Jllii1- g 更伴.小世捽临莽储■EMf 甘■珠拥甜・期科眦MmF或尽件C罐W轴哽i 芮平什朴O. PI胪DIM 畫VI WMinrwwMltLHH*vrr hmiiBI 实时监控基于 Spark Streaming 的 ETA基于 Flink Streaming 的乘客位置语义推送实时计算平台离线平台架构体系仍他9■谊删酣磁遭mUIIVikSVfi町（Kf-em o n *ge