现在网上很难找到一篇有关HiveServer2 HA源码分析的文章,晚上有时间又耐不住从源码层面分析了下HiveServer2 HA负载均衡实现...
当前Spark Streaming-Streaming Join只支持: InnerJoin; LeftJoin; RightJoin; 整体思...
网上有很多文章,发现跟当前的版本有很多冲突,看起来一知半解的;当前讨论的版本为spark2.1.0,之前的版本不再考虑;而其命名方式也很奇怪,可...
YARN模式下启动流程 1.YarnschedulerBackend启动入口 YARN的启动是在SparkContext初始化scheduler...
背景 接触SparkSQL不久,查找了些别人的资料,感觉对整个Spark HiveThriftServer2流程讲的糊里糊涂的,觉得需要从Bee...
配置zookeeper,启动多个HiveServer 配置HA Zookeeper信息如下: 首先,在host1上启动MetaStore和Hiv...
Kafka 单机环境搭建 从官网下载kafka_2.11-0.9.0.1和kafka_2.11-0.10.2.0两个版本, 这两个版本升级较大。...
DrillBit介绍 DrillBit Drill的服务端控制进程,管理ServiceEngine,WorkerManager Service...
如何正确地开启SparkStreaming的动态分配? 在邮件组中这个问题被讨论过,想要开启针对SparkStreaming的动态分配策略需要如...