240 发简信
IP属地:贵州
  • Resize,w 360,h 240
    大数据之Ambari2.7+HDP3.0(二)

    三、安装Ambari+HDP 大家在安装之前,一定要先确认好安装哪个版本的,如果不知道自己需要安装哪个版本的,可以先到官网查看一下每个版本的差别...

  • Resize,w 360,h 240
    大数据之Ambari2.7+HDP3.0(一)

    公司目前在开展大数据业务,在大数据框架选型方面一直在Ambari+HDP 和CM+CDH之中徘徊。我就尝试动手搭建了两套环境来试试效果。接下来我...

  • Resize,w 360,h 240
    采坑:java调shell脚本执行hive语句

    最近有个需求,就是SpringBoot提供一个web接口给业务方,业务方传入参数调接口,接口去执行hive离线计算,一般可能是说直接用jdbc去...

  • Resize,w 360,h 240
    大数据之CDH5.16.1集成Phoenix

    CDH中预装的hbase是没有Phoenix的,需要我们手动来集成,下面我们就简单的记录一下笔者集成的流程。 1下载parcels http:/...

  • Resize,w 360,h 240
    大数据之CDH5.16.1集成Tez0.9.2

    俗话说:磨刀不误砍柴工。。上两篇中,我们介绍完了CDH环境的基本搭建。在这篇中,我们讲述对hive的一个优化措施之一:执行引擎tez。在HDP中...

  • Resize,w 360,h 240
    大数据之CM+CDH5.16.1(二)

    接着上一篇继续安装CDH环境 三、安装CM和CDH 3.1 CDH下载 以CentOS7.5和CDH5.16.1举例 3.1.1 cm的tar包...

  • Resize,w 360,h 240
    大数据之CM+CDH5.16.1(一)

    鉴于在Ambari2.7+HDP3.0使用过程中有很多不方便之处,所以还是决定选择CDH框架来做。我是准备了4台虚拟机来搭这个环境。 一、集群规...

  • Resize,w 360,h 240
    Phoenix从4.7升级到4.14

    之前有过一篇文章讲述CDH5.16.1如何整合phoenix,但是,但是,但是,这个版本整合的是phoenix4.7,这个版本无法使用分页查询,...

  • Resize,w 360,h 240
    记一次hive调优之旅

    我遇到的业务场景是统计10个维度的用户画像数据,之前我是放在一个shell脚本里串行跑,总共跑下来差不多要9个多小时:从数据预处理、维度统计、数...

个人介绍
从java转入大数据,目前从事大数据研发工作