240 发简信
  • spark PairRDD 键值对操作

    CombineByKey 基于键聚合 这是最基本的聚合操作, 很多封装的函数都是基于它, 但能用更方便的函数就不要使用它. Join 连接操作 ...

  • 120
    spark wordcount

    wordcount java编写spark执行 maven pom 项目结构 java代码 bash提交任务到Spark

  • spring cloud config

    搭建Config Server 新建一个Spring Boot应用 引入maven依赖 注意spring-cloud-config-server...

  • spring cloud bus

    Bus是一个消息总线,config-server和其他服务都通过Bus监听一个消息队列(本例用Kafka), 通过它可以实现配置中心变动后,所有...

  • Swagger使用

    maven依赖 配置类

  • hive-udf

    hive的自定义函数. ToLowerCase的例子 把单词转化为小写的Demo. 添加maven依赖 写自定义函数可能只需要hive-exec...

  • docker安装mysql

    挂载当前目录为数据卷

  • 120
    hive 基本操作

    hive添加表 hive的命令就是mysql的命令. 创建数据库 创建表 把数据文件put到表在hdfs中的目录下 查询一下 此时hivq会启动...

  • hive安装&配置

    下载hive wget https://mirrors.tuna.tsinghua.edu.cn/apache/hive/hive-1.2.2/...