这篇文章如果对你有帮助,记得点赞哦!有问题也可以给我评论~ 一、背景 公司的日志希望能够同一到一个Kibana去做一个同一的展示,那就需要将任务...
一、背景 1、出现异常 公司准备从CDH迁回社区版Hadoop集群,直接把Hadoop升级为比较新的3.30版本,Hive升级为3.12版本。F...
一、源码下载 1、github地址(选择对应的release版本) https://github.com/apache/flink/tree/r...
一、1.11.0版本及以前 以前的方式是先编译flink-shaded-hadoop这个包,将hadoop和hive指定你对应生产的版本编译出f...
一、简介 本文这种clickhouse的监控方式只需要用到一个组件—— grafana,只需要两个步骤就可完成监控,第一个步骤给grafana安...
1、HiveSource-xxxx.xxxx's parallelism (200) is higher than the max parall...
偶然的“有空”的发现 用了flink半年多了,平常有使用checkpoint和savepoint,比较关注任务的checkpoint的大小,但是...
背景: 目前公司业务需要统计超过7天以上的特征统计,但是kafka只存7天的数据,如果只想通过flink sql去计算30天的用户特征要求当天生...
一、整体效果 Yarn的监控最主要是能看到目前活跃的ResourceManager,同时能够显示目前的Nodemanager的活跃情况。其次是能...