发简信
IP属地：广东
-
wsl 安装mysql
一般情况下,ubuntu16.04安装mysql只需要运行以下命令即可: 但是,当我在wsl上的ubuntu里运行这个命令时,却出现以下问题:①...
-
3.2 Spark Streaming 性能调优(二): 解决task倾斜
目录1.系统架构2.环境搭建2.1本地环境下kafka批量导入数据2.2 kafka-manager的安装与配置3.1 Spark Stream...
-
3.1 Spark Streaming 性能调优(一): 提高并行度目录1.系统架构2.环境搭建2.1本地环境下kafka批量导入数据2.2 kafka-manager的安装与配置3.1 Spark Stream...
-
2.1 本地环境下kafka批量导入数据目录1.系统架构2.环境搭建2.1本地环境下kafka批量导入数据2.2 kafka-manager的安装与配置3.1 Spark Stream...
-
2.2 kafka-manager的安装与配置目录1.系统架构2.环境搭建2.1本地环境下kafka批量导入数据2.2 kafka-manager的安装与配置3.1 Spark Stream...
-
项目简介
这个项目是基于spark streaming的日志分析系统,每分钟提交一次job,统计一分钟内的日志信息,同时也需要统计15分支内的异常ip信息...
-
简介
前言 公司的一个大数据项目是通过使用spark每隔一分钟统计一次15分钟内的日志信息,一般40~50s左右就可以统计完,但是偶尔会出现某几次任务...
-
1.系统架构目录1.系统架构2.环境搭建2.1本地环境下kafka批量导入数据2.2 kafka-manager的安装与配置3.1 Spark Stream...
-
2.环境搭建
目录1.系统架构2.环境搭建2.1本地环境下kafka批量导入数据2.2 kafka-manager的安装与配置3.1 Spark Stream...