240 发简信
IP属地:上海
  • CDH-Spark/2环境搭建(pyspark测试)

    1,CDH的搭建可以参考 https://blog.csdn.net/q1370992706/article/details/79578444 ...

  • HELM吨位监视器概述

    吨位监视器概述 机器保护和零件质量控制 Helm吨位监视器采用业内最先进的信号调节技术。所有吨位监控系统都具有内置的机器保护报警和自动上下限,用...

  • pySpark 从0搭建(ubuntu16.04)

    1,下载 spark-2.3.0-bin-hadoop2.7 hadoop-2.8.1/ 2,配置 export JAVA_HOME=/usr/...

  • hadoop-docker环境从零搭

    《1,虚拟机ubuntu16.04》 设置root用户初始密码sudo passwd 《2,ssh》 apt-get updateapt-get...

  • pySpark API 词频统计(5)

    #1 本地计算 pyhont xx.py #2 提交集群 spark-submit --py-files pyspark_wordcount.z...

  • pySpark API 实操 lambda(4)

    lambda在pyspark中的使用 lambda的一般形式是关键字lambda后面跟一个或多个参数,紧跟一个冒号,以后是一个表达式。lambd...

  • pySpark API实操(3)

    #if run in windows use thisimport findsparkfindspark.init() # importfrom...

  • pySpark 中文API (2)

    pyspark.sql模块 模块上下文 Spark SQL和DataFrames的重要类: pyspark.sql.SparkSession主要...

    0.3 9380 0 13
  • pySpark 中文API (1)

    http://spark.apache.org/docs/latest/api/python/index.html pyspark软件包 子包 ...