240 发简信
IP属地:广东
  • Resize,w 360,h 240
    HDFS 架构

    HDFS 架构 HDFS 涉及两个重要进程:NameNode、DataNode。他们一般都部署单独部署在不同服务器上,运行 NameNode 的...

  • Hadoop笔记规划

    欢迎大家阅读、留言、评论。 准备工作 Linux安装及其静态IP配置,安装JDK与Tomcat[https://www.jianshu.com/...

    0.1 84 0 1
  • Resize,w 360,h 240
    Hadoop集群部署

    准备 准备3台客户机,(关闭防火墙、静态IP、主机名称),配置ssh。我配置了4台; 安装JDK,配置JAVA_HOME环境变量; 安装Hado...

  • 写几个好用的Linux脚本

    xsync 集群通常需要同步配置文件,是不是可以写个脚本快速同步配置文件呢?这里 xsync 脚本是基于 rsync 的。相对于scp,rsyn...

  • Resize,w 360,h 240
    大数据前序

    时至今日,计算机软件成为人们日常生活的必备品。能用计算机软件提高效率的地方,几乎已经被全部发掘过了。在这种情况下,如果想让软件再成百上千倍地提高...

  • Resize,w 360,h 240
    四、Yarn

    刚开始MapReduce框架是包含 MapReduce和资源调度的,也就是说 MapReduce与资源调度耦合在一起。随着大数据的发展,Hado...

  • Resize,w 360,h 240
    三、MapReduce编程模型与计算框架

    MapReduce 既是一个编程模型,又是一个计算框架。也就是说,开发人员基于 MapReduce 编程模型进行编程开发,然后将程序通过 Map...

  • 二、HDFS 概述与基本使用

    HDFS 作为最早的大数据存储系统,存储着宝贵的数据资产,各种新的算法、框架要想得到人们的广泛使用,必须支持 HDFS 才能获取已经存储在里面的...

  • 一、初识Hadoop

    Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行...