240 发简信
IP属地:北京
  • 在 YARN 上运行 mapreduce 的 jar 包

    想学习运行一个mapreduce程序试试,记录如下 本地运行word count 新建maven项目,添加hadoop-client,版本比如3...

  • HDP在windows的hyper-v中运行

    hdp官方提供针对virtualbox和vmware的标准的虚拟机导出文件ova格式,但是没有提供针对hyper-v使用的虚拟机文件,如何在hy...

  • Vagrant本地集群启动及ssh配置

    先放配置文件 这个文件启动了三个节点,master1/slave1/slave2,可以从宿主机ssh进去,它们之间可以相互ssh,使用的都是宿主...

  • 使用Vagrant开启单虚拟机环境

    安装软件 官网下载vagrant并安装 设置 provider vagrant 默认使用 virtualbox如果想默认使用vmware可以加一...

  • Resize,w 360,h 240
    学习研究记笔记的相关软件(MacOSX)

    引言 为了整理学习材料和成果,尝试找了一些相关的软件,包括找资料的时候记笔记,实验笔记,整理代码,准备演讲,简要发表,完善论文等。 LightP...

    1.2 6647 0 13
  • 配置分布式hadoop环境(*nix)

    基于配置单机hadoop的基础上继续 ssh连接密钥步骤1:改权限 ssh连接密钥步骤2:添加本机密钥到远程主机的允许访问列表,参考远程执行ss...

  • 初次使用vagrant上手

    0 Vagrant是什么? 使用虚拟机需要配置它使用的iso,CPU内存硬盘网络等,而vagrant可以用脚本来管理这些,而且可以创建一组。相当...

  • 在mac上搭建本地DNS名称服务

    首先想到docker好像能给容器名称做解析,于是搜索:docker dns hadoop,得到:Dnsmasq解决docker集群节点互通问题 ...

  • 配置单机hadoop(*nix环境)

    参考官网说明可以点击getting started看最新版本也可以看历史版本,比如2.9.2 步骤0,关防火墙systemctl disable...