1. 安装 SSH
hadoop使用ssh进行通信,需要为ssh配置免密码登录
$ apt-get install ssh
$ ssh-keygen -t rsa -P ” -f ~/.ssh/id_rsa
$ cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
$ ssh localhost
验证安装成功:
$ ssh -version
显示结果:
OpenSSH_5.1p1 Debian-6ubuntu2, OpenSSL 0.9.8g 19 Oct 2007
Bad escape character ‘rsion’.
验证无密码登录:
$ ssh localhost
显示结果:
Linux ubuntu 2.6.31-14-generic
…
Last login: Sun Jun 5 15:40:06 2011 from localhost
2. 安装JDK
#下载jdk后,先修改权限
chenwq@ubuntu:~/Downloads$ chmod 777 jdk-6u27-linux-x64.bin
#执行
./jdk-6u27-linux-x64.bin
3. 安装Hadoop
下载Hadoop最新版本: http://hadoop.apache.org/common/releases.html
下载然后解压
$ tar zxvf hadoop-0.20.0.tar.gz
4. 创建一个指向Hadoop的安装目录的环境变量:
chenwq@ubuntu:/$ export HADOOP_INSTALL=/home/chenwq/Downloads/hadoop
chenwq@ubuntu:/$ export PATH=$PATH:$HADOOP_INSTALL/bin
5. 检查Hadoop的运行
chenwq@ubuntu:/$ hadoop version
Hadoop 0.21.0
Subversion https://svn.apache.org/repos/asf/hadoop/common/branches/branch-0.21 -r 985326
Compiled by tomwhite on Tue Aug 17 01:02:28 EDT 2010
From source with checksum a1aeb15b4854808d152989ba76f90fac
分享到:
相关推荐
基于Ubuntu的Hadoop简易集群安装与配置,三台运行于Vmware中的ubuntu14.04系统搭建成简易Hadoop分布式集群,用于之后的大数据学习
基于Ubuntu下的Hadoop集群搭建详细安装指南
1. 【服务器】获取阿云ECS 2. 【服务器】了解快照 4. 配置SSH密码登陆 6. 【服务器】图形化界 9. 参考资料 1. 【服务器】获取阿云ECS 2
hadoop详细安装,ubuntu16.04+ hadoop-2.9.1.tar.gz+jdk-8u74-linux-x64.tar.gz
1. 【服务器】获取阿云ECS 2. 【服务器】了解快照 4. 配置SSH密码登陆 6. 【服务器】图形化界 9. 参考资料 1. 【服务器】获取阿云ECS 2
1.本机已安装好 VMware Workstation Pro 虚拟机,及 Ubuntu 版本的 Linux 系统。 2.进行 Hadoop 伪分布式安装。 3.运行 Hadoop 自带的 WordCount 实例检测是否运行正常。
Linux-Hadoop的安装与配置
使用vmware复制了三个ubuntu18.04虚拟机系统,模拟多台服务器,安装配置完全分布式hadoop。 想修改成免费的,不会修改。有问题可以留言一起交流
本文将向您展示如何从零开始在 Linux 上搭建 Hadoop,以及如何配置 Hadoop 的必备文件。 一、选择 Linux 发行版 选择正确的 Linux 发行版是为 Hadoop 集群配置环境的重要一步。Ubuntu、CentOS、Debian 等都是常见的...
(1)下载JDK并解压(当前操作系统为Ubuntu16.04,jdk版本为jdk-8u111-Linux-x64.tar.gz) 新建/usr/java目录,切换到jdk-8u111-linux-x64.tar.gz所在目录,将这个文件解压缩到/usr/java目录下。 tar -zxvf jdk-8...
Hadoop运行在Linux系统上,因此,需要学习实践一些常用的Linux命令。本实验旨在熟悉常用的Linux操作和Hadoop操作,为顺利开展后续的其他实验奠定基础。 二、实验平台 (1)操作系统:Linux(建议Ubuntu16.04或Ubuntu...
在Ubuntu Linux下创建Hadoop用户,然后在Hadoop中更新apt,更新完毕之后,执行sudo apt-get install vim 报错
Hadoop安装有三种模式:单机、伪分布式、完全分布式,本文档为完全分布式安装,过程很详细,设计内容包括:在win7上安装虚拟化工具VMware(用于支撑Linux系统),在VMware上安装Ubuntu系统,安装Hadoop前的准备工作...
eclipse-hadoop2.7.3插件(Linux)在Ubuntu下验证可用
本文是从头到尾有关大数据的最完整的文章。
Ubuntu 16.10 x64 Docker 本身就是基于 Linux 的,所以首先以我的一台服务器做实验。虽然最后跑 wordcount 已经由于内存不足而崩掉,但是之前的过程还是可以参考的。 连接服务器 使用 ssh 命令连接远程服务器。 ...
自己整理过的,在Ubuntu linux上以单节点模式下配置,运行Hadoop。
网上和很多书上都有不少的hadoop在linux系统下的安装教程,但是尝试过的读者会发现,就算是按照这些教程一步步的操作,还是会在某个地方出错,主要原因是版本问题。尤其是书上的版本一般都较老,所以并不建议对着书...
1、 在VMware上安装ubuntu-16.04-desktop-amd64.iso 单击“创建虚拟机”è选择“典型(推荐安装)”è单击“下一步” è点击完成 修改/etc/hostname vim hostname 保存退出 修改etc/hosts 127.0.0.1 ...
1、ubuntu10.10安装成功(个人认为不必要花太多时间在系统安装上,我们不是为了装机而装机的) 2、jdk安装成功(jdk1.6.0_23for linux版本,图解安装过程http://freewxy.iteye.com/blog/882784 ) 3、下载hhadoop...