1.安装配置jdk并配置环境变量
2.安装hadoop(tar解压即可)
3.创建hadoop用户
1) addgroup hadoop //创建用户组
2) adduser -ingroup hadoop hadoop //创建用户归到hadoop用户组下
3) chown -R hadoop /hadoop目录 // 给用户赋权
4.安装ssh
1) apt-get install openssh-server //安装ssh
2) su hadoop //切换到hadoop用户
3) ssh-keygen -t rsa -P ""(提示后填写保持路基/home/hadoop/.ssh/id_rsa) //创建ssh-key
4) cat /home/hadoop/.ssh/id_rsa.pub >> /home/hadoop/.ssh/authorized_keys //添加ssh-key到受信列表,并启用此ssh-key
5) ssh localhost //验证ssh
5.配置hadoop
1) 打开conf/hadoop-env.sh 配置jdk路径
2) 打开conf/core-site.xml,配置
<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/home/hadoop/tmp</value>
</property>
</configuration>
3)打开conf/mapred-site.xml
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>localhost:9001</value>
</property>
</configuration>
6.运行测试
1) ./hadoop namenode -format //格式namenode
2) ./start-all.sh //启动hadoop
3) jps //查看hadoop是否启动成功,出现以下进程则说明安装启动成功
8150 NameNode
8367 DataNode
8667 JobTracker
8945 Jps
8581 SecondaryNameNode
8881 TaskTracker
相关推荐
大数据云计算技术系列 hadoop单机版搭建图文详解(共14页).rar
前置条件: 1、ubuntu10.10安装成功(个人认为不必要花太多时间在系统安装上,我们不是为了装机而装机的) ...1、首先将hadoop0.21.0.tar.gz复制到usr下的local文件夹内,(sudo cp hadoop路径 /usr/local)如图
搭建hadoop单机版+hbase单机版+pinpoint整合springboot
本文主要介绍了在Ubuntu系统上Hadoop单机版测试环境的搭建过程。
Hadoop超详细介绍,详情介绍了Hadoop的安装
本文件包含hadoop集群搭建的详细步骤,包含基础环境搭建,Hadoop集群搭建,Hive搭建。小白放心食用,无坑。 其中基础环境搭建包括虚拟机安装、centos7、网络配置、xshell、notepad等环境的安装。注:本文里安装的...
搭建hadoop单机版+hbase单机版+pinpoint整合springboot 第一步-hadoop-hadoop-2.7.3在centos7上部署安装(单机版)
。。。
。。。
Hadoop2.4linux安装配置过程详细过程。
本文从零起步构建Hadoop单机版本和伪分布式的开发环境,涉及: 1, 开发Hadoop需要的基本软件; 2, 安装每个软件; 3, 配置Hadoop单机模式并运行Wordcount示例; 4, 配置Hadoop伪分布式模式并运行Wordcount示例;
linux单机版环境搭建Hadoop图文教程整理.pdf
ubuntu下搭建hadoop的单机版和伪分布式,花费一学期搭建完成。
Hadoop,分布式的大数据存储和计算, 免费开源,本文介绍Hadoop单机版、集群安装步骤。
如果用的是 CentOS/RedHat 系统,请查看相应的CentOS安装Hadoop教程_单机伪分布式配置。 本教程基于原生 Hadoop 2,在 Hadoop 2.6.0 (stable) 版本下验证通过,可适合任何 Hadoop 2.x.y 版本,如 Hadoop 2.7.1、...
2.2.2 验证SSH安装 2.2.3 生成SSH密钥对 2.2.4 将公钥分布并登录验证 2.3 运行Hadoop 2.3.1 本地(单机)模式 2.3.2 伪分布模式 2.3.3 全分布模式 2.4 基于Web 的集群用户界面 2.5 小结 第3章 Hadoop组件...
这是本人在单机上的Cent-OS系统中配置Hadoop-0.19.1伪分布式时的总结文档,但该文档也适合其他版本的Linux系统和目前各版本的Hadoop(Hadoop-0.20之后的版本配置文件hadoop-site.xml被拆分成了三个core-site.xml,...
可以搭建单机模拟分布式hadoop,可以参考:https://blog.csdn.net/qq_33689414/article/details/79223186
Hadoop的搭建有三种方式,单机版适合开发调试;伪分布式版,适合模拟集群学习;完全分布式,生产使用的模式。这篇文件介绍如何搭建完全分布式的hadoop集群,一个主节点,三个数据节点为例来讲解。 教你玩转