怎么在ubantu里面安装伪分布式Hadoop?

2022-12-31 17:50:33来源:网络转载作者:匿名 阅读量:74 字体:

64位Ubuntu LTS 14.04

VMware 最新版本

01、第一步创建Hadoop用户。

怎么在ubantu里面安装伪分布式Hadoop?

02、第二步,注销并使用 Hadoop 用户登录,接下来更新 apt 并且安装 vim。

03、安装上ssh,配置为无密码登录

04、安装java的环境。
sudo apt-get install openjdk-7-jre openjdk-7-jdk
vim ~/.bashrc # 设置JAVA_HOME
在配资文件中添加。
export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64
JAVA_HOME 变量生效:
source ~/.bashrc

05、安装 Hadoop :

cd ~/下载
sudo tar -zxvf ./hadoop-2.6.0.tar.gz -C /usr/local # 解压到/usr/local中
cd /usr/local/
sudo mv ./hadoop-2.6.0/ ./hadoop # 将文件夹名改为hadoop
sudo chown -R hadoop ./hadoop

修改配置文件 core-site.xml :

vim /usr/local/hadoop/etc/hadoop/core-site.xml



hadoop.tmp.dir
file:/usr/local/hadoop/tmp
Abase for other temporary directories.


fs.defaultFS
hdfs://localhost:9000



修改配置文件 hdfs-site.xm



dfs.replication
1


dfs.namenode.name.dir
file:/usr/local/hadoop/tmp/dfs/name


dfs.datanode.data.dir
file:/usr/local/hadoop/tmp/dfs/data

06、启动好Hadoop。

cd /usr/local/hadoop
bin/hdfs namenode -format # namenode 格式化
sbin/start-dfs.sh # 开启守护进程
jps
若成功启动则会列出如下进程: NameNode、DataNode和SecondaryNameNode。

07、运行 WordCount 实例。测试一下。

bin/hdfs dfs -mkdir -p /user/hadoop # 创建HDFS目录
bin/hdfs dfs -mkdir input
bin/hdfs dfs -put etc/hadoop/*.xml input # 将配置文件作为输入
bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-*.jar grep input output 'dfs[a-z.]+'
bin/hdfs dfs -cat output/* # 查看输出

特别提示

此处安装之前,一定是先安装好安装好java环境,否则hadoop将会测试不成功。觉得行的同志打赏下哦,谢谢。

推荐阅读

  • dnf86级第一个任务怎么做

    dnf86级第一个任务怎么做

    01、先决条件:该帐号至少有一个角色完成了安图恩主线任务。 02、找到寂静城地区猎手伯恩。 03、然后在伯恩处购买克罗诺斯岛入场任务完成卷,然后放入帐号仓库即可。 04、然后需要完成任务的角色把...

    阅读: 961

  • 盟军敢死队1攻略-轻松过关

    盟军敢死队1攻略-轻松过关

    盟军敢死队101、首先玩家进入游戏完成序幕任务,记住几个快捷键的作用:Shift +X瞬间移动、Shift+I无敌、Shift+N完成任务、Ctrl+V隐形。 02、刚开始的热身任务比较简单,三个队...

    阅读: 658

  • NBA2KOL街头赛有哪些技巧?

    NBA2KOL街头赛有哪些技巧?

    01、卡位:当你跑到对手前面的时候,按住W既可以构成卡位,当你被对方卡位的时候,按住shift和w和方向,就可以伺机摆脱对方卡位 02、靠打:如果你玩的是一个中锋,你可以不停的在篮筐下靠打,寻找机会...

    阅读: 670

  • 生死狙击身法教学连跳和弹跳

    生死狙击身法教学连跳和弹跳

    01、很多人看了一些大神的视频,几乎是全程连跳和弹跳,非常羡慕。可是很多人都不会连跳和弹跳,那么如何练习这两个技能呢? 02、所谓连跳,顾名思义是一种跳法,操作简单。连跳熟练后,可以尝试学习弹跳。 ...

    阅读: 625

  • 天龙八部私服如何安装?

    天龙八部私服如何安装?

    天龙八部游戏 01、想要下载安装天龙八部私服,就要先把正式服更新到最新的版本才可以。 02、更新好以后,打开搜狗搜索输入:天龙八部私服,点击搜索。 03、再搜索出来的结果中选择一个进入,点击下载...

    阅读: 721

  • dnf90级ss哪个图爆率高?

    dnf90级ss哪个图爆率高?

    01、首推当然是时间广场,单个房间距离短,可高速刷图。 02、其次就是魔界裂缝,每天可以刷三次,建议每天刷。 03、最后就是地轨中心区域的时空裂缝,但是每个图会多消耗两张票。 04、最后一个就是...

    阅读: 640

  • LOLS7劫影流之主中单最新出装天赋符文加点

    LOLS7劫影流之主中单最新出装天赋符文加点

    01、劫是一位爆发型的中单英雄,经常在团战之中秒杀掉对面的主要输出然后让团战大获全胜。召唤师技能一般是闪现和点燃 02、他的Q技能是丢出一个飞镖,W技能召唤一个影分身,E技能手里剑范围伤害,R技能标...

    阅读: 695

  • 魔兽世界7.0如何快速升1-110级

    魔兽世界7.0如何快速升1-110级

    01、首先是选择种族,随后开始游戏。1到15级只能在新手村里做新手任务,只有做完新手任务才能走出新手村,开始魔兽世界的神奇冒险。 02、15级到70级又两种选择:第一种:不做主线疯狂刷地下城,升级快...

    阅读: 682

  • 吞食天地2 景帝墓迷宫图文攻略

    吞食天地2 景帝墓迷宫图文攻略

    01、景帝墓迷宫是这个游戏中最困难的迷宫,不过第一关还是比较简单,没什么难度,一直往右走即可。 02、第二关比较复杂,往前走两个路口右转,直走第二个路口左转,直走第三个路口左转,直走第二个路口左转,...

    阅读: 1150

  • 赛尔号谱尼怎么打

    赛尔号谱尼怎么打

    01、首先需要我们打开星际地图,选择太空站左翼。 02、将如图所示的这两个灯点亮为绿色,未点亮时为蓝色。 03、进入中间的通道。 04、最终到达谱尼所在的神秘领域。 05、要想得到谱尼,必须打...

    阅读: 1179

热门文章