您所在的位置:主页 > 培训生感言 >

hadoop基本用法回顾

时间:2019-03-04 17:37来源:未知 作者:os 点击:

        研一时,跟着老师写完了一个大数据项目,现在不怎么写了,发现很多东西都忘了,还要从网上找资料,从今天起,开始多写博客,每天更新一篇作为记录
        今天复习hadoop的基本用法:【配置ubuntu启动环境说明,本人的hadoop ubuntu虚拟机已经配置好了】(hdfs-site.xml,core-site.xml,mapred-site.xml已经配置好了,本次是设置ubuntu快捷启动和eclipse远程连接这两个操作)
①添置ubuntu启动hadoop环境变量:查看首先env一下,看一看当前的环境变量,然后找到etc/profile文件,加入如下:
 
注意,加完环境变量后,不想重启的话,source一下
②启动hadoop的file system,yarn等如下:
 
hadoop eclipse访问问题1,加入hadoop插件后(这里需要注意,eclipse添加插件的时候,需要下载一个包【hadoop-common-2.6.0-bin】,不然连接会报错),加入包(hadoop-common-2.6.0-bin)后,没有反应,查了其他人的博客,选择删除掉eclipse下的update文件夹,重启,果然好了