成都网站建设设计

将想法与焦点和您一起共享

Hadoop常用的命令汇总

这篇文章主要介绍“Hadoop常用的命令汇总”,在日常操作中,相信很多人在Hadoop常用的命令汇总问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”Hadoop常用的命令汇总”的疑惑有所帮助!接下来,请跟着小编一起来学习吧!

西工网站建设公司创新互联建站,西工网站设计制作,有大型网站制作公司丰富经验。已为西工上1000家提供企业网站建设服务。企业网站搭建\成都外贸网站建设公司要多少钱,请找那个售后服务好的西工做网站的公司定做!

HDFS有一个默认的工作目录/user/$USER,其中$USER是你的登陆用户名。

  1. 创建并查看目录 

    Hadoop常用的命令汇总

  2. 查看所有子目录 

    Hadoop常用的命令汇总

  3. 复制本地文件到HDFS中

    Hadoop常用的命令汇总

  4. 下载文件

    Hadoop常用的命令汇总

  5. 查看文件

    Hadoop常用的命令汇总

  6. 删除文件

    Hadoop常用的命令汇总

  7. 列出正在运行的job

    Hadoop常用的命令汇总

  8. 结束job   hadoop job -kill

  9. 检查hdfs块状态,是否损坏

    Hadoop常用的命令汇总

  10. 检查hdfs块状态,并删除坏的块hadoop fsck / -delete

  11. 检查hdfs状态 

    Hadoop常用的命令汇总

  12. 查看是否是安全模式和进入安全模式与退出安全模式

    hadoop dfsadmin –sademode get

    hadoop dfsadmin –sademode enter

    hadoop dfsadmin -sademode leve

  13. 并行copy

    hadoop distcp hdfs://a:8020/xxx hdfs://b:8020/

  14. 添加新节点

    1.在新节点安装好hadoop

    2.把namenode有关配置文件复制到该节点

    3.修改masters和slaves文件,增加该节点

    4.设置ssh免密码登录

    5.单独启动该节点上的datanode和tasktracker(hadoop-daemon.sh start datanode/tasktracker)

    6.运行start-blancer.sh进行数据负载均衡

到此,关于“Hadoop常用的命令汇总”的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注创新互联网站,小编会继续努力为大家带来更多实用的文章!


网站题目:Hadoop常用的命令汇总
当前路径:http://chengdu.cdxwcx.cn/article/jdcgeh.html