hadoop重新格式化HDFS步骤解析

 更新时间:2017年10月17日 11:23:33   作者:liuyazhuang  
这篇文章主要介绍了hadoop重新格式化HDFS步骤解析,由于此方法需要将HDFS中数据全部清除,用者需注意。
(福利推荐:【腾讯云】服务器最新限时优惠活动,云服务器1核2G仅99元/年、2核4G仅768元/3年,立即抢购>>>:9i0i.cn/qcloud

(福利推荐:你还在原价购买阿里云服务器?现在阿里云0.8折限时抢购活动来啦!4核8G企业云服务器仅2998元/3年,立即抢购>>>:9i0i.cn/aliyun

了解Hadoop的同学都知道,Hadoop有两个核心的组成部分,一个是HDFS,另一个则是MapReduce,HDFS作为Hadoop的数据存储方案,MapReduce则提供计算服务;同时,HDFS作为一种分布式文件系统,它的安装也是需要相应的格式化操作的,如果安装失败或者我们需要重新安装的时候,那我们就需要对HDFS重新进行格式化,这篇文章就和大家一起讨论下如何进行HDFS的重新格式化。

重新格式化hdfs系统的方法:

1、打开hdfs-site.xml

我们打开Hadoop的hdfs-site.xml,基本配置如下所示:

<property> 
  <name>dfs.name.dir</name> 
  <value>/usr/local/hadoop/hdfs/name</value> 
</property> 
<property> 
  <name>dfs.data.dir</name> 
  <value>/usr/local/hadoop/hdsf/data</value> 
</property> 

将 dfs.name.dir所指定的目录删除、dfs.data.dir所指定的目录删除,及我们需要删除hdfs-site.xml中配置的存储信息路径。

2、删除core-site.xml配置文件指定的相关目录

<property> 
  <name>hadoop.tmp.dir</name> 
  <value>/usr/local/hadoop/hadooptmp</value> 
</property> 

 将hadoop.tmp.dir所指定的目录删除,即删除Hadoop的临时文件路径。

3、重新执行命令:hadoop namenode -format

格式化完毕。

这种格式化HDFS的方式是需要把原来HDFS中的数据全部清空,然后再格式化并安装一个全新的HDFS。

注:这种格式化方式需要将HDFS中的数据全部清空,以后我们探讨不需删除数据即可重新格式化的方法。

总结

以上就是本文关于hadoop重新格式化HDFS步骤解析的全部内容,希望对大家有所帮助。感兴趣的朋友可以继续参阅:浅谈七种常见的Hadoop和Spark项目案例等以及本站其他相关专题,如有不足之处,欢迎留言指出。感谢朋友们对本站的支持!

相关文章

  • 阿里云快速搭建一个静态网站的方法步骤

    阿里云快速搭建一个静态网站的方法步骤

    这篇文章主要介绍了阿里云快速搭建一个静态网站的方法步骤,小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧
    2019-02-02
  • CyberPanel配置教程,新手安装?CyberPanel?终极指南

    CyberPanel配置教程,新手安装?CyberPanel?终极指南

    CyberPanel?是第一个LiteSpeed为web服务器的Linux面板,使用LiteSpeed?Cache简单优化之后?Gtmetrix?和?Google?PageSpeed?Insights?的评分几乎都是A,这个结果让人十分满意
    2023-12-12
  • Valheim服务器?Mod修改安装教程?【ValheimPlus】

    Valheim服务器?Mod修改安装教程?【ValheimPlus】

    这篇文章主要介绍了Valheim服务器?Mod修改安装?【ValheimPlus】,本教程只提供Windows版本服务器的mod安装过程,Linux的安装教程过程是一样的本人懒得写了,此mod采用c配置,需要的朋友可以参考下
    2022-12-12
  • 设置好的iis服务器怎么打开网页(图文详解)

    设置好的iis服务器怎么打开网页(图文详解)

    让自己电脑上的网页在局域网中可以访问到,就需要我们使用IIS服务器,将网页添加到服务器上的网站,那么设置好IIS服务器之后怎样在浏览器中进行访问呢,下面跟随程序员之家小编一起学习吧
    2016-11-11
  • 详解linux命令查看服务器上的实时日志

    详解linux命令查看服务器上的实时日志

    在项目开发过程中,在调试的阶段,往往需要debug或者进行查看日志,这篇文章主要介绍了linux命令如何查看服务器上的实时日志,需要的朋友可以参考下
    2022-09-09
  • Nexus使用Api进行操作

    Nexus使用Api进行操作

    今天小编就为大家分享一篇关于Nexus使用Api进行操作,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧
    2018-12-12
  • centos6.7安装mysql5.5.48的方法

    centos6.7安装mysql5.5.48的方法

    这篇文章主要介绍了centos6.7安装mysql5.5.48的方法,较为详细的分析了centos6.7下安装mysql的实现方法及易错问题与注意事项,需要的朋友可以参考下
    2016-05-05
  • 伪静态URL中文乱码问题解决方法

    伪静态URL中文乱码问题解决方法

    ISAPI_Rewrite伪静态中文URL乱码的解决方案 细心有朋友会发现,在众多知名程序,比如ShopEx网店、Discuz论坛等系统的伪静态规则都存在中文编码问题
    2014-07-07
  • Rsync实现文件定时同步技巧

    Rsync实现文件定时同步技巧

    这篇文章主要介绍了Rsync实现文件定时同步技巧的相关资料,需要的朋友可以参考下
    2015-09-09
  • 服务发现与负载均衡机制Service实例创建

    服务发现与负载均衡机制Service实例创建

    这篇文章主要为大家介绍了服务发现与负载均衡机制Service实例创建有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪
    2022-03-03

最新评论

?


http://www.vxiaotou.com