08.Hadoop之HDFS的特征,缺点,高级命令和安全模式(四)重点

阅读: 评论:0

08.Hadoop之HDFS的特征,缺点,高级命令和安全模式(四)重点

08.Hadoop之HDFS的特征,缺点,高级命令和安全模式(四)重点

HDFS特性
 1、海量数据的存储:HDFS可横向扩展,其存储的文件可以支持PB级别的数据2、高容错性:节点丢失,系统依然可用,数据保存多个副本,副本丢失后自动恢复3、大文件存储:HDFS采用数据块的方式存储数据,将一个大文件切分成多个小文件,分布存储
HDFS缺点
1、不能做低延迟数据访问:HDFS针对一次性读取大量数据进行了优化,牺牲了延迟性
2、不适合大量的小文件存储:A:由于NameNode将文件系统的元数据存储在内存中,因此该文件系统所能存储的文件总数受限于NameNode的内存容量B:每个文件、目录和数据块的存储信息大约占用150字节
3、文件的修改;不适合多次写入,一次读取(少量读取)
4、不支持多个用互的并行写
HDFS高级命令

HDFS上的某一个特定的目录存储的数据副本 、数据量、文件的个数进行设置。 设置目录可以存储的文件的数量 hdfs dfsadmin -setQuota 100 lisi (文件夹本身算一个)
清空文件夹内数据良方的限制 hdfs dfsadmin -clrQuota /user/root/lisi
限制文件夹下存储的数据量 hdfs dfsadmin -setSpaceQuota 100M /user/root/lisi
清空文件夹数量的限制 hdfs dfsadmin -clrSpaceQuota /user/root/lisi
查看文件夹的限额数 hdfs dfs -count -q -h /user/root/lisi

HDFS安全模式
安全模式是HDFS所处的一种特殊状态,在这种状态下,文件系统接收数据请求,而不接受删除,修改等变更请求
HDFS什么时候进入安全模式:在NameNode主节点启动时,HDFS首先进入安全模式
在安全模式下做了什么:DataNode在启动的时候回想NameNode汇报可用的block等状态查看hdfs在什么模式  hdfs dfsadmin -safemode get进入hdfs安全模式     hdfs  dfsadmin -safemode enter退出hdfs安全模式     hdfs dfsadmin -safemode  leav

本文发布于:2024-01-31 13:57:14,感谢您对本站的认可!

本文链接:https://www.4u4v.net/it/170668063529018.html

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。

标签:缺点   特征   命令   重点   高级
留言与评论(共有 0 条评论)
   
验证码:

Copyright ©2019-2022 Comsenz Inc.Powered by ©

网站地图1 网站地图2 网站地图3 网站地图4 网站地图5 网站地图6 网站地图7 网站地图8 网站地图9 网站地图10 网站地图11 网站地图12 网站地图13 网站地图14 网站地图15 网站地图16 网站地图17 网站地图18 网站地图19 网站地图20 网站地图21 网站地图22/a> 网站地图23