fsimage 和 editlogs 是做什么用的

fsimage 和 editlogs 是做什么用的,第1张

fsimage 和 editlogs 是做什么用的

fsimage文件存储的是Hadoop的元数据文件, 如果namenode发生故障, 最近的fsimage文件会被载入到内存中, 用来重构元数据的最近状态, 再从相关点开始向前执行edit logs文件中记录的每个事务.
文件系统客户端执行写 *** 作时, 这些事务会首先记录到日志文件中.
在namenode运行期间, 客户端对hdfs的写 *** 作都保存到edit文件中, 久而久之就会造成edit文件变得很大, 这对namenode的运行没有影响, 但是如果namenode重启, 它会将fsimage中的内容映射到内存中, 然后再一条一条执行edit文件中的 *** 作, 所以日志文件太大会导致重启速度很慢. 所以在namenode运行的时候就要将edit logs和fsimage定期合并.

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/5656157.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-12-16
下一篇 2022-12-16

发表评论

登录后才能评论

评论列表(0条)

保存