HADOOP监控

  1. Hadoop负载均衡

    在凤城等地区,都构建了全面的区域性战略布局,加强发展的系统性、市场前瞻性、产品创新能力,以专注、极致的服务理念,为客户提供网站设计制作、成都做网站 网站设计制作按需网站建设,公司网站建设,企业网站建设,成都品牌网站建设,全网营销推广,成都外贸网站建设,凤城网站建设费用合理。

    均衡器(balancer)是一个Hadoop守护进程,它将块从忙碌的datanode移到相对空闲的datanode,从而重新分配块。同时坚持块副本放置策略,将副本分散到不同机架,以降低数据损坏率。它不断移动块,直到集群达到均衡,即每个datanode的使用率(该节点上已使用的空间与空间容量之间的比率)和集群的使用率(集群中已使用的空间与集群的空间容量之间的比率)非常接近,差距不超过给定的阈值。

    为降低集群负荷,避免干扰其他用户,均衡器被设计为后台运行。在不同节点之间复制数据的带宽也是受限的。默认值是很小的1MB/s,可以通过hdfs-site.xml文件中的dfs.balance.bandwidthPersec属性重新设定(单位是字节)

  2. Hadoop日志设置

    可通过http://192.168.9.110:50070/logLevel查看和设置日志级别,截图如下:

    HADOOP监控

3.Hadoop堆栈跟踪

  可通过http://192.168.9.110:50070/stacks查看堆栈信息,截图如下:

  

HADOOP监控


新闻名称:HADOOP监控
文章URL:http://csruizhi.cn/article/iggcdd.html

其他资讯

Copyright © 2007-2024 成都优众联杰科技有限公司 All Rights Reserved 蜀ICP备2024116266号
友情链接: 成都网站设计制作公司 手机网站制作 重庆企业网站建设 成都网站建设 重庆网站建设 成都网站制作 广安网站设计 成都网站设计 网站建设推广 成都企业网站设计 成都网站制作 盐亭网站设计 手机网站制作 重庆手机网站建设 成都网站设计公司 成都品牌网站建设 成都企业网站建设 重庆网站建设 达州网站设计 上市集团网站建设 移动网站建设 品牌网站建设