实施Cloudera Manager小结

一、Cloudera Manager磁盘不够解决方案

背景

  默认服务器最多给根目录50G,剩余大多数都给了/home目录,而大数据组件采用默认安装模式,数据存储都占用了根目录的磁盘空间,发现随着数据不断增加,如kudu数据,导致磁盘空间不足,cloudera Manager平台上各组件不能正常工作。

解决方案:

  • 在Cloudera Manager 平台上停止相应组件,进入组件配置,本次举例kudu组件,进入kudu配置,修改kudu数据存储的地方,设置在home目录下,一共由四个地方。

  • 在服务器上把之前的kudu目录及子目录和数据,复制到home目录下。

  • Cloudera Manager平台上重启组件,同时测试数据是否已在home目录下。

  • 测试正常后,删除根目录下kudu目录及数据。

扩散思考:

  实际此种场景可以避免。

  避免方案一:在安装完Linux服务器后,调整Linux下调整根目录和home目录的空间大小教程:https://blog.csdn.net/qq_37612755/article/details/103809782

  避免方案二:在Cloudera Manager平台下进行组件安装时,目录配置不要采用默认,指定在home目录下。

 

上一篇:为在线数据库构建基于 Kudu 的实时数据同步


下一篇:kudu性能优化