搭建集群时的问题总结
搭建集群的问题:
问题1:
集群规划时某些节点过于复杂,主节点占用内存过大,造成集群有些点很卡的现象。重新规划集群后避免发生了此类问题。
问题2:
开始集群的操作都处于root账户下,后来发现这样做并不安全。于是新建了hadoop账户,作为我们的作业平台。
问题3:
集群的时间同步方面遇到问题,开始并没有做时间同步,后来在执行任务的时候发现任务非正常运行,发现是时间问题。
集群规划时某些节点过于复杂,主节点占用内存过大,造成集群有些点很卡的现象。重新规划集群后避免发生了此类问题。
开始集群的操作都处于root账户下,后来发现这样做并不安全。于是新建了hadoop账户,作为我们的作业平台。
集群的时间同步方面遇到问题,开始并没有做时间同步,后来在执行任务的时候发现任务非正常运行,发现是时间问题。