当不修改HADOOP/HBASE/SPARK的PID文件位置时,系统默认会把PID文件生成到/tmp目录下,但是/tmp目录在一段时间后会被删除,所以以后当我们停止HADOOP/HBASE/SPARK时,会发现无法停止相应的进程,因为PID文件已经被删除,所以现在我们需要修改HADOOP/HBASE/SPARK的PID文件地址.修改方法如下:
创新互联主打移动网站、网站建设、网站制作、网站改版、网络推广、网站维护、国际域名空间、等互联网信息服务,为各行业提供服务。在技术实力的保障下,我们为客户承诺稳定,放心的服务,根据网站的内容与功能再决定采用什么样的设计。最后,要实现符合网站需求的内容、功能与设计,我们还会规划稳定安全的技术方案做保障。我们需要把HADOOP/HBASE/SPARK的PID文件生成到/var/hadoop/pids目录中.
在集群的各节点上新建/var/hadoop/pids目录 命令 : sudo mkdir -p /var/hadoop/pids
需要修改各节点上/var/hadoop/pids目录的权限,我使用的是hadoop用户启动HADOOP/HBASE/SPARK集群,所以需要把/var/hadoop/pids的目录权限修改为hadoop,否则在启动HADOOP/HBASE/SPARK集群时无法写入到该目录中. 修改权限命令 : chown -R hadoop:hadoop /var/hadoop
修改hadoop-env.sh 增加:export HADOOP_PID_DIR=/var/hadoop/pids
修改yarn-env.sh 增加:export YARN_PID_DIR=/var/hadoop/pids
修改hbase-env.sh ,增加:export HBASE_PID_DIR=/var/hadoop/pids
修改spark-env.sh, 增加 : export SPARK_PID_DIR=/var/hadoop/pids
把配置文件发送到集群中的各个节点上,重新启动集群, 查看/var/hadoop/pids目录会发现PID文件在该目录生成
另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。