[发明专利]一种云计算中自动监测进程内存使用情况的方法

说明书

技术领域

本发明涉及一种监测进程内存使用情况的方法，属于云计算中集群性能调优及监视领域，具体地是一种云计算中自动监测进程内存使用情况的方法。

背景技术

Hadoop 是一个能够对大量数据进行分布式处理的软件框架。Hadoop 是可靠的，因为它假设计算元素和存储会失败，因此它维护多个工作数据副本，确保能够针对失败的节点重新分布处理。Hadoop 是高效的，因为它以并行的方式工作，通过并行处理加快处理速度。其中分布式hadoop集群是云计算的关键技术，它充分利用了云计算带来的便利，也给云计算注入无尽的活力。集群的守护进程以及运行的应用进程，通常关系紧密，并且处理数据量庞大，会耗费大量内存，实时监测掌握内存的变化情况，并据此将内存调整到最优比例，最大程度发挥系统性能，提高应用程序的吞吐率，避免内存溢出错误，成为需要解决的至关重要的问题，本发明提供的一种云计算中自动监测进程内存使用情况的方法，该方法自动定时记录所有jvm进程内存的使用情况，并保存到不同的日志中，并根据配置文件中设定的阈值进行实时报警，用于hadoop集群中各java进程的内存监测，为分布式任务的内存调优、及时发现内存潜在威胁提供依据，达到最优化内存使用，提高集群系统性能的目的。

发明内容

本发明针对现有技术存在的不足和问题，提供一种云计算中自动监测进程内存使用情况的方法，提出的具体方案是：

一种云计算中自动监测进程内存使用情况的方法，利用定时执行脚本jvmstat.sh来实现，具体步骤为：

①将jvmstat.sh脚本和配置文件复制，并发送到Hadoop集群的每个节点，将jvmstat.sh添加至crontab，启动crond service；

②jvmstat.sh脚本获取所有java进程内存使用情况，并对进程各区阈值超出警戒设定阈值的情况进行实时报警；

所述的步骤②中jvmstat.sh脚本获取服务器正在运行的jvm进程名，使用jstat 命令获取内存使用情况并写入日志。

所述的步骤②中进程各区阈值包括survivor区、Eden区、Old区、Perm区的内存使用阈值，以及Yong GC和Full GC产生频率的阈值以及利用时间的阈值。

所述的步骤②中使用配置文件jvmstat.conf保存进程各区阈值的警戒设定阈值。

本发明的有益之处是：本发明提供的一种云计算中自动监测进程内存使用情况的方法，该方法自动定时记录所有jvm进程内存的使用情况，并保存到不同的日志中，并根据配置文件中设定的阈值进行实时报警，用于hadoop集群中各java进程的内存监测，为分布式任务的内存调优、及时发现内存潜在威胁提供依据，提高集群系统性能的目的。

附图说明

图1 执行jvmstat.sh脚本的流程示意图。

具体实施方式

结合实例，对本发明进行具体描述。

（1）jvmstat.sh脚本伪代码如下：

读取所有jvm进程编号和名称存入output

do

        proname=从output中取出当前进程名

        prono=从output中取出当前进程号

        filename=proc_$proname_$i.log

将当前时间写入日志

jstat –gc $prono >> $ filename //内存使用情况写入日志

jstat –gcutil $pron >> $ filename

for((i=$1;i<$8;i++))

do

  从配置文件jvmstat.conf中读出相应阈值

读取日志文件获得内存参数相应值

  if（内存参数值>(or<)阈值）

     发送告警邮件给运维人员

  fi 

done

done

（2）poll.cron

*/1 * * * * /usr/hadoop/script/poll.sh

实施例1

一种云计算中自动监测进程内存使用情况的方法，利用定时执行脚本jvmstat.sh来实现，具体步骤为：