[发明专利]一种环保信息网格抓取方法

权利要求书

1.一种环保信息网格抓取方法，其特征在于，包括如下步骤：

S1，判断抓取网站是否有效，如果所述抓取网站有效，则执行S2，如果所述抓取网站无效，则返回提示无效信息；

S2，获取所述抓取网站的内容流，判断所述内容流是否为图片，如果是，则将所述内容流转化成图片，并保存；否则，执行S3；

S3，将所述内容流转化为字符串；

S4，使用正则表达式，将所述字符串进行分解，通过网格数据特征获取网格数据；

S5，对获取的网格数组数除列数取模存储，循环直至得到所有的待抓取的环保信息。

2.根据权利要求1所述的环保信息网格抓取方法，其特征在于，S5之后，还包括S6，将所述待抓取的环保信息存入关系数据库中。

3.根据权利要求1所述的环保信息网格抓取方法，其特征在于，S1中，所述判断抓取网站是否有效，具体为，根据用户输入的服务器、数据库和抓取网站地址，判断抓取网站的有效性。

4.根据权利要求1所述的环保信息网格抓取方法，其特征在于，S1中，所述判断抓取网站是否有效，采用如下的方法：通过HTTP连接的GET方法获取来自因特网的响应，判断HTTP定义的状态代码的值是否有效，如果所述HTTP定义的状态代码的值有效，则所述抓取网站有效，否则，无效。

5.根据权利要求1所述的环保信息网格抓取方法，其特征在于，S2中，所述获取所述抓取网站的内容流，具体为，使用GetResponseStream()方法，获取来自服务器的响应的HTTP内容流。

6.根据权利要求1所述的环保信息网格抓取方法，其特征在于，S3中，所述将所述内容流转化成字符串，具体为，将所述内容流初始化为“utf-8”字符编码，获取所述内容流从当前位置到结束位置的字符串。

7.根据权利要求1所述的环保信息网格抓取方法，其特征在于，S3和S4之间，还包括步骤，在内存中，创建字符串数组的网格。

8.根据权利要求1所述的环保信息网格抓取方法，其特征在于，S5中，所述对获取的网格数组数除列数取模存储，采用如下方法：

利用网格数组数除以所述网格的列数，取模值得到分解后的所述字符串在所述网格中的单元格的位置，并将所述字符串存入所述单元格中。

9.根据权利要求1所述的环保信息网格抓取方法，其特征在于，所述待抓取的环保信息为默认的或用户设定的。

10.根据权利要求1所述的环保信息网格抓取方法，其特征在于，S2中，还包括步骤，每间隔设定的时间，遍历一次所述抓取网站的数据，判断是否有增量，如果有增量，针对增量，按照S2-S5的方法进行环保信息网格抓取，如果没有增量，则结束；

和/或

判断是否中断，如果中断，则判断中断点，并续抓；如果无中断，则继续。