[发明专利]一种开放式的旅游多源异构数据融合方法及系统

权利要求书

1.一种开放式的旅游多源异构数据融合系统，其特征在于，系统包括：

多源数据采集接口，所述多源数据采集接口为基于可信WebService开发的服务型应用接口，该服务型应用接口采用WSDL标准写出描述文件，服务型应用接口以WSDL标准写出的描述文件能够在可信服务注册中心注册或直接提供给服务调用方，从而实现与多行业、多部门和多系统的多源非结构化的异构数据进行连接；

数据采集及传输中间件，数据采集中间件根据设定采集时间间隔或侦测数据源有数据更新时，进行数据采集，并及时将采集到的实时数据发给传输中间件，由传输中件间负责数据的传输；数据传输中间件接收采集中间件发送的数据后即刻将数据发送给数据中心，传输完成后进行数据校验；

数据清洗与分类单元，所述数据清洗和分类单元从不同的数据源采集数据，并对采集数据进行清洗和分类，把不同类型的数据转变为统一标准的数据；

数据存储单元，所述数据存储单元把采集的数据，做成缓存，运行在服务器的内存中，在服务器运行相对空闲或占用内存量过大时，把数据存入数据库中，以确保数据的高速存储与持久化存储的协同运转；

数据互通与共享单元，所述数据互通与共享单元建立规范的数据API接口，用于调用数据的授权涉旅单位调取数据；建立数据的交换协议标准，使相关涉旅部门进行数据交换，互通相关数据信息；建立数据共享管理标准及流程，实现旅游主管部门内部各处信息数据与数据中心数据的互通共享。

2.根据权利要求1所述的一种开放式的旅游多源异构数据融合系统，其特征在于，所述多源数据采集接口包括业务类接口、数据类接口和安全类接口，业务类接口用于提供业务接入能力，整合不同子系统间的业务流；数据类接口用于提供数据交换以及数据整合能力；安全类接口用于提供管理员的安全访问和隔离的能力。

3.根据权利要求1所述的一种开放式的旅游多源异构数据融合系统，其特征在于，所述数据清洗与分类单元具体包括:

通过格式校验工具对采集抽取来的xml数据文件进行自动校验，校验工具将自动产生校验结果并以日志形式记录在数据库中，并输出到web后台提交给管理员查阅，用以控制采集数据质量，对于含有敏感词的数据，单独用文本文件记录其提供方、数据内容和时间，以便后期处理；

对通过校验的数据进行转换处理，则根据数据的不同类型选用通过字段转换、业务转换、分级转换或者是编目转换中的任意一种进行；

对于采集的数据在进行自动校验及转换后仍然无法入库的数据，由系统自动进行隔离，另表存放，由人工进行数据审核。

4.一种开放式的旅游多源异构数据融合方法，其特征在于，包括如下步骤：

A）对接外部数据源；

B）把对接并采集的数据按照编目规则和分级策略进行数据转换；

C)把清洗、整理、规范后的数据由前置数据服务器统一存储备份至系统数据中心；

D)通过多渠道信息共享接口，实现同游客、涉旅企业、管理部门以及其他涉旅行业间的数据交换与共享。