[发明专利]基于数据仓库处理用户浏览行为数据的方法及系统

说明书

本发明提供一种基于数据仓库处理用户浏览行为数据的方法及系统，能够进行数据仓库的自动创建，并且利用自动创建的数据仓库，对用户浏览行为原始数据进行有效地存储和管理，为进一步应用分析提高数据基础。该方法包括：获取用户浏览行为原始数据，并加以保存；将所述用户浏览行为原始数据抽取到数据存储服务器中，得到用户浏览行为原始数据表；根据所述用户浏览行为原始数据表自动构建数据仓库从而生成基于各业务主题的业务主题汇总表；根据数据服务需求，将所述业务主题汇总表构建成应用表。

技术领域

本发明涉及计算机技术及软件领域，尤其涉及一种基于自动构建的数据仓库处理用户浏览行为数据的方法及系统。

背景技术

随着电子商务的发展，日常运营中生成的大量用户、商品、生产相关的数据，呈现爆发式增长，数据结构逐渐多元化，数据含有的信息量越来越多，因此，电子商务企业对数据化运营也越来越关注。

其中，通过搜集用户访问商品页面的浏览行为，可以更好的洞察用户的需求，发现目标用户，帮助进行营销策略的制定以及商品现货水平评估，提高电子商务企业的业务创新能力，提升业务运营水平和经营效率。例如，当用户浏览商品页面或用户点击商品可配送区域时，可以初步确定用户可能对某商品产生了购买兴趣，并了解用户下单的区域，通过记录和收集用户的浏览行为可对商品的备货起到有一定的辅助作用。因此，对电子商务中用户浏览行为进行有效的整理分析，可以为进一步研究用户需求提供数据应用基础。

现有的用户浏览行为原始数据的处理方案中，通常包括：利用网页埋点等方法进行数据搜集、数据抽取，将数据入库，继而进行数据使用。但这种数据处理方式非常不便，首先，其没有将数据抽取到数据仓库，并通过自动化构建数据模型进行数据仓库的构建，以实现数据的有效管理；此外，也没有对数据应用场景的进一步分析阐释。

发明内容

有鉴于此，本发明提供一种基于数据仓库处理用户浏览行为数据的方法及系统，能够进行数据仓库的自动创建，并且利用自动创建的数据仓库，对用户浏览行为原始数据进行有效地存储和管理，为进一步应用分析提高数据基础。

为实现上述目的，根据本发明的一个方面，提供了一种基于自动构建的数据仓库处理用户浏览行为数据的方法。

本发明的一种基于自动构建的数据仓库处理用户浏览行为数据的方法包括：获取用户浏览行为原始数据，并加以保存；将所述用户浏览行为原始数据抽取到数据存储服务器中，得到用户浏览行为原始数据表；根据所述用户浏览行为原始数据表自动构建数据仓库从而生成基于各业务主题的业务主题汇总表；根据数据服务需求，将所述业务主题汇总表构建成应用表，其中，根据所述用户浏览行为原始数据表自动构建数据仓库还包括：根据业务需求构建数据模型表结构；将所述用户浏览行为原始数据表加载数据模型表结构中，生成数据模型表；按照业务主题汇总所述数据模型表，生成业务主题汇总表，从而完成数据仓库的自动构建。

可选地，所述方法还包括：获取用户浏览行为原始数据之后，对所述用户浏览行为原始数据进行清洗，剔除干扰数据，所述干扰数据包括爬虫浏览记录、未登录用户浏览记录以及页面默认浏览记录中的一种或几种。

可选地，将用户浏览行为原始数据抽取到数据存储服务器中还包括：定期将所述用户浏览行为原始数据抽取到Hadoop服务器中，并将所述用户浏览行为原始数据分区存储。