[发明专利]基于云计算的受众行为分析广告定向系统

权利要求书

1.一种基于云计算的受众行为分析广告定向ABT系统，其特征在于，该系统主要包括用户轨迹存储模块、用户行为分析模块、复合搜索模块、网页内文分析模块、实时定向模块、集群调度及管理模块；其中：

用户轨迹存储模块，在广告投放过程中，用于针对用户浏览记录进行用户访问轨迹信息的收集和存储，所述用户访问轨迹信息是所述ABT系统中进行用户行为分析的主要数据来源；

用户行为分析模块，采用Map/Reduce计算模型，用以保证大数据量下计算的系统性能，其用户行为分析的数据来源主要包括受众自然浏览行为、受众自然搜索行为、广告交互行为、电子商务交互行为；

复合搜索模块，用于提供统一资源定位符URL即页面地址到页面重点关键词的转换，还用于为BT定向的用户行为提供分析服务，同时提供用户即时兴趣匹配的页面分词功能；

网页内文分析模块，作为所述ABT系统中的搜索引擎，用于确保网页正文的高权重关键词广告投放；

实时定向模块，用于对所述ABT系统的投放模块提供针对单个用户信息的检索服务；

集群调度及管理模块，用于对各个子节点的节点服务器列表进行登记维护；对各个服务器中的HDFS、Map/Reduce、Hbase的web状态进行查询转发；用于完成任务流程中各项任务启动的通知，任务完成的标记，任务失败的状态查询；还用于对失败的任务进行重新调度、重新分配；以及提供整体任务完成情况和全局数值分析的简单报表服务。

2.根据权利要求1所述的基于云计算的受众行为分析广告定向系统，其特征在于，所述用户轨迹存储模块，包括若干数据传输子模块、线程控制子模块、转储调度子模块、DFS中间件及HDFS系统；其中，

数据传输子模块，用于在Map/Reduce计算过程中对数据的输入、输出及数据的冗余备份；

线程控制子模块，用于对分布式计算的各个任务的线程起到调配的作用；

转储调度子模块，用于对数据存储的同步、异步以及迁移构造合理的方案；

DFS中间件及HDFS系统，用于分布式的数据库访问的事务处理。

3.根据权利要求1或2所述的基于云计算的受众行为分析广告定向系统，其特征在于，所述的HDFS系统进一步包括命名节点NameNode、数据节点DataNode和客户端Client；其中，

所述NameNode是分布式文件系统中的管理者，主要负责管理文件系统的命名空间、集群配置信息和存储块的复制；所述NameNode将文件系统的Meta-data存储在内存中，这些信息主要包括了文件信息、每一个文件对应的文件块的信息和每一个文件块在DataNode的信息；

所述DataNode是文件存储的基本单元，它将Block存储在本地文件系统中，保存了Block的Meta-data，同时周期性地将所有存在的Block信息发送给NameNode；以及，

所述Client是需要获取分布式文件系统文件的应用程序或功能模块。

4.根据权利要求1所述的基于云计算的受众行为分析广告定向系统，其特征在于，所述用户行为分析模块，采用Map/Reduce计算模型，用以保证大数据量下的计算性能的要求，所述用户行为分析的数据来源主要有几下几个方面：受众自然浏览行为，记录用户的自然访问页面轨迹；受众自然搜索行为，记录用户通过搜索引擎跳转到页面的搜索关键词；广告交互行为，记录用户对广告的点击记录；电子商务交互行为，记录用户在电商企业的购买行为。

5.根据权利要求1所述的基于云计算的受众行为分析广告定向系统，其特征在于，所述网页内文分析模块，利用实时抓取程序将用户的浏览页面实时抓取回来并存入分布式数据库中作为页面源代码，然后正文提取模块及时的读取页面源代码从复杂的网页结构中利用智能算法抽取出网页的正文，接着读入基础词库进行正文的分词，从而得到用户浏览的页面关键词。

6.根据权利要求1所述的基于云计算的受众行为分析广告定向系统，其特征在于，所述集群调度及管理模块，其管理端的调度的通信机制采用SSH通讯；进一步地，若该模块的可靠性存在问题，备用方案则采用单机corntab调度。