搜索引擎语义排序的研究与实现

admin · 发表于 2016-5-8 08:45:23

技术：Java、JSP等
摘要：
为了适应网络信息的飞速增长，并且能够迅速、方便地从网络中获取有效信息, 搜索引擎逐渐走进了人们的生活，“飞梦”搜索引擎系统在这样的条件下，应运而生。本文首先系统的介绍了搜索引擎的概念、发展历史、和搜索引擎的分类。使读者能够初步了解搜索引擎技术。然后，详细介绍了“飞梦”搜索引擎系统。
“飞梦”搜索引擎是基于Web的搜索引擎。系统的前端以MVC模式来实现，Struts作为视图层，Spring做中间层，Hibernate作后端来开发实现的。本系统分为四个子模块，抓取模块实现的功能为：将web上的海量网页抓取到系统中，采用的实现方法是使用Heritrix来完成对网页的抓取。处理模块实现的功能为：解析网页，提取其中的有用内容，为网页建立词库，对解析网页生成的信息文件进行分词，并建立索引，将索引存入数据库中，采用的实现方法是：通过Lucene的API来实现对网页内容的建索，使用HTMLParser的API实现了对网页内容的解析。语义排序模块实现的主要功能是：对数据库中索引进行排序，通过核心排序算法实现语义排序，存于缓存中供用户查询。用户模块实现的主要功能是：用户模块是系统的用户接口，用户通过此模块完成与系统的交互，当用户在查询界面上输入要检索的信息后，系统将在可以接受的时间内，返回用户所需的结果集；采用DWR（Direct Web Remoting）封装了AJAX技术，处理用户请求;
关键词：搜索引擎，Lucene，Heritrix，语义排序

目录：
1 引言 1
2 课题背景 2
2.1搜索引擎的概念 2
2.2搜索引擎的发展历史 3
2.2.1搜索引擎的起源 3
2.2.2第一代搜索引擎 3
2.2.3第二代搜索引擎 3
2.2.4当前著名的搜索引擎简介 4
2.3搜索引擎的分类 5
2.3.1全文索引 5
2.3.2目录索引 5
2.3.3元搜索引擎 6
2.3.4垂直搜索引擎 6
2.3.5其他非主流搜索引擎形式 6
3 系统需求分析 7
3.1搜索引擎的工作原理 7
3.2系统功能需求 7
3.3系统性能需求 8
4 系统总体设计 9
4.1“飞梦”搜索引擎系统总体介绍 9
4.1.1 “飞梦”搜索引擎系统工作机制 9
4.1.2 几种常见的语义WEB排序技术 9
4.1.3 语义本体概念 10
4.1.4 语义搜索 10
4.1.5 基于本体的语义排序 11
4.2系统逻辑设计 13
4.2.1系统时序图 13
4.2.2系统流程图 14
4.2.3系统数据流程图 15
4.3系统模块介绍 16
4.3.1 模块功能介绍 16
5 系统详细设计 21
5.1模块总体介绍 21
5.2抓取子模块 22
5.2.1运行Heritrix子模块 22
5.2.2分析网页子模块 27
5.3信息检索子模块 30
5.3.1解析网页子模块 30
5.3.2创建词库子模块 31
5.3.3生成持久化类子模块 31
5.3.4创建Document子模块 32
5.3.5存储数据子模块 33
5.4语义排序模块 33
5.4.1概念定义 33
5.4.2算法实现原理 34
5.4.3 语义排序部分代码 35
5.5用户子模块 38
5.5.1搜索页面 38
5.5.2详细信息页面 38
5.5.3后台信息管理 39
6 结论 40
参考文献 41
致谢 43

包含资料：

捕获.JPG (56 KB, 下载次数: 0)

2016-5-8 08:44 上传

截图：

搜索界面.jpg (34.47 KB, 下载次数: 0)

2016-5-8 08:44 上传

新闻信息管理页面.jpg (103.44 KB, 下载次数: 0)

2016-5-8 08:44 上传

系统流程图.jpg (33.14 KB, 下载次数: 0)

2016-5-8 08:44 上传

数据流程图.jpg (42.26 KB, 下载次数: 0)

2016-5-8 08:44 上传

百度网盘下载地址（金币充值）：
游客,本付费内容需要支付 100金币 才能浏览支付

搜索引擎语义排序的研究与实现

相关帖子