搜索引擎的研究與實(shí)現(xiàn)(Java)(含源碼)


目錄
目錄 1
摘要 3
第一章 引言 4
第二章 搜索引擎的結(jié)構(gòu) 5
2.1系統(tǒng)概述 5
2.2搜索引擎的構(gòu)成 5
2.2.1網(wǎng)絡(luò)機(jī)器人 5
2.2.2索引與搜索 5
2.2.3 Web服務(wù)器 6
2.3搜索引擎的主要指標(biāo)及分析 6
2.4小節(jié) 6
第三章 網(wǎng)絡(luò)機(jī)器人 7
3.1什么是網(wǎng)絡(luò)機(jī)器人 7
3.2網(wǎng)絡(luò)機(jī)器人的結(jié)構(gòu)分析 7
3.2.1如何解析HTML 7
3.2.2 Spider程序結(jié)構(gòu) 8
3.2.3如何構(gòu)造Spider程序 9
3.2.4如何提高程序性能 11
3.2.5網(wǎng)絡(luò)機(jī)器人的代碼分析 12
3.3小節(jié) 14
第四章 基于LUCENE的索引與搜索 15
4.1什么是LUCENE全文檢索 15
4.2 LUCENE的原理分析 15
4.2.1全文檢索的實(shí)現(xiàn)機(jī)制 15
4.2.2 Lucene的索引效率 15
4.2.3 中文切分詞機(jī)制 17
4.3 LUCENE與SPIDER的結(jié)合 18
4.4小節(jié) 21
第五章 基于TOMCAT的WEB服務(wù)器 22
5.1什么是基于TOMCAT的WEB服務(wù)器 22
5.2用戶接口設(shè)計(jì) 22
5.3.1客戶端設(shè)計(jì) 22
5.3.2服務(wù)端設(shè)計(jì) 23
5.3在TOMCAT上部署項(xiàng)目 25
5.4小節(jié) 25
第六章 搜索引擎策略 26
6.1簡介 26
6.2面向主題的搜索策略 26
6.2.1導(dǎo)向詞 26
6.2.3權(quán)威網(wǎng)頁和中心網(wǎng)頁 27
6.3小節(jié) 27
參考文獻(xiàn) 28

摘要
網(wǎng)絡(luò)中的資源非常豐富，但是如何有效的搜索信息卻是一件困難的事情。建立搜索引擎就是解決這個(gè)問題的最好方法。本文首先詳細(xì)介紹了基于英特網(wǎng)的搜索引擎的系統(tǒng)結(jié)構(gòu)，然后從網(wǎng)絡(luò)機(jī)器人、索引引擎、Web服務(wù)器三個(gè)方面進(jìn)行詳細(xì)的說明。為了更加深刻的理解這種技術(shù)，本人還親自實(shí)現(xiàn)了一個(gè)自己的搜索引擎——新聞搜索引擎。
新聞搜索引擎是從指定的Web頁面中按照超連接進(jìn)行解析、搜索，并把搜索到的每條新聞進(jìn)行索引后加入數(shù)據(jù)庫。然后通過Web服務(wù)器接受客戶端請求后從索引數(shù)據(jù)庫中搜索出所匹配的新聞。
本人在介紹搜索引擎的章節(jié)中除了詳細(xì)的闡述技術(shù)核心外還結(jié)合了新聞搜索引擎的實(shí)現(xiàn)代碼來說明，圖文并茂、易于理解。

Abstract
The resources in the internet are abundant, but it is a difficult job to search some useful information. So a search engine is the best method to solve this problem. This article fist introduces the system structure of search engine based on the internet in detail, then gives a minute explanation form Spider search, engine and web server. In order to understand the technology more deeply, I have programmed a news search engine by myself.
The news search engine is explained and searched according to hyperlink from a appointed web page, then indexs every searched information and adds it to the index database. Then after receiving the customers' requests from the web server, it soon searchs the right news form the index engine,
In the chapter of introducing search engine, it is not only elaborate the core technology, but also combine with the modern code,pictures included, easy to understand.