網(wǎng)絡(luò)搜索引擎設(shè)計(jì)

   搜索引擎的建立，通常通過三個(gè)步驟，爬蟲，建立索引以及搜索結(jié)果展示。本平臺(tái)采用了BS架構(gòu)開發(fā)，利用python語言進(jìn)行開發(fā)，搭建了django框架技術(shù)設(shè)計(jì)網(wǎng)站的界面，框架。數(shù)據(jù)庫方面采用了mysql數(shù)據(jù)庫進(jìn)行數(shù)據(jù)的存儲(chǔ)和管理，為爬蟲的數(shù)據(jù)做好了數(shù)據(jù)的持久化管理。該搜索引擎界面干凈，簡單，功能如下：

用戶注冊(cè)，登錄：用戶可以在線進(jìn)行注冊(cè)，登錄，用戶注冊(cè)成為網(wǎng)站會(huì)員后，登錄網(wǎng)站就可以在線進(jìn)行數(shù)據(jù)的搜索，查詢想要的結(jié)果。
在線爬蟲：用戶注冊(cè)登錄后，可以在爬蟲的輸入框，也就是搜索輸入框中輸入關(guān)鍵詞，在爬蟲中會(huì)根據(jù)輸入的關(guān)鍵詞，進(jìn)行搜索結(jié)果的展示，包括來源，網(wǎng)頁爬蟲的數(shù)據(jù)條數(shù)，爬蟲的結(jié)果名稱，爬蟲網(wǎng)站的介紹等。
翻頁：爬蟲的結(jié)果可以以列表的形式展示，能夠按照頁進(jìn)行爬蟲結(jié)果的列表展示，一頁20條記錄，并且支持翻頁。
本設(shè)計(jì)參考了百度的搜索引擎的方式，進(jìn)行數(shù)據(jù)的搜索，模擬實(shí)現(xiàn)了一個(gè)關(guān)于搜索引擎的畢業(yè)設(shè)計(jì)，為學(xué)生提供了一個(gè)良好的參考軟件，為大數(shù)據(jù)的爬蟲學(xué)習(xí)開發(fā)了一個(gè)重要的學(xué)習(xí)平臺(tái)。