【大數(shù)據(jù)時代人工智能在網(wǎng)絡(luò)信息檢索中的應(yīng)用探究（論文）6000字】

大數(shù)據(jù)時代人工智能在網(wǎng)絡(luò)信息檢索中的應(yīng)用研究目錄TOC\o"1-2"\h\u16270正文摘要 111279引言 26928一、網(wǎng)絡(luò)信息檢索概述 26454（一）網(wǎng)絡(luò)信息檢索的定義 217209（二）網(wǎng)絡(luò)信息檢索系統(tǒng)的發(fā)展 21534二、人工智能概述 412468三、網(wǎng)絡(luò)信息檢索的工具 430517（一）FTP類 412470（二）基于關(guān)鍵詞的分類 531315（三）基于菜單式的分類 59103四、大數(shù)據(jù)時代人工智能在網(wǎng)絡(luò)信息檢索中的應(yīng)用 572531.網(wǎng)絡(luò)智能知識服務(wù)系統(tǒng) 51322.智能代理技術(shù) 693803.人工智能搜索代理技術(shù) 720911五、結(jié)語 77163參考文獻 7正文摘要自從上世紀以來伴隨著當(dāng)前經(jīng)濟全球化、科學(xué)技術(shù)以及社會信息化的的迅猛發(fā)展，在各個領(lǐng)域內(nèi)部網(wǎng)絡(luò)的普及與應(yīng)用是人們有目共睹的，網(wǎng)絡(luò)的出現(xiàn)與發(fā)展為人們提供了很大的便利很大程度上改善了人們的生活以及思維方式。但是正是由于網(wǎng)絡(luò)的迅猛發(fā)展，信息量就變得十分龐大，人們在檢索信息的時候會遇到很大的阻力與困難。在網(wǎng)絡(luò)飛速發(fā)展的當(dāng)下、大數(shù)據(jù)時代背景下人工智能的應(yīng)用，就使得網(wǎng)絡(luò)信息檢索更加的方便快捷緩解了人們網(wǎng)絡(luò)信息檢索遇到的問題。由此本文闡述什么是網(wǎng)絡(luò)信息檢索，并探討網(wǎng)絡(luò)檢索工具的類型加以分析使用人工智能在網(wǎng)絡(luò)信息檢索中的用途及效率。關(guān)鍵詞：大數(shù)據(jù)；網(wǎng)絡(luò)信息檢索；人工智能引言當(dāng)下我們已經(jīng)步入了信息化時代，任何人都可以使用網(wǎng)絡(luò)輕易的搜索到自己需要的信息，使得人們獲取信息的代價大大降低。相比于紙質(zhì)版的傳統(tǒng)檢索方式，網(wǎng)絡(luò)信息檢索有很大的優(yōu)勢，但它也有著或多或少的缺陷與不足，例如搜索引擎的不完善會導(dǎo)致在檢索信息時出現(xiàn)信息無效的情況，并且會因為數(shù)據(jù)的急劇膨脹導(dǎo)致檢索效率下降，難以準確辨別數(shù)據(jù)。而人工智能就能有效的應(yīng)對這樣的情況，能夠快速自動的將數(shù)據(jù)分類從而提高在海量數(shù)據(jù)中檢索的效率，并且數(shù)據(jù)的準確性也可以得到極大的保證，從而促進網(wǎng)絡(luò)信息檢索的快速發(fā)展。一、網(wǎng)絡(luò)信息檢索概述（一）網(wǎng)絡(luò)信息檢索的定義網(wǎng)絡(luò)信息檢索即是利用互聯(lián)網(wǎng)中的各種搜索引擎對信息的查找，用戶可以借助移動客戶端或者終端通過關(guān)鍵字來獲取自身所需的數(shù)據(jù)信息。這是因為在互聯(lián)網(wǎng)服務(wù)其中儲存著大量的信息內(nèi)容，用戶通過終端設(shè)備和網(wǎng)絡(luò)接口軟件來對分散的信息進行查詢和應(yīng)用。而信息檢索的原理則是對已有的信息根據(jù)一定的方式管理組織起來，在尋找信息的過程中，用戶借助檢索工具從信息集合中將有效信息進行提取，從而獲取所需信息內(nèi)容。實際上信息檢索也是一種信息過濾技術(shù)，在信息集合中按照用戶輸入的數(shù)據(jù)進行過濾和查詢，最終通過篩選提供給用戶。（二）網(wǎng)絡(luò)信息檢索系統(tǒng)的發(fā)展二十世紀九十年代以來，隨著互聯(lián)網(wǎng)的快速普及使得網(wǎng)上的信息資源在不斷的急劇增加，為了應(yīng)對此情況，人們就開發(fā)了各種類型的數(shù)據(jù)庫用來存儲這些數(shù)據(jù)。應(yīng)為數(shù)據(jù)的不斷膨脹，也間接促進了信息檢索的技術(shù)的不斷發(fā)展，同時使得信息檢索系統(tǒng)在各方面也不斷的完善技術(shù)上也有了很大的改進和發(fā)展。在信息檢索系統(tǒng)的發(fā)展歷史上可以被劃分為三個較大的階段。1.布爾邏輯檢索和分類檢索為主的信息檢索系統(tǒng)布爾邏輯檢索和分類檢索是出現(xiàn)的最早的功能完善的一代的信息檢索系統(tǒng)。它主要根據(jù)mu數(shù)據(jù)文獻的類型及作者、摘要等信息作為信息搜索的判斷條件，并且每個相關(guān)的檢索條件之間是有布爾的邏輯運算來對數(shù)據(jù)進行匹配從而得出想要的結(jié)果。在信息檢索的時候會對數(shù)據(jù)庫的數(shù)據(jù)進行一次引用標記的階段，主要是標記一些關(guān)鍵詞匹配的信息，再通過一些指定的方法來構(gòu)建一個有序的二次文獻的數(shù)據(jù)庫，這部分數(shù)據(jù)將會保存在內(nèi)存中，并運用一些相關(guān)的算法將檢索出來的數(shù)據(jù)組成一個信息檢索系統(tǒng)。用戶再輸入相關(guān)的檢索詞進行檢索信息時，信息檢索系統(tǒng)就會通過用戶提供的關(guān)鍵詞來對數(shù)據(jù)進行過濾，并與數(shù)據(jù)庫中文獻記錄的標記標識來進行匹配，最后篩選出數(shù)據(jù)庫中與用戶輸入檢索詞匹配的的數(shù)據(jù)集。除此之外數(shù)據(jù)庫還可以按不同的行業(yè)、時間等方面進行分類，并將分類的條目作為信息檢索是的索引從而提高檢索效率2.使用加權(quán)檢索和追蹤檢索技術(shù)改進的信息檢索系統(tǒng)這個套檢索系統(tǒng)是融合了布爾邏輯檢索及分類檢索兩套檢索系統(tǒng)的優(yōu)點，[3]同時在它們的基礎(chǔ)之上有增加了一套加權(quán)檢索技術(shù)和追溯法追蹤檢索技術(shù)的信息檢索系統(tǒng)。在檢索是不同類型的數(shù)據(jù)可能代表的含義是不一樣的，但是有可能包含過濾條件，所以檢索的時候就被查詢出來。為了體現(xiàn)對不同類型的數(shù)據(jù)的權(quán)重，通常在查詢數(shù)據(jù)的時候加上一個權(quán)值，判斷完數(shù)據(jù)是否存在后，通過添加的權(quán)值計算出數(shù)據(jù)的權(quán)重。再根據(jù)得到的這個這個權(quán)重使用排序算法將數(shù)據(jù)進行一次從小到大的排序，使得權(quán)重高的優(yōu)先顯示，從而提高檢索的準確性。信息檢索系統(tǒng)在對文獻數(shù)據(jù)進行存儲時通常會對其作者、機構(gòu)和相關(guān)的引用建立一定的連接，以此來起到一個追溯的效果，這樣也可以使得各信息資源之間相互關(guān)聯(lián)，起到一個融合的作用。相比第一階段的信息檢素系統(tǒng)，第二階段的信息檢索系統(tǒng)通過加權(quán)和追溯的優(yōu)化在信息的整合能力上變的更強，查詢數(shù)據(jù)時的淮率也得到了不錯的提高，在檢索方式上也具有多樣化。3.開展知識服務(wù)的信息檢索系統(tǒng)。開展知識服務(wù)的信息檢索系統(tǒng)是第三階段的信息檢索系統(tǒng)，它比前兩個階段的的檢索系統(tǒng)在網(wǎng)絡(luò)信息檢索的表現(xiàn)上更加出色。它通過對以前兩個階段系統(tǒng)的一個改進優(yōu)化，實現(xiàn)了對相關(guān)的符合條件的檢索信息進行高度整合，不但提供了對檢索出來的數(shù)據(jù)進行了統(tǒng)計分析，還增加了與結(jié)果數(shù)據(jù)集知識服務(wù)相關(guān)的信息檢索系統(tǒng)。在用戶對指定的數(shù)據(jù)進行檢索信息時，檢索系統(tǒng)在檢索出結(jié)果的同時，還增加了按照信息的不同維度進行統(tǒng)計，例如主題、年份、作者等維度上的統(tǒng)計，采用圖的形式對數(shù)據(jù)進行整理，以更直觀的視角效果將檢索的結(jié)果展示給用戶。相比于前兩個階段，第三階段開始融合知識服務(wù)的思想，在對數(shù)據(jù)的統(tǒng)計整理上已有了一個基本的概念，也從一種被動服務(wù)的狀態(tài)轉(zhuǎn)化為主動服務(wù)的方式。二、人工智能概述其實，人工智能就是利用機器來模擬和感知人們做事時所感受到的現(xiàn)實，在此基礎(chǔ)上，我們可以做出更有效的判斷和決策，使機器能夠處理復(fù)雜的問題，只有人類專家才能做到。因此，人工智能的本質(zhì)還在于大腦模擬。人工智能的最大特點是基于可靠的知識來解決問題，它需要一個相對完整的以推理為核心的系統(tǒng)來實現(xiàn)知識的重組和利用，可以分為邏輯學(xué)派和知識工程學(xué)派。雖然各個學(xué)派的研究方向不同，但研究方向與人工智能的結(jié)構(gòu)和功能是一致的，也就是說，KI應(yīng)該由中間數(shù)據(jù)庫、解釋器、知識獲取、用戶界面、知識存儲和推理機六部分組成。首先，以人工智能系統(tǒng)中長期存儲的知識庫為例，它存儲的是專業(yè)知識、確認的事實和信息，也有常識和規(guī)則。一些特殊系統(tǒng)包含數(shù)據(jù)庫。其次，參數(shù)是搜索任務(wù)的組成部分，包括主控件和各種任務(wù)程序。作為一個特殊的數(shù)據(jù)庫，它提供搜索支持，用戶界面主要包括系統(tǒng)和用戶對相關(guān)信息的輸入和傳輸。作為外部信息與內(nèi)部化之間的橋梁，它可以向最終用戶展示處理的結(jié)果，并將用戶的意思傳達給計算機，非自然語言的使用可以減輕用戶在使用過程中的負擔(dān)和壓力。中間數(shù)據(jù)庫又稱表，主要用于存儲任務(wù)執(zhí)行和論證過程中的中間結(jié)果和數(shù)據(jù)，系統(tǒng)首先在表上顯示問題，然后指示問題的初始狀態(tài)。專家系統(tǒng)根據(jù)知識庫中知識調(diào)用的一致性工作，不斷生成和歸納表的內(nèi)容。必要時，他們會在知識庫中向顧客傳授知識，因此，董事會在某種程度上可以看作是一個動態(tài)的知識庫，在控制過程中起著關(guān)鍵的作用。最后，該設(shè)備也被稱為學(xué)習(xí)者，其主要任務(wù)是系統(tǒng)的操作，是保證系統(tǒng)順利運行的有效補充，在零體驗后進一步修復(fù)知識庫。翻譯人員主要負責(zé)解決用戶的問題，并負責(zé)向用戶解釋系統(tǒng)鎖的處理過程，葡萄酒一般由人工智能機器控制，通過技術(shù)和仿真，可以幫助人們解決緊迫的問題。三、網(wǎng)絡(luò)信息檢索的工具（一）FTP類FTP是一個文件傳輸協(xié)議，需要在用戶登錄到指定的客戶機后才能對相關(guān)的文件進行檢索，類似于一個檢索的門戶系統(tǒng)。FTP支持傳輸?shù)臄?shù)據(jù)類型非常豐富，如一些文本文件、二進制文件及圖像文件等。在FTP類型的檢索工具中最為常見的莫過于Archie，它的性能也是非常優(yōu)越。Archie是基于FTP的一類自動標題檢索工具。用戶在使用時可以直接輸入需要檢索的文件名，然后Archie就可以自動的獲取到相關(guān)文件的主機名和文件路徑等信息。有了這些相關(guān)的信息后，用戶就可以準確的獲取到想要的資源文件。（二）基于關(guān)鍵詞的分類用戶在使用WAIS是無需關(guān)系檢索的信息在網(wǎng)絡(luò)中的哪些計算機上，更不用關(guān)心系統(tǒng)是通過何種方法來獲取這些文件的。[5]WAIS檢索的大致流程為：第一步WAIS會通過用戶的選擇獲取到數(shù)據(jù)源的信，在接著在選定好的數(shù)據(jù)源中對指定的關(guān)鍵詞進行檢索，這一過程系統(tǒng)會自動進行遠程檢索，無需用戶關(guān)系具體的檢索步驟；查詢完成數(shù)據(jù)后后，WAIS會通過結(jié)果的權(quán)重對結(jié)果進行一個排序，然后將排好序的數(shù)據(jù)通過可視化的方式展示給用戶查看。（三）基于菜單式的分類它是一類分布式的信息檢索工具，這類信息檢索工具可以將用戶發(fā)出的檢索請求轉(zhuǎn)換成與之對應(yīng)的FTP或Telnet命令。能夠?qū)τ脩舻膶嶋H需求的分析選擇與之匹配的信息結(jié)果，它再以菜單的形式逐級的引導(dǎo)用戶，可以讓用戶通過自定的選擇方式來選取出自己感興趣的信息資源，通過該方案解決了用戶對操作系統(tǒng)不熟悉及對想要檢索信息不熟悉難以檢索的問題，用戶可以很輕松在一級一級的菜單選項中輕松的查詢到想要的信息，用戶可以輕松自如的駕馭這套系統(tǒng)。四、大數(shù)據(jù)時代人工智能在網(wǎng)絡(luò)信息檢索中的應(yīng)用1.網(wǎng)絡(luò)智能知識服務(wù)系統(tǒng)(1)在計算機網(wǎng)絡(luò)信息檢索中應(yīng)用人工智能主要是在網(wǎng)絡(luò)智能信息服務(wù)系統(tǒng)中，其可以分為四個部分，其一是智能信息處理系統(tǒng)，其主要的功能和作用是將網(wǎng)絡(luò)下載的信息進行合理的分類，然后根據(jù)關(guān)鍵詞進行相似度匹配，最后將通過篩選和審核的信息數(shù)據(jù)傳入到信息數(shù)據(jù)庫中。主要的流程是根據(jù)檢索信息的類型和內(nèi)容按照特定的規(guī)則和方法進行合理分類，完成后進入到智能匹配環(huán)節(jié);其次是將信息數(shù)據(jù)庫內(nèi)的分類規(guī)則與分類信息進行比較篩選，可以有效防止出現(xiàn)信息重復(fù)、占用計算機內(nèi)存等現(xiàn)象，然后智能匹配和篩選結(jié)構(gòu)會進入到智能更新流程中;通過匹配的結(jié)果可以決定信息儲存到數(shù)據(jù)庫或者是對原有的信息進行替換，或者也可能出現(xiàn)新載信息與原有信息的合并，構(gòu)成一個相對完整的數(shù)據(jù)內(nèi)容;最后智能數(shù)據(jù)庫會定期對信息進行清理和更新，避免出現(xiàn)信息重復(fù)，及時釋放內(nèi)存，保障計算機系統(tǒng)的良好運行。(2)是信息采集系統(tǒng)，網(wǎng)絡(luò)信息檢索需要豐富的信息數(shù)據(jù)庫支持，所以智能信息采集系統(tǒng)即是對信息庫內(nèi)的數(shù)據(jù)進行收集、整理、更新替換、補充等。通常情況下信息采集系統(tǒng)包括了印本信息采集以及數(shù)字數(shù)據(jù)采集。印本信息采集就是對傳統(tǒng)的紙張書本知識進行掃描和錄入，并實現(xiàn)數(shù)據(jù)轉(zhuǎn)換，這一過程必須要借助人工智能的作用將文本轉(zhuǎn)換為數(shù)字形式。而數(shù)字數(shù)據(jù)信息采集就是針對網(wǎng)絡(luò)的數(shù)字資源進行采集，其是由站點鏡像、智能信息監(jiān)控、智能資源發(fā)現(xiàn)和智能信息資源轉(zhuǎn)化四個部分組成，站點鏡像即是對網(wǎng)站中的信息內(nèi)容進行完全復(fù)制，將其下載到系統(tǒng)后臺可以提高采集的速度。智能信息監(jiān)控是對網(wǎng)絡(luò)檢索目標信息進行自動堅實，如發(fā)生變動和更新，則計算機本地系統(tǒng)內(nèi)儲存的信息也會隨著更新。智能資源發(fā)現(xiàn)是針對目標門戶網(wǎng)站，一旦出現(xiàn)符合網(wǎng)絡(luò)信息檢索的內(nèi)容則會進行自動采集。智能信息資源轉(zhuǎn)化是對數(shù)字資源進行采集和分類，從而整合為一個新的信息知識概念。(3)智能信息儲存系統(tǒng)，其是網(wǎng)絡(luò)信息知識庫中的一個重要組成部分，能夠有效的保障網(wǎng)絡(luò)信息檢索的效果和質(zhì)量。一般智能信息儲存系統(tǒng)分為軟件、硬件和檢索系統(tǒng)三個構(gòu)成部分，軟件就是網(wǎng)絡(luò)信息存取管理系統(tǒng)，可以保障計算機系統(tǒng)能夠相對高效的讀取或者存檔。硬件則是儲存大量信息內(nèi)容的設(shè)備設(shè)施，檢索系統(tǒng)是軟件和硬件的結(jié)合應(yīng)用，在人工智能的作用下能夠提高網(wǎng)絡(luò)信息檢索的效率，同時人工智能也能夠?qū)π畔Υ嫦到y(tǒng)進行開發(fā)和改善，以提高網(wǎng)絡(luò)信息檢索服務(wù)性能[5]。2.智能代理技術(shù)智能代理技術(shù)是麻省理工學(xué)院從上世紀80年代開始的。它是人工智能研究的重點領(lǐng)域。在大數(shù)據(jù)時代的人工智能領(lǐng)域，基于互聯(lián)網(wǎng)普及和發(fā)展的智能代理技術(shù)被廣泛應(yīng)用于互聯(lián)網(wǎng)信息檢索中，通過一系列的軟件程序，經(jīng)過用戶授權(quán)，創(chuàng)建了軟件代理通信協(xié)議，促進軟件和用戶之間的信息交互。同時，軟件程序?qū)τ脩舻慕换ケ容^準確，它可以為網(wǎng)絡(luò)信息系統(tǒng)提供，例如，用戶想查找信息，但不能確定位置關(guān)鍵字，智能代理提供模糊關(guān)鍵字，智能代理技術(shù)為用戶提供了網(wǎng)絡(luò)搜索的軌跡、偏好、搜索結(jié)果等信息，在習(xí)慣之后我們可以對模糊關(guān)鍵詞進行分析、查詢和跟蹤信息，去除無效和無用的數(shù)據(jù)，接收必要的信息，這在搜狗等常見的搜索引擎中隨處可見。然而，智能代理技術(shù)對信息的分類并不準確，而且用戶搜索主題的內(nèi)容很多，因此需要人工搜索。由于模糊信息的方便性和準確性，使得網(wǎng)絡(luò)中的信息更加準確，這是信息獲取的常用技術(shù)之一。在使用智能活性物質(zhì)時，其主要功能也是利用人工智能，比如網(wǎng)絡(luò)管理可以讓用戶在短時間內(nèi)找到合適的網(wǎng)站或平臺下載信息數(shù)據(jù)，并且可以計算和監(jiān)控資源丟失等網(wǎng)絡(luò)資源點的信息，而智能網(wǎng)絡(luò)管理可以對資源相對寬泛、服務(wù)器松散的網(wǎng)站進行優(yōu)先排序，減少網(wǎng)絡(luò)過載的影響，提高資源需求和下載效率，實現(xiàn)智能信息管理，用戶可以充分了解網(wǎng)絡(luò)信息資源的分布情況，幫助用戶自定義搜索詞，通過人工智能對目標信息進行過濾，并根據(jù)所按用戶的喜好改變相應(yīng)的信息內(nèi)容。3.人工智能搜索代理技術(shù)在網(wǎng)絡(luò)信息檢索應(yīng)用智能代理技術(shù)的過程中，衍生出了智能搜索代理服務(wù)，可以針對不同的用戶指定具有針對性的搜索服務(wù)方案，依據(jù)用戶平時的搜索偏好以及網(wǎng)絡(luò)習(xí)慣等進行檢索和分類，比如用戶在檢索某一類網(wǎng)絡(luò)信息時，人工智能搜索代理技術(shù)可以對以往檢索信息記錄，分析用戶對信息的關(guān)注程度和類型，結(jié)合同一類用戶檢索的信息關(guān)鍵詞制定一個相對比較合理的搜尋方案，用戶在輸入相關(guān)信息時則可以提供潛在的網(wǎng)絡(luò)信息需求方案。五、結(jié)語在大數(shù)據(jù)時代背景下人們對網(wǎng)絡(luò)信息檢索的需求愈來愈大，這也使得網(wǎng)絡(luò)中的數(shù)據(jù)也來越多，并且人們對網(wǎng)絡(luò)信息檢索