論文Clean Data服務的研究與實現(xiàn)

1、Clean Data論文：Clean Data服務的研究與實現(xiàn)【中文摘要】本文所研究的Clean Data是世界著名安全軟件生產(chǎn)商賽門鐵克公司安全響應中心工作中必不可少的組成部分,公司內(nèi)專門做病毒分析的工作人員,通過對從各種渠道獲取的病毒樣本進行分析,得到所需數(shù)據(jù)信息,并及時對病毒數(shù)據(jù)庫更新,同時還有專門的病毒測試人員,對病毒分析工作者得到的可疑樣本數(shù)據(jù)進一步測試,防止發(fā)生誤報,使得安全產(chǎn)品被更準確更權威的最新病毒特征及時更新升級。而上述兩類工作人員,都需要Clean Data的服務,隨時查詢和比較相應文件的特征屬性。盡管如此,誤報還是防不勝防。同時,隨著網(wǎng)絡上計算機病毒的多樣性和復雜性,人們

2、對計算機性能方面的要求也越來越高,經(jīng)常要用殺毒軟件對計算機硬盤上所有的文件進行掃描,花費時間的同時,也消耗了內(nèi)存,影響計算機使用效率。針對這種情況,賽門鐵克公司利用Clean Data恰好可以使得用戶不用對每一個文件都進行掃描,只需要通過網(wǎng)絡使用Clean Data所提供的云服務,掃描不在云服務信任區(qū)域內(nèi)的文件即可。本文作者正是在賽門鐵克公司中參與Clean Data工作的基礎上,對Clean Data服務進行了相關的研究與實現(xiàn)。本文首先分析了Clean Data的與現(xiàn)狀,介紹了Clean Data的特征信息,Symfony框架、Python、PHP語言和相關數(shù)據(jù)庫技術等；然后在Clean D

3、ata服務的應用背景下,對服務平臺和相關云服務進行了詳細的需求分析,同時分析了數(shù)據(jù)需求和主要非功能方面的需求；隨后設計了Clean Data服務的總體方案和結(jié)構(gòu),并對服務的相關方面進行了詳細設計和實現(xiàn),得出測試結(jié)果；最后總結(jié)全文工作,并提出了新的展望?！居⑽恼緾lean Data researched in this paper is an important part of Security Response Center in the famous Symantec Corporation of the world. The engineers of virus analysis an

4、d QA need the Clean Data Service in their normal work, they find more and more virus definitions with Clean Data, comparing with different attribute for kinds of files. However, false positive would appear occasionally. At the same time, people want to get higher performance with the diversity and c

5、omplexity of virus in computer. When people use kill virus software to scan files in disk of computer, it not only waste a lot of time, but also consume memory, resulting in efficiency decline. For this case, Symantec uses Clean Data to provide cluster service, so that users only do need to scan fil

6、es not in cluster domain in computer. Author researches and realizes correlative Clean Data Service in paper, participating the work about Clean Data in Symantec.The paper firstly analysises the background and current situation of Clean Data researching and introduces the feature information of Clea

7、n Data、Symfony framework、Python、PHP programming language and pertinent database technology.etc. Then it anlysises the detailed requirements of Service Platform、Cluster Service、Data and vital not function under the backdrop of Clean Data. More important, it engineers the whole schema and construction

8、, also realizes them and gets results tested. At last, it summarizes all the work and gives new future.【關鍵詞】Clean Data Symfony Python PHP 數(shù)據(jù)庫技術 服務平臺 云服務【英文關鍵詞】Clean Data Symfony Python PHP Database Technology Service Platform Cluster Service【目錄】Clean Data服務的研究與實現(xiàn) 摘要 6-7 Abstract 7 第1章 緒論 11-15 1.1 研

9、究背景和意義 11-12 1.2 研究現(xiàn)狀 12-13 1.3 研究內(nèi)容 13 1.4 論文組織結(jié)構(gòu) 13-15 第2章 Clean Data服務的知識與技術 15-26 2.1 Clean Data特征信息 15-16 2.1.1 Lower-level數(shù)據(jù) 15-16 2.1.2 Higher-level數(shù)據(jù) 16 2.1.3 Other info數(shù)據(jù) 16 2.2 Symfony技術 16-19 2.2.1 Symfony簡介 16-17 2.2.2 Symfony原理 17-19 2.3 Python語言技術 19-21 2.3.1 Python簡介 19 2.3.2 Python特性

10、 19-20 2.3.3 Psyco與Py2exe 20-21 2.4 PHP語言技術 21-22 2.5 數(shù)據(jù)庫相關技術 22-24 2.5.1 事務技術 22-23 2.5.2 存儲過程技術 23 2.5.3 跨服務器跨數(shù)據(jù)庫互操作技術 23-24 2.6 SMS簡單介紹 24-25 2.7 本章小結(jié) 25-26 第3章 Clean Data服務的需求分析 26-33 3.1 應用背景分析 26 3.2 服務用例模型分析 26-28 3.3 功能需求 28-30 3.3.1 服務平臺功能分析 28-30 3.3.2 云服務功能分析 30 3.4 數(shù)據(jù)需求分析 30-31 3.5 主要非功能

11、需求分析 31-32 3.6 本章小結(jié) 32-33 第4章 Clean Data服務的相關設計 33-58 4.1 服務總體設計 33-37 4.1.1 方案設計 33 4.1.2 服務總體結(jié)構(gòu) 33-37 4.2 數(shù)據(jù)庫設計 37-44 4.2.1 Lower-level數(shù)據(jù)表 37-41 4.2.2 Higher-level數(shù)據(jù)表 41-44 4.3 數(shù)據(jù)上傳更新API設計 44-48 4.3.1 API說明 44-45 4.3.2 API設計 45-47 4.3.3 API優(yōu)缺點分析 47-48 4.4 數(shù)據(jù)上傳更新監(jiān)測設計 48-50 4.4.1 獲取監(jiān)測數(shù)據(jù)的設計 48-49 4.4

12、.2 監(jiān)測的Web界面設計 49-50 4.4.3 監(jiān)測評價 50 4.5 CDM與SMS對比設計 50-54 4.5.1 查找重疊數(shù)據(jù) 50-51 4.5.2 分析重疊數(shù)據(jù) 51-52 4.5.3 處理重疊數(shù)據(jù) 52-54 4.6 分布式服務設計 54-55 4.7 云服務延遲查看設計 55-57 4.8 本章小結(jié) 57-58 第5章 Clean Data服務的實現(xiàn)及測試 58-71 5.1 Clean Data服務平臺的相關實現(xiàn) 58-60 5.1.1 實現(xiàn)環(huán)境 58 5.1.2 數(shù)據(jù)上傳更新監(jiān)測的實現(xiàn)及測試 58-60 5.2 數(shù)據(jù)上傳更新API的實現(xiàn)及測試 60-62 5.3 CDM與SMS對比的實現(xiàn)及測