網(wǎng)購(gòu)行為分析系統(tǒng)立項(xiàng)報(bào)告

+網(wǎng)購(gòu)行為分析系統(tǒng)立項(xiàng)報(bào)告ruitong科技股份有限公司目錄一、 項(xiàng)目介紹 31.1項(xiàng)目背景與意義 31.2項(xiàng)目目的和范疇 31.2.1項(xiàng)目目的 31.2.2研究?jī)?nèi)容 31.3核心技術(shù)內(nèi)容及創(chuàng)新點(diǎn) 4二、 總體功效概述 42.1 重要模塊 42.2 項(xiàng)目設(shè)計(jì) 52.2.1平臺(tái)架構(gòu) 62.2.2平臺(tái)模塊 72.2.3數(shù)據(jù)流 82.2.4畫像生成 8三、 項(xiàng)目方案概述 93.1項(xiàng)目意義與必要性 93.2重要研發(fā)工作目的 93.2.1創(chuàng)新目的 93.2.2技術(shù)管理狀況 103.2.3技術(shù)質(zhì)量目的 10四、 項(xiàng)目實(shí)施辦法論 114.1產(chǎn)品的原則化 114.2項(xiàng)目實(shí)施計(jì)劃 114.3項(xiàng)目質(zhì)量確保 124.4質(zhì)量確保方法和計(jì)劃 134.5項(xiàng)目投資估算與資金來(lái)源 164.5.1項(xiàng)目支出預(yù)算內(nèi)容分解表 164.5.2費(fèi)用來(lái)源 16項(xiàng)目介紹1.1項(xiàng)目背景與意義大數(shù)據(jù)環(huán)境下，隨著公司間的競(jìng)爭(zhēng)加劇，公司越來(lái)越意識(shí)到客戶購(gòu)置行為預(yù)測(cè)的重要性。提高對(duì)客戶購(gòu)置行為預(yù)測(cè)的有效性和效率，對(duì)于增加公司的市場(chǎng)競(jìng)爭(zhēng)力，減少運(yùn)行成本，提高營(yíng)業(yè)收入含有非常重要的意義。1.2項(xiàng)目目的和范疇1.2.1項(xiàng)目目的建立詳盡的顧客行為知識(shí)庫(kù)：通過(guò)知識(shí)重構(gòu)、機(jī)器學(xué)習(xí)等辦法從多個(gè)數(shù)據(jù)源學(xué)習(xí)并獲得知識(shí)，這些數(shù)據(jù)源涉及顧客歷史數(shù)據(jù)（顧客瀏覽日志數(shù)據(jù)、顧客交易數(shù)據(jù)、顧客個(gè)人信息）、現(xiàn)有領(lǐng)域?qū)＜抑R(shí)庫(kù)等，其中顧客歷史數(shù)據(jù)中蘊(yùn)含著豐富的顧客共性行為特性等知識(shí)，我們通過(guò)數(shù)據(jù)挖掘辦法來(lái)學(xué)習(xí)并獲取這些知識(shí)，并對(duì)所抽取的知識(shí)進(jìn)行適宜的調(diào)節(jié)和修剪以滿足我們系統(tǒng)的需求。構(gòu)建精確的顧客場(chǎng)景：本系統(tǒng)通過(guò)對(duì)客戶動(dòng)態(tài)行為數(shù)據(jù)、顧客個(gè)人信息、顧客歷史數(shù)據(jù)進(jìn)行綜合分析來(lái)擬定場(chǎng)景中所包含的要素。根據(jù)預(yù)測(cè)目的，智能選用場(chǎng)景中的部分有關(guān)要素作為預(yù)測(cè)引擎的輸入，從而完畢對(duì)顧客的預(yù)測(cè)。隨著研究的不停進(jìn)行，場(chǎng)景中的要素會(huì)不停完善1.2.2研究?jī)?nèi)容不停學(xué)習(xí)的知識(shí)庫(kù)：知識(shí)重構(gòu)有關(guān)組件重要功效是知識(shí)的構(gòu)建以及知識(shí)庫(kù)的學(xué)習(xí)更新。再開構(gòu)建階段對(duì)選用的知識(shí)庫(kù)通過(guò)有關(guān)算法、工具進(jìn)行知識(shí)修剪和調(diào)節(jié)以滿足本系統(tǒng)的需求。。1.3核心技術(shù)內(nèi)容及創(chuàng)新點(diǎn)本系統(tǒng)基于本體論構(gòu)建了電子商務(wù)客戶網(wǎng)購(gòu)行為知識(shí)圖，其中涉及電子商務(wù)領(lǐng)域知識(shí)和客戶網(wǎng)購(gòu)行為知識(shí)等。預(yù)測(cè)引擎將此知識(shí)圖作為顧客行為進(jìn)行實(shí)時(shí)預(yù)測(cè)過(guò)程的知識(shí)來(lái)源，以顧客實(shí)時(shí)行為預(yù)測(cè)場(chǎng)景為輸入完畢對(duì)顧客行為的預(yù)測(cè)，整個(gè)引擎體現(xiàn)了對(duì)顧客行為的智慧化預(yù)測(cè)。本系統(tǒng)基于spark技術(shù)的大數(shù)據(jù)平臺(tái)，通過(guò)spark對(duì)網(wǎng)購(gòu)消費(fèi)數(shù)據(jù)進(jìn)行清理和篩選，按照規(guī)定的算法導(dǎo)入HIVE數(shù)據(jù)庫(kù)中，采用基于Python的surprise軟件進(jìn)行數(shù)據(jù)挖掘和分析，提高詳盡的行為分析報(bào)告。重要技術(shù)指標(biāo)：1．每日數(shù)據(jù)解決速度：千萬(wàn)級(jí)別數(shù)據(jù)不多于10分鐘2．歷史數(shù)據(jù)標(biāo)簽速度：全部數(shù)據(jù)顧客標(biāo)簽不超出8小時(shí)3．消費(fèi)數(shù)據(jù)保存時(shí)間：不少于3年4．同時(shí)在線查詢數(shù)：100總體功效概述2.1 重要模塊項(xiàng)目涉及下列5個(gè)模塊：數(shù)據(jù)獲取數(shù)據(jù)標(biāo)注數(shù)據(jù)體現(xiàn)數(shù)據(jù)建模數(shù)據(jù)展示項(xiàng)目設(shè)計(jì)2.2.1平臺(tái)架構(gòu)通過(guò)海量數(shù)據(jù)分析和解決，使用商品推薦引擎，合用于不同顧客場(chǎng)景、相似顧客群體，根據(jù)顧客短期愛(ài)好、長(zhǎng)久累積愛(ài)好、顧客行為愛(ài)好，進(jìn)行顧客購(gòu)置行為的預(yù)測(cè)，實(shí)現(xiàn)精確營(yíng)銷的目的。2.2.2平臺(tái)模塊平臺(tái)分為四層架構(gòu)：數(shù)據(jù)層：顧客購(gòu)置的流水銷售數(shù)據(jù)進(jìn)行數(shù)據(jù)清理，產(chǎn)生推薦基礎(chǔ)數(shù)據(jù)，根據(jù)銷售產(chǎn)品的屬性，構(gòu)建產(chǎn)品維度數(shù)據(jù)庫(kù)，根據(jù)銷售產(chǎn)品的周期性，建立節(jié)日、天氣等上下文維度數(shù)據(jù)索引層：通過(guò)對(duì)商品屬性數(shù)據(jù)建立索引，以及對(duì)顧客對(duì)象進(jìn)行標(biāo)簽解決構(gòu)建顧客索引服務(wù)層：為商家和品牌商戶提供商品推薦服務(wù)，涉及周期購(gòu)、顧客畫像、顧客意圖引擎、千人千面推薦，顧客情景推薦等等應(yīng)用層：進(jìn)行多個(gè)廣告方式的投放，涉及EDM投放、DMP投放、試用品投放等等2.2.3數(shù)據(jù)流在數(shù)據(jù)清理和篩選的基礎(chǔ)上，數(shù)據(jù)商品和訂單數(shù)據(jù)，結(jié)合顧客畫像和節(jié)日天氣等上下文數(shù)據(jù)，進(jìn)行商品關(guān)聯(lián)規(guī)則的運(yùn)算，在選品中心中篩選出適宜的商品，在選人中心中計(jì)算符合規(guī)則的人群，進(jìn)行廣告投放。2.2.4畫像生成規(guī)則計(jì)算方式：sigmod是logistic的特殊形式，運(yùn)用線性加權(quán)、衰減函數(shù)、logisitic函數(shù)統(tǒng)計(jì)出顧客對(duì)標(biāo)簽的愛(ài)好值，在此基礎(chǔ)上運(yùn)用信息增益率評(píng)定顧客對(duì)標(biāo)簽的關(guān)注程度運(yùn)用線性加權(quán)、衰減函數(shù)、logisitic函數(shù)統(tǒng)計(jì)出顧客對(duì)標(biāo)簽的愛(ài)好值，在此基礎(chǔ)上運(yùn)用信息增益率評(píng)定顧客對(duì)標(biāo)簽的關(guān)注程度

項(xiàng)目方案概述3.1項(xiàng)目意義與必要性結(jié)合大數(shù)據(jù)、消費(fèi)者行為學(xué)和預(yù)測(cè)科學(xué)理論,從消費(fèi)者購(gòu)置決策的視角出發(fā)，重要采用改善的決策樹模型對(duì)客戶購(gòu)置行為進(jìn)行預(yù)測(cè)，并通過(guò)對(duì)優(yōu)化前后的效果對(duì)比分析，驗(yàn)證了改善后的算法在客戶購(gòu)置行為預(yù)測(cè)上的有效性和高效率。對(duì)于商戶制訂市場(chǎng)營(yíng)銷方略，提邁進(jìn)行商品購(gòu)置存儲(chǔ)，減少商品流轉(zhuǎn)周期，提高資金使用效率起到有效指導(dǎo)的重大意義。3.2重要研發(fā)工作目的3.2.1創(chuàng)新目的項(xiàng)目產(chǎn)品達(dá)成的技術(shù)、質(zhì)量原則：產(chǎn)品符合行業(yè)內(nèi)各類信息化原則。完畢軟件著作權(quán)登記。產(chǎn)品應(yīng)用項(xiàng)目經(jīng)評(píng)審最少有一種達(dá)成國(guó)內(nèi)領(lǐng)先水平。3.2.2技術(shù)管理狀況項(xiàng)目構(gòu)組員考勤簿項(xiàng)目組開發(fā)工作日志制度系統(tǒng)數(shù)據(jù)日備份制度項(xiàng)目保密制度項(xiàng)目技術(shù)資料登記制度技術(shù)人員開發(fā)庫(kù)日備份制度3.2.3技術(shù)質(zhì)量目的本項(xiàng)目的考核目的重要涉及：1項(xiàng)目各個(gè)計(jì)劃階段里程碑時(shí)間控制。2項(xiàng)目人員的工作量控制。3項(xiàng)目在試運(yùn)行階段的穩(wěn)定性和延展性。4項(xiàng)目上線后的繼續(xù)支持工作完畢狀況。5項(xiàng)目預(yù)期收益與否達(dá)成既定目的。項(xiàng)目實(shí)施辦法論4.1產(chǎn)品的原則化根據(jù)ISO9001質(zhì)量體系的認(rèn)證原則進(jìn)行產(chǎn)品的開發(fā)。為了實(shí)現(xiàn)產(chǎn)業(yè)化首要條件是產(chǎn)品的原則化。現(xiàn)在國(guó)內(nèi)決大部分的系統(tǒng)引擎是以項(xiàng)目形式進(jìn)行定制開發(fā)，個(gè)性化的定制開發(fā)基本都要達(dá)成60%以上，實(shí)施周期很長(zhǎng)，投入的人力也多、相對(duì)其實(shí)施成本也非常高。我公司在系統(tǒng)的技術(shù)和策劃方面有著很豐富的經(jīng)驗(yàn)，同時(shí)擁有一支技術(shù)和業(yè)務(wù)技能都很豐富的工作團(tuán)體，確保了在產(chǎn)品技術(shù)等多方面的項(xiàng)目質(zhì)量。4.2項(xiàng)目實(shí)施計(jì)劃項(xiàng)目進(jìn)度計(jì)劃表從立項(xiàng)年度1月份開始年度分進(jìn)度目的和實(shí)施內(nèi)容立項(xiàng)年度1月至立項(xiàng)年度3月1、完畢軟件的產(chǎn)品規(guī)劃、總體設(shè)計(jì)。2、將設(shè)計(jì)構(gòu)思投入市場(chǎng)進(jìn)行驗(yàn)證，評(píng)定市場(chǎng)機(jī)會(huì)與顧客可接受程度。3、完畢平臺(tái)的具體設(shè)計(jì)，并進(jìn)行顧客與專家進(jìn)行全方面評(píng)審，確保平臺(tái)的技術(shù)生命力與市場(chǎng)生命力。并開始啟動(dòng)項(xiàng)目開發(fā)。立項(xiàng)年度4月至立項(xiàng)年度7月1、完畢開拓各類合作伙伴的合作關(guān)系；廣泛擴(kuò)展?fàn)I銷渠道合作，承接項(xiàng)目實(shí)施工作。2、完畢平臺(tái)的重要模塊的開發(fā)、測(cè)試、試運(yùn)行工作，完畢1.0版本的封裝。立項(xiàng)年度8月至立項(xiàng)年度9月1、在全國(guó)范疇內(nèi)公布1.0版本產(chǎn)品，建立示范項(xiàng)目，并將示范案例向全國(guó)各地推廣。2、根據(jù)項(xiàng)目應(yīng)用狀況總結(jié)和提煉進(jìn)一步的需求，完善并拓展1.0系統(tǒng)平臺(tái)，形成2.0版本。立項(xiàng)年度10月至立項(xiàng)年度12月1、加大基礎(chǔ)客戶的合作范疇及合作力度，加大產(chǎn)品在國(guó)內(nèi)的營(yíng)銷力度。4.3項(xiàng)目質(zhì)量確保質(zhì)量目的：確保產(chǎn)品質(zhì)量、性能與顧客規(guī)定相一致，努力為顧客提供行業(yè)領(lǐng)先、技術(shù)先進(jìn)的產(chǎn)品。項(xiàng)目的質(zhì)量管理應(yīng)著重加強(qiáng)下面幾方面的工作：崗位責(zé)任制；復(fù)核與審查；文檔管理與控制；分階段實(shí)施成果檢查。原則及控制手段：檔案（涉及數(shù)據(jù)庫(kù)）命名原則；開發(fā)所需的表格；有效的變更管理和版本控制；完整的測(cè)試計(jì)劃（涉及每一階段的測(cè)試）；嚴(yán)謹(jǐn)?shù)念櫩万?yàn)收過(guò)程.核定后的原則是為了規(guī)范組員的工作，能夠避免由于組員的經(jīng)驗(yàn)差別而造成水準(zhǔn)有參差，也避免了由于人員的變動(dòng)而沒(méi)法跟進(jìn)。良好的變更和版本控制也能夠避免版本修改后失控。4.4質(zhì)量確保方法和計(jì)劃1、各參加部門的分工本系統(tǒng)的研發(fā)管理獨(dú)立形成產(chǎn)品組，具體組織形式以下：產(chǎn)品管理：1人，負(fù)責(zé)產(chǎn)品的前期開發(fā)策劃，需求分析與核心設(shè)計(jì)，產(chǎn)品研發(fā)的全程管理與協(xié)調(diào)產(chǎn)品研發(fā)：4人，產(chǎn)品的具體的開發(fā)設(shè)計(jì)、調(diào)試與首個(gè)項(xiàng)目的安裝調(diào)試工程實(shí)施：2人，產(chǎn)品的移植與應(yīng)用性開發(fā)、現(xiàn)場(chǎng)調(diào)試與運(yùn)行指導(dǎo)市場(chǎng)推廣：2人，前期策劃的參加、市場(chǎng)信息的收集，市場(chǎng)策劃與應(yīng)用推廣行政財(cái)務(wù)：1人，產(chǎn)品的預(yù)算、專項(xiàng)核算2、組織協(xié)調(diào)與運(yùn)行管理方法為了確保本產(chǎn)品能夠如期、高質(zhì)、高效地達(dá)成預(yù)期目的，盡早發(fā)揮產(chǎn)品的主動(dòng)作用，擬采用下列方法：設(shè)立產(chǎn)品組。為加強(qiáng)管理，由副總經(jīng)理牽頭形成產(chǎn)品組，產(chǎn)品組實(shí)施組長(zhǎng)負(fù)責(zé)制。產(chǎn)品組組長(zhǎng)負(fù)責(zé)對(duì)產(chǎn)品的研究?jī)?nèi)容、目的、實(shí)施方案等進(jìn)行指導(dǎo)和協(xié)調(diào)，負(fù)責(zé)課題的檢查、評(píng)定工作。各專項(xiàng)設(shè)立專項(xiàng)小組，具體貫徹負(fù)責(zé)人，并將計(jì)劃完畢狀況與專項(xiàng)負(fù)責(zé)人的收入直接掛勾。產(chǎn)品實(shí)施過(guò)程中建立嚴(yán)格的產(chǎn)品管理制度，對(duì)各專項(xiàng)的建設(shè)進(jìn)程進(jìn)行全程跟蹤、分階段評(píng)定和認(rèn)證，確保整個(gè)產(chǎn)品開發(fā)的協(xié)調(diào)有序、按期按質(zhì)完畢。3、保障方法項(xiàng)目產(chǎn)品市場(chǎng)與競(jìng)爭(zhēng)的支持保障重要涉及人力資源規(guī)劃、資本運(yùn)作、管理規(guī)劃以及其它某些針對(duì)性的方略等，下列進(jìn)行分別敘述和分析。A.人力資源保障根據(jù)業(yè)務(wù)發(fā)展需要制訂確實(shí)可行的人力資源業(yè)務(wù)計(jì)劃，涉及人員補(bǔ)充計(jì)劃、分派計(jì)劃、提高計(jì)劃、教育培訓(xùn)計(jì)劃、工資計(jì)劃、等等。這些計(jì)劃是總體規(guī)劃的展開和具體化，每一項(xiàng)業(yè)務(wù)計(jì)劃都由目的、政策、環(huán)節(jié)及預(yù)算等部分構(gòu)成，能夠確保營(yíng)銷人力資源的配備。B.管理制度保障公司主動(dòng)進(jìn)行各項(xiàng)機(jī)制的建設(shè)和體制的優(yōu)化，按照當(dāng)代公司制度的規(guī)定進(jìn)行管理和運(yùn)作，已經(jīng)形成了一整套從機(jī)制到組織并延伸到個(gè)人的有效管理體制。一是通過(guò)建立健全管理控制系統(tǒng)和必要的制度，確保公司戰(zhàn)略、政策和文化的統(tǒng)一性，而內(nèi)部管理工作基本上都通過(guò)公司自行開發(fā)的應(yīng)用程序進(jìn)行，例如出入庫(kù)管理系統(tǒng)、客戶管理系統(tǒng)、成本利潤(rùn)監(jiān)管系統(tǒng)、內(nèi)部即時(shí)消息系統(tǒng)等。二是市場(chǎng)營(yíng)銷、軟件研發(fā)和工程實(shí)施已經(jīng)形成了一套符合公司實(shí)際狀況的、成熟規(guī)范的管理機(jī)制，強(qiáng)調(diào)規(guī)范化和團(tuán)體協(xié)作，重視全程質(zhì)量的控制。為了及時(shí)掌握工程進(jìn)展?fàn)顩r，需要建立工程狀態(tài)定時(shí)報(bào)告制度和工程隨訪制度，項(xiàng)目協(xié)調(diào)管理小組要及時(shí)理解、匯總并公布各實(shí)施單位的進(jìn)度狀況，與顧客進(jìn)行交流，經(jīng)常性地如開專項(xiàng)研討會(huì)和協(xié)調(diào)會(huì)，合理調(diào)用各類資源，提高質(zhì)量，減少成本。通過(guò)項(xiàng)目實(shí)施管理中的集中管理、協(xié)調(diào)，可快速反饋存在的問(wèn)題，及時(shí)發(fā)現(xiàn)問(wèn)題解決問(wèn)題，使有關(guān)各方及進(jìn)掌握工程動(dòng)態(tài)，更加緊密合作。建立完善的管理體系：根據(jù)項(xiàng)目管理有關(guān)制度管理項(xiàng)目；監(jiān)督項(xiàng)目管理有關(guān)制度的執(zhí)行；對(duì)項(xiàng)目立項(xiàng)、項(xiàng)目撤銷進(jìn)行決策；任命項(xiàng)目管理小組組長(zhǎng)、項(xiàng)目評(píng)審委