車險(xiǎn)智能核保分析系統(tǒng)總體架構(gòu)及概要設(shè)計(jì)V10

本文格式為Word版，下載可任意編輯——車險(xiǎn)智能核保分析系統(tǒng)總體架構(gòu)及概要設(shè)計(jì)V10

車險(xiǎn)智能核保分析系統(tǒng)總體架構(gòu)及概要設(shè)

計(jì)V1.0

目錄

版權(quán)聲明錯(cuò)誤！未定義書簽。1.

項(xiàng)目概述..

編寫目的4系統(tǒng)目標(biāo)4假設(shè)4

需求概述5總體架構(gòu)設(shè)計(jì).

架構(gòu)設(shè)計(jì)原則6總體結(jié)構(gòu)與模塊7

3.2.1.系統(tǒng)架構(gòu)圖及說明73.2.2.主要系統(tǒng)簡(jiǎn)介93.2.3.關(guān)鍵設(shè)計(jì)[可選]213.3.

周邊關(guān)系22

3.3.1.周邊關(guān)系圖示223.3.2.接口定義223.3.3.與規(guī)劃項(xiàng)目的關(guān)系[可選]223.3.4.實(shí)時(shí)接口設(shè)計(jì)[可選]223.3.5.批處理設(shè)計(jì)[可選]224.

組件模型[可選].5.

系統(tǒng)組件模型24組件描述及組件對(duì)外接口定義24

系統(tǒng)安全設(shè)計(jì).5.3.

性能設(shè)計(jì)25可用性設(shè)計(jì)25鏈路安全設(shè)計(jì)25

5.3.1.遠(yuǎn)程訪問限制255.3.2.傳輸信息的完整性265.3.3.關(guān)鍵傳輸設(shè)備的可用性265.4.

應(yīng)用安全設(shè)計(jì)26

5.4.1.系統(tǒng)性能265.4.2.身份鑒別26

5.4.3.訪問控制27

5.4.4.安全日志27

5.4.5.軟件容錯(cuò)275.5.

數(shù)據(jù)安全設(shè)計(jì)27

5.5.1.數(shù)據(jù)保密性275.5.2.數(shù)據(jù)完整性275.5.3.數(shù)據(jù)存儲(chǔ)安全276.

安全管理2...

第三方軟件、代碼29開發(fā)測(cè)試環(huán)境29文檔及代碼管理方式29代碼使用及歸屬29外包商安全協(xié)議29

出錯(cuò)處理30生產(chǎn)環(huán)境3.

硬件配置31軟件配置31

9.系統(tǒng)物理部署說明3.9.3.

物理部署圖示32物理部署說明32系統(tǒng)網(wǎng)絡(luò)拓?fù)鋱D及說明33

10.附錄34

10.1.常用技術(shù)英文解釋34

1.項(xiàng)目概述

1.1.編寫目的

本文檔的主要目的是為車險(xiǎn)智能核保分析系統(tǒng)技術(shù)人員進(jìn)行系統(tǒng)開發(fā)時(shí)提供基本業(yè)務(wù)了解、功能需求、后臺(tái)模塊劃分的說明，使相關(guān)技術(shù)人員能夠順利的完成系統(tǒng)架構(gòu)的設(shè)計(jì)和開發(fā)，給后期系統(tǒng)測(cè)試和維護(hù)人員提供參考。

1.2.系統(tǒng)目標(biāo)

通過建立車險(xiǎn)核保分析數(shù)據(jù)庫，進(jìn)行核保主題分析及信息查詢，進(jìn)一步制定核保的評(píng)分標(biāo)準(zhǔn)，實(shí)現(xiàn)核保的自動(dòng)化與智能化，進(jìn)而識(shí)別影響風(fēng)險(xiǎn)的因素，在提高核保標(biāo)準(zhǔn)件率的同時(shí)，保證承保業(yè)務(wù)質(zhì)量。

1.3.假設(shè)

本項(xiàng)目的架構(gòu)設(shè)計(jì)基于《CPIC車險(xiǎn)智能核保分析系統(tǒng)需求規(guī)格說明書.doc》完成，且需求規(guī)格說明書涵蓋業(yè)務(wù)需求的各功能點(diǎn)。

相關(guān)周邊系統(tǒng)能提供接口，滿足車險(xiǎn)智能核保分析系統(tǒng)的功能需求。

2.需求概述

伴隨車險(xiǎn)業(yè)務(wù)規(guī)模的不斷擴(kuò)大，市場(chǎng)局面愈發(fā)繁雜，要求車險(xiǎn)經(jīng)營必需改變過去單純追求保費(fèi)規(guī)模的粗放式經(jīng)營，堅(jiān)持以效益為中心，努力實(shí)現(xiàn)效益、規(guī)模、速度相統(tǒng)一的集約式管理模式，大力推進(jìn)車險(xiǎn)精細(xì)化管理，通過精細(xì)化數(shù)據(jù)分析判定市場(chǎng)動(dòng)向，制定適合的生產(chǎn)及銷售計(jì)劃，制定正確的業(yè)務(wù)決策。同時(shí)，公司以“客戶需求為導(dǎo)向〞的轉(zhuǎn)型戰(zhàn)略要求全方位的為客戶提供保險(xiǎn)需求服務(wù)，對(duì)車險(xiǎn)承保管理水平提出更高的要求，而采取多維度的綜合考評(píng)方式，更科學(xué)的、綜合的表達(dá)客戶價(jià)值，是服務(wù)客戶需求戰(zhàn)略要求的表達(dá)。同時(shí)，業(yè)務(wù)規(guī)模持續(xù)擴(kuò)大要求承保機(jī)構(gòu)不斷豐富和創(chuàng)新核保手段，促進(jìn)車險(xiǎn)業(yè)務(wù)持續(xù)發(fā)展，提升服務(wù)能力，及時(shí)響應(yīng)市場(chǎng)需求。

3.總體架構(gòu)設(shè)計(jì)

3.1.架構(gòu)設(shè)計(jì)原則

針對(duì)產(chǎn)險(xiǎn)2023版車險(xiǎn)智能核保分析系統(tǒng)的需求，東南融通在太保IT架構(gòu)的基礎(chǔ)上，遵循以下原則進(jìn)行系統(tǒng)的規(guī)劃和設(shè)計(jì)：

·規(guī)范性、標(biāo)準(zhǔn)性

按國際主流的標(biāo)準(zhǔn)和規(guī)范進(jìn)行設(shè)計(jì)，并有效的結(jié)合太?，F(xiàn)有IT架構(gòu)體系?！は冗M(jìn)性、穩(wěn)定性

以數(shù)據(jù)服務(wù)的方式為目前和將來的應(yīng)用系統(tǒng)提供盡可能完整的數(shù)據(jù)服務(wù)，隔絕外圍系統(tǒng)對(duì)數(shù)據(jù)的直接操作，以保證數(shù)據(jù)質(zhì)量的穩(wěn)定和系統(tǒng)的拓展?！ら_放性和靈活性

系統(tǒng)基于開放式平臺(tái)建設(shè)，系統(tǒng)的軟硬件都采用開放平臺(tái)。硬件解決方案滿足太保產(chǎn)險(xiǎn)硬件規(guī)劃，軟件解決方案遵循太保產(chǎn)險(xiǎn)軟件使用規(guī)范?！た蓴U(kuò)展性

采用層次化的架構(gòu)設(shè)計(jì)。層次與層次之間的規(guī)律分開，互不影響，系統(tǒng)具有高度的靈活性和可擴(kuò)展性。便于在不同的層次采用最適合的技術(shù)實(shí)現(xiàn)方式。通過提高每個(gè)層次的性能，從而使整個(gè)系統(tǒng)的性能得到保證；能夠充分利用各個(gè)產(chǎn)品軟件的優(yōu)勢(shì)，例如：數(shù)據(jù)庫軟件，應(yīng)用服務(wù)器中間件等等。

數(shù)據(jù)架構(gòu)設(shè)計(jì)上要考慮到太保產(chǎn)險(xiǎn)各分公司逐步推廣帶來的影響，在模型設(shè)計(jì)上要考慮按機(jī)構(gòu)進(jìn)行數(shù)據(jù)切分，并且可以簡(jiǎn)單支持產(chǎn)險(xiǎn)全司數(shù)據(jù)的應(yīng)用?！ぐ踩耘c可靠性

在數(shù)據(jù)內(nèi)容服務(wù)上采用完整的數(shù)據(jù)操作權(quán)限管理和數(shù)據(jù)脫敏機(jī)制，在系統(tǒng)的運(yùn)行能夠滿足日常營業(yè)時(shí)間內(nèi)服務(wù)，并且具備有較強(qiáng)的容錯(cuò)能力和良好的恢復(fù)能力·建立系統(tǒng)健康保證機(jī)制。

設(shè)立集中的異常狀況處理中心，建立系統(tǒng)一致性保障機(jī)制，統(tǒng)一考慮系統(tǒng)監(jiān)控、狀態(tài)控制、配置維護(hù)、流量控制、切換機(jī)制等?！ひ子眯浴⒏咝?/p>

從架構(gòu)模型上，采用成熟產(chǎn)品而易于使用和維護(hù)；通過分層結(jié)構(gòu)、分組服務(wù)滿足模塊在線測(cè)試、更新、加載。在數(shù)據(jù)庫模型和訪問機(jī)制上充分保證其運(yùn)轉(zhuǎn)的速度和效率?！ぬ岣呦到y(tǒng)吞吐量。

整個(gè)框架及其每個(gè)處理環(huán)節(jié)盡量采取無狀態(tài)的異步設(shè)計(jì)機(jī)制，縮短每個(gè)環(huán)節(jié)的服務(wù)時(shí)間窗口，避免重量級(jí)處理環(huán)節(jié)成為系統(tǒng)瓶頸?！た尚行?/p>

充分考慮太保產(chǎn)險(xiǎn)的計(jì)算機(jī)系統(tǒng)應(yīng)用現(xiàn)狀、業(yè)務(wù)規(guī)程和管理需要，并總結(jié)國內(nèi)各保險(xiǎn)公司在數(shù)據(jù)整合、智能核保方面的經(jīng)驗(yàn)，在成熟的模型和組件的基礎(chǔ)上，為太保產(chǎn)險(xiǎn)量身定制本系統(tǒng)的方案。

3.2.總體結(jié)構(gòu)與模塊

3.2.1.系統(tǒng)架構(gòu)圖及說明

三層體系結(jié)構(gòu)

車險(xiǎn)智能核保分析系統(tǒng)分為數(shù)據(jù)獲取層、數(shù)據(jù)存儲(chǔ)層和數(shù)據(jù)訪問層三層，其中數(shù)據(jù)獲取層又分為數(shù)據(jù)來源、抽取/加載兩個(gè)子層；數(shù)據(jù)訪問層又分為應(yīng)用平臺(tái)和分析人員兩個(gè)子層。如下圖所示：

業(yè)務(wù)用戶IT人員管理人員數(shù)據(jù)挖掘應(yīng)用平臺(tái)數(shù)據(jù)下載即席查詢主題分析記分卡管理記分卡預(yù)警核保模擬數(shù)據(jù)訪問層元數(shù)據(jù)管理/ETL調(diào)度管理/安全管理車險(xiǎn)核保集市車險(xiǎn)核保分析數(shù)據(jù)庫風(fēng)險(xiǎn)因子庫車險(xiǎn)整合層安全審計(jì)庫數(shù)據(jù)存儲(chǔ)層車險(xiǎn)原子層抽取加載源數(shù)據(jù)ETL/數(shù)據(jù)集中下發(fā)P09IDS系統(tǒng)車險(xiǎn)理賠系統(tǒng)車險(xiǎn)承保系統(tǒng)數(shù)據(jù)獲取層系統(tǒng)結(jié)構(gòu)圖(三層體系結(jié)構(gòu)示意圖)?數(shù)據(jù)獲取層：將P09IDS、車險(xiǎn)承保系統(tǒng)和車險(xiǎn)理賠系統(tǒng)中的數(shù)據(jù)，通過Datastage抽取或數(shù)據(jù)集中項(xiàng)目下發(fā)，加載至車險(xiǎn)核保分析數(shù)據(jù)庫。

?數(shù)據(jù)存儲(chǔ)層：對(duì)抽取自源業(yè)務(wù)系統(tǒng)的經(jīng)營數(shù)據(jù)進(jìn)行清洗和轉(zhuǎn)換，實(shí)現(xiàn)對(duì)車險(xiǎn)承保數(shù)據(jù)、核保評(píng)分表

數(shù)據(jù)、車輛風(fēng)險(xiǎn)因子數(shù)據(jù)和元數(shù)據(jù)的集中存儲(chǔ)與管理，并可根據(jù)需求建立面向分析主題的數(shù)據(jù)集市。

?數(shù)據(jù)訪問層：通過多樣化的前端分析展示工具，實(shí)現(xiàn)對(duì)車險(xiǎn)承保數(shù)據(jù)庫中數(shù)據(jù)的分析和處理，形成

核保所需要的科學(xué)、確鑿、及時(shí)的信息和知識(shí)；幫助業(yè)務(wù)人員高效靈活的建立核保參數(shù)評(píng)分表。

系統(tǒng)總體架構(gòu)

車險(xiǎn)智能核保分析系統(tǒng)總體架構(gòu)如下圖所示，由數(shù)據(jù)流、數(shù)據(jù)分類、工作流構(gòu)成三維架構(gòu)體系，從數(shù)據(jù)流的層面，分為數(shù)據(jù)抽取、數(shù)據(jù)加強(qiáng)、數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)應(yīng)用，從數(shù)據(jù)分類，分為原始業(yè)務(wù)數(shù)據(jù)存儲(chǔ)、業(yè)務(wù)整合數(shù)據(jù)存儲(chǔ)、主題數(shù)據(jù)集市、風(fēng)險(xiǎn)因子數(shù)據(jù)存儲(chǔ)、元數(shù)據(jù)存儲(chǔ)；從工作流的層面，分為系統(tǒng)管理、系統(tǒng)監(jiān)控、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量檢核。

數(shù)據(jù)源數(shù)據(jù)裝載原子層數(shù)據(jù)清洗歸并數(shù)據(jù)整合層元數(shù)據(jù)管理數(shù)據(jù)集市層應(yīng)用層客戶訪問層CognosP09IDS數(shù)據(jù)抽取(SP)車險(xiǎn)集市SP清單Cognos多維分析信息門戶(JAVA)車險(xiǎn)承保數(shù)據(jù)抽取車險(xiǎn)原子層數(shù)據(jù)加強(qiáng)(SP)車險(xiǎn)整合層客戶Web瀏覽器DSWeblogic車險(xiǎn)風(fēng)險(xiǎn)因子庫記分卡管理SP記分卡模擬記分卡預(yù)警核保引擎接口車險(xiǎn)理賠數(shù)據(jù)集中下發(fā)SAS服務(wù)器數(shù)據(jù)質(zhì)量檢核(SP+JAVA)系統(tǒng)管理及監(jiān)控(JAVA)系統(tǒng)總體架構(gòu)圖

3.2.2.主要系統(tǒng)簡(jiǎn)介

.車險(xiǎn)核保分析數(shù)據(jù)庫子系統(tǒng)

信息項(xiàng)模塊名稱模塊目標(biāo)內(nèi)容車險(xiǎn)核保分析數(shù)據(jù)庫子系統(tǒng)按一定策略保存整合車險(xiǎn)承保及車險(xiǎn)理賠數(shù)據(jù)，并設(shè)計(jì)車險(xiǎn)核保分析數(shù)據(jù)模型，定義各種數(shù)據(jù)字段，設(shè)計(jì)新的數(shù)據(jù)集市。包含單位名稱、理賠匯總、出險(xiǎn)次數(shù)、賠付率、續(xù)保前出險(xiǎn)次數(shù)、續(xù)保后出險(xiǎn)次數(shù)等指標(biāo)，擴(kuò)展可識(shí)別字段，用于數(shù)據(jù)分析研究；來自P09IDS\\車險(xiǎn)承保、車險(xiǎn)理賠系統(tǒng)內(nèi)的被保機(jī)動(dòng)車輛、保單、保費(fèi)、保批單、報(bào)案、立案、賠案等相關(guān)數(shù)據(jù)；車險(xiǎn)核保分析數(shù)據(jù)庫；1、實(shí)現(xiàn)分層的數(shù)據(jù)結(jié)構(gòu)，依照太保經(jīng)營過程中的業(yè)務(wù)實(shí)體（如保備注輸入輸出處理規(guī)律相關(guān)模塊相關(guān)系統(tǒng)單、車輛等事物）和業(yè)務(wù)活動(dòng)（如保批單、立案、賠案等行為）建立相對(duì)固定的業(yè)務(wù)對(duì)象模型，在原子層（原始業(yè)務(wù)數(shù)據(jù)存儲(chǔ)庫）中對(duì)業(yè)務(wù)對(duì)象進(jìn)行完整的、描述一致的存儲(chǔ)，其結(jié)構(gòu)與源系統(tǒng)保持一致；在數(shù)據(jù)整合層保存經(jīng)過數(shù)據(jù)清洗及業(yè)務(wù)關(guān)聯(lián)聚合等處理的數(shù)據(jù)；2、根據(jù)車險(xiǎn)智能核保分析系統(tǒng)需求設(shè)計(jì)車險(xiǎn)原子層數(shù)據(jù)模型，車險(xiǎn)整合層數(shù)據(jù)模型，車險(xiǎn)數(shù)據(jù)集市模型，車險(xiǎn)風(fēng)險(xiǎn)因子庫模型；3、根據(jù)車險(xiǎn)智能核保分析系統(tǒng)需求設(shè)計(jì)數(shù)據(jù)庫存儲(chǔ)規(guī)劃；車險(xiǎn)ETL子系統(tǒng)，車險(xiǎn)風(fēng)險(xiǎn)因子系統(tǒng)，車險(xiǎn)報(bào)表系統(tǒng)；.ETL子系統(tǒng)

ETL子系統(tǒng)元數(shù)據(jù)管理數(shù)據(jù)源數(shù)據(jù)裝載數(shù)據(jù)抽取(SP)車險(xiǎn)原子數(shù)據(jù)車險(xiǎn)整合數(shù)據(jù)原子層數(shù)據(jù)清洗歸并數(shù)據(jù)整合層數(shù)據(jù)集市層P09IDS車險(xiǎn)集市車險(xiǎn)承保數(shù)據(jù)抽取DS服務(wù)器加載數(shù)據(jù)規(guī)范化SP業(yè)務(wù)整合關(guān)聯(lián)匯總車險(xiǎn)理賠數(shù)據(jù)集中下發(fā)車險(xiǎn)風(fēng)險(xiǎn)因子庫數(shù)據(jù)質(zhì)量檢核(SP+Java)ETL調(diào)度(Java)

頁1信息項(xiàng)模塊名稱模塊目標(biāo)ETL架構(gòu)圖內(nèi)容ETL子系統(tǒng)；實(shí)現(xiàn)對(duì)源業(yè)務(wù)系統(tǒng)數(shù)據(jù)的增/全量抽取，加載入車險(xiǎn)智能核保系統(tǒng)；并對(duì)加載入系統(tǒng)的數(shù)據(jù)進(jìn)行清洗，實(shí)現(xiàn)車險(xiǎn)核保數(shù)據(jù)關(guān)聯(lián)、匯備注

輸入輸出處理規(guī)律相關(guān)模塊相關(guān)系統(tǒng)總等繁雜業(yè)務(wù)處理，以支持分析清單查詢、主題分析等業(yè)務(wù)應(yīng)用。P09IDS、車險(xiǎn)承保系統(tǒng)、車險(xiǎn)理賠系統(tǒng)的數(shù)據(jù)；車險(xiǎn)智能核保分析系統(tǒng)清洗、轉(zhuǎn)換、整合后數(shù)據(jù)；1、P09IDS、車險(xiǎn)承保系統(tǒng)的數(shù)據(jù)通過DS；車險(xiǎn)理賠系統(tǒng)通過數(shù)據(jù)集中將增/全量抽取到原子層；2、通過車險(xiǎn)承保數(shù)據(jù)庫的SP對(duì)車險(xiǎn)原子層數(shù)據(jù)清洗、轉(zhuǎn)換、增/全量加載到車險(xiǎn)整合層；3、通過OracleSP，對(duì)整合層數(shù)據(jù)分析、篩選、匯總后增/全量加載到車險(xiǎn)集市及風(fēng)險(xiǎn)因子庫；4、通過SP，實(shí)現(xiàn)源系統(tǒng)與原子層數(shù)據(jù)質(zhì)量校驗(yàn)，原子層與整合層數(shù)據(jù)質(zhì)量校驗(yàn)，保證數(shù)據(jù)的完整性，一致性與正確性。5、對(duì)ETL任務(wù)進(jìn)行統(tǒng)一、便捷化的管理記分卡管理模塊，核保模擬模塊，記分卡預(yù)警模塊，清單查詢模塊，多維分析模塊；P09IDS、車險(xiǎn)承保系統(tǒng)、車險(xiǎn)理賠系統(tǒng)，車險(xiǎn)智能核保系統(tǒng)；數(shù)據(jù)抽取及加載模塊

根據(jù)車險(xiǎn)智能核保分析系統(tǒng)的業(yè)務(wù)需求，把分布在P09IDS、車險(xiǎn)承保、車險(xiǎn)理賠系統(tǒng)中的原始數(shù)據(jù)完整地、一致地抽取出來并加載到車險(xiǎn)承保數(shù)據(jù)庫，數(shù)據(jù)抽取模塊支持歷史全量及日增量的數(shù)據(jù)抽?。?/p>

其中IDS、車險(xiǎn)承保系統(tǒng)數(shù)據(jù)的供方采用數(shù)據(jù)庫方式提供數(shù)據(jù)；車險(xiǎn)理賠系統(tǒng)的數(shù)據(jù)由數(shù)據(jù)集中系統(tǒng)提供，通過增量表的形式直接將數(shù)據(jù)加載入車險(xiǎn)承保數(shù)據(jù)庫原子層；

全量抽取加載實(shí)現(xiàn)描述：系統(tǒng)做全量數(shù)據(jù)抽取加載時(shí)對(duì)源系統(tǒng)相關(guān)表數(shù)據(jù)做全表抽取并加載入車險(xiǎn)智能核保分析系統(tǒng)數(shù)據(jù)庫的原子層。

增量數(shù)據(jù)抽取實(shí)現(xiàn)描述：

1.通過P09IDS系統(tǒng)內(nèi)的增量索引表進(jìn)行增量數(shù)據(jù)的判斷，即增量索引表的“時(shí)間戳+分公司代碼+業(yè)務(wù)主鍵〞，DataStage服務(wù)器依據(jù)增量索引對(duì)P09IDS系統(tǒng)及車險(xiǎn)承保系統(tǒng)內(nèi)數(shù)據(jù)進(jìn)行抽取；

2.由數(shù)據(jù)集中系統(tǒng)做增量的判斷，并抽取車險(xiǎn)理賠系統(tǒng)內(nèi)的增量數(shù)據(jù)；

P09IDS數(shù)據(jù)庫車險(xiǎn)承保系統(tǒng)數(shù)據(jù)庫車險(xiǎn)理賠系統(tǒng)數(shù)據(jù)庫數(shù)據(jù)同步狀態(tài)判斷是否同步完成數(shù)據(jù)集中增量索引獲取增量數(shù)據(jù)抽取車險(xiǎn)智能核保分析系統(tǒng)

備注：部分參數(shù)表無需做增量的判斷，每次做全表抽取即可。增量數(shù)據(jù)加載實(shí)現(xiàn)描述：

1.增量數(shù)據(jù)刪除：DataStage服務(wù)器通過抽取過來的P09IDS系統(tǒng)內(nèi)的增量索引“時(shí)間戳+分公司代碼+業(yè)務(wù)主鍵〞，對(duì)原子層數(shù)據(jù)進(jìn)行存在性判斷；若車險(xiǎn)核保分析數(shù)據(jù)庫中存在重復(fù)數(shù)據(jù)，則刪除。

2.DataStage服務(wù)器將抽取自P09IDS系統(tǒng)、車險(xiǎn)承保系統(tǒng)的增量數(shù)據(jù)插入車險(xiǎn)智能核保分析系統(tǒng)原子層。

3．車險(xiǎn)集中理賠系統(tǒng)的增量數(shù)據(jù)由數(shù)據(jù)集中系統(tǒng)直接加載入原子層接口表；

數(shù)據(jù)清洗模塊

根據(jù)車險(xiǎn)智能核保分析的業(yè)務(wù)需求，對(duì)不符合業(yè)務(wù)或技術(shù)規(guī)則的非法數(shù)據(jù)，以及不滿足車險(xiǎn)核保分析的數(shù)據(jù)進(jìn)行檢查和修復(fù)，并保存清洗字段的變化狀況便于核查；由于CPIC分公司分布在各省市，存在業(yè)務(wù)上的差距，且各地保監(jiān)會(huì)的政策不同，造成清洗規(guī)則不同，故數(shù)據(jù)清洗實(shí)現(xiàn)采用自定義SP的方式實(shí)現(xiàn)，數(shù)據(jù)清洗一般從以下幾個(gè)方面來檢驗(yàn)源數(shù)據(jù)的合格與否：

?關(guān)鍵字段是否為空；?字段類型格式的校驗(yàn)；?字段長度校驗(yàn)；

?字符是否包含中文，半角中文；

?其他業(yè)務(wù)規(guī)律清洗，拆單、合單、提車險(xiǎn)識(shí)別等；?數(shù)據(jù)清洗詳細(xì)步驟

1、保單數(shù)據(jù)集合過濾(所有數(shù)據(jù)以主表集合為標(biāo)準(zhǔn))。2、數(shù)據(jù)層面處理。

3、保單本身清洗。(無效身份證，駕駛員信息，渠道識(shí)別，車型名稱)。4、數(shù)據(jù)字段歷史還原。(車輛使用性質(zhì)清洗)5、車輛種類，使用性質(zhì)新舊轉(zhuǎn)換。6、交商匹配。7、車輛統(tǒng)一視圖。8、拆分，合并保單。9、續(xù)保識(shí)別。

數(shù)據(jù)轉(zhuǎn)換模塊

對(duì)清洗后的數(shù)據(jù)進(jìn)行相應(yīng)綜合加工，整合承保、理賠信息，生成各個(gè)數(shù)據(jù)分析模型所使用的事實(shí)數(shù)據(jù)，并根據(jù)已知的數(shù)據(jù)自動(dòng)計(jì)算其它未知的事實(shí)數(shù)據(jù)，例如賠付率，未決賠付金額等。數(shù)據(jù)轉(zhuǎn)換由于它自身的業(yè)務(wù)繁雜性，故采用自定義SP的方式實(shí)現(xiàn)，主要實(shí)現(xiàn)如下一些功能：

?代碼轉(zhuǎn)換；?格式標(biāo)準(zhǔn)化；?業(yè)務(wù)關(guān)聯(lián)；?業(yè)務(wù)聚合匯總；

車險(xiǎn)原子層à車險(xiǎn)整合層原子層數(shù)據(jù)層面清洗保單分公司代碼保單號(hào)終止日期中間表分公司代碼保單號(hào)終止日期整合層業(yè)務(wù)層面清洗、整合中間表渠道保單拆分1、處理空記錄2、格式轉(zhuǎn)換1、渠道轉(zhuǎn)換保單中間表保單分公司代碼+保單號(hào)1、去空格2、全角轉(zhuǎn)半角3、小寫轉(zhuǎn)大寫4、去特別字符1、車型名稱清洗2、使用性質(zhì)轉(zhuǎn)換3、車輛種類轉(zhuǎn)換分公司代碼+保單號(hào)保單合并中間表被保機(jī)動(dòng)車輛分公司代碼保單號(hào)VIN中間表車型名稱使用性質(zhì)車輛種類車型名稱使用性質(zhì)車輛種類車輛統(tǒng)一視圖唯一標(biāo)識(shí)頁1數(shù)據(jù)清洗轉(zhuǎn)換示意圖ETL調(diào)度模塊

通過用戶自己設(shè)定的時(shí)間或者系統(tǒng)設(shè)置的時(shí)間定時(shí)調(diào)度ETL裝載模塊，完成源數(shù)據(jù)抽取、清洗和轉(zhuǎn)換，同時(shí)有大量任務(wù)是規(guī)律無關(guān)的，可以并行執(zhí)行，但是又有大量任務(wù)是規(guī)律相關(guān)的，需要依靠其他任務(wù)的特定條件才能運(yùn)行；因此需根據(jù)依靠關(guān)系進(jìn)行數(shù)據(jù)處理。故ETL調(diào)度支持如下圖繁雜度的調(diào)度功能：

ABCDF執(zhí)行順序:1.A,D,E并行執(zhí)行;2.A,D完成后執(zhí)行B;3.D完成后執(zhí)行F;4.F,B完成后執(zhí)行C;5.E完成后執(zhí)行G.EG系統(tǒng)內(nèi)總體ETL處理時(shí)序如下圖所示

ETL業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)DS_JOB業(yè)業(yè)Java...JobSequence業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)SP業(yè)業(yè)業(yè)業(yè)SP業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)SP...業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)業(yè)SP...LOG

業(yè)業(yè)業(yè)1

數(shù)據(jù)質(zhì)量檢核模塊

為了保證整個(gè)數(shù)據(jù)處理過程中數(shù)據(jù)的完整性，將數(shù)據(jù)檢核分解為兩步：第一步檢核數(shù)據(jù)抽取過程，主要是檢查數(shù)據(jù)抽取過程中是否發(fā)生數(shù)據(jù)的遺失；其次步檢核數(shù)據(jù)在智能核保分析系統(tǒng)內(nèi)處理過程，主要是跟蹤數(shù)據(jù)的拆分、組合、轉(zhuǎn)換過程中，是否發(fā)生數(shù)據(jù)的遺失以及虛增。主要使用Oracle存儲(chǔ)過程實(shí)現(xiàn)

3.2.3.關(guān)鍵設(shè)計(jì)[可選]

風(fēng)險(xiǎn)因子設(shè)置、核保模擬、評(píng)分預(yù)警評(píng)分預(yù)警核保模擬用戶評(píng)分表設(shè)置1、顯示2、修改3、刪除輸入：1、評(píng)分表版本號(hào)2、起保日期段輸入：1、評(píng)分表版本號(hào)2、起保日期周期4、添加顯示家庭自用車評(píng)分表家庭自用車評(píng)分表結(jié)果1保單號(hào)版本起保日期評(píng)分結(jié)果家庭自用車評(píng)分表結(jié)果2版本起保日期段評(píng)分結(jié)果評(píng)分預(yù)警表特征分類描述版本起保日期段評(píng)分結(jié)果JAVA與SP交互層特征分類描述分類代碼權(quán)重分類分值版本保單表1保單號(hào)牌照號(hào)碼新車購置價(jià)起保日期保單表2保單號(hào)牌照號(hào)碼新車購置價(jià)起保日期SPjAVA車險(xiǎn)風(fēng)險(xiǎn)因子庫特征配置表特征分類代碼分類描述分類Min分類max此表存儲(chǔ)在車險(xiǎn)整合層頁1

實(shí)現(xiàn)描述：

前端輸入評(píng)分表版本與日期（篩選車險(xiǎn)風(fēng)險(xiǎn)因子庫數(shù)據(jù)集合）兩個(gè)參數(shù)并通過JAVA傳給SP調(diào)用家庭自用車評(píng)分表，觸發(fā)SP執(zhí)行車險(xiǎn)風(fēng)險(xiǎn)因子庫數(shù)據(jù)得出家庭自用車評(píng)分表結(jié)果1、家庭自用車評(píng)分表結(jié)果2與評(píng)分預(yù)警表，最終通過JAVA程序在WEB中浮現(xiàn)家庭自用車評(píng)分表結(jié)果1、家庭自用車評(píng)分表結(jié)果2與評(píng)分預(yù)警表。詳細(xì)步驟如下：

1、通過JAVA實(shí)現(xiàn)對(duì)家庭自用車評(píng)分表的顯示，修改，刪除，添加功能；

2、通過寫SP調(diào)用車險(xiǎn)風(fēng)險(xiǎn)因子庫中數(shù)據(jù)，家庭自用車評(píng)分表得出家庭自用車評(píng)分表結(jié)果1與家庭自

用車評(píng)分表結(jié)果2，等待JAVA觸發(fā)調(diào)用；

3、通過寫SP調(diào)用車險(xiǎn)風(fēng)險(xiǎn)因子庫中數(shù)據(jù)，家庭自用車評(píng)分表得出評(píng)分預(yù)警表，等待JAVA觸發(fā)調(diào)用；4、通過JAVA接收前端用戶輸入?yún)?shù)，觸發(fā)SP實(shí)現(xiàn)整個(gè)流程，并浮現(xiàn)結(jié)果數(shù)據(jù)。

3.3.周邊關(guān)系

3.3.1.周邊關(guān)系圖示

車險(xiǎn)智能核保分析系統(tǒng)不能作為一個(gè)應(yīng)用系統(tǒng)單獨(dú)存在，與周邊其他系統(tǒng)存在著緊湊的互為依存和融合關(guān)系，如下圖所示：

周邊關(guān)系P09IDS數(shù)據(jù)抽取車險(xiǎn)承保數(shù)據(jù)抽取CPIC車險(xiǎn)智能核保分析系統(tǒng)相互驗(yàn)證核保引擎系統(tǒng)車險(xiǎn)理賠下發(fā)中集數(shù)據(jù)頁1

3.3.2.接口定義

1、P09IDS、車險(xiǎn)承保、車險(xiǎn)理賠接口：車險(xiǎn)智能核保分析系統(tǒng)通過DS增、全量抽取P09IDS、車險(xiǎn)承

保、車險(xiǎn)理賠數(shù)據(jù)庫中的所需的數(shù)據(jù),日增量存入車險(xiǎn)原子層；

2、數(shù)據(jù)集中接