版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
支付系統(tǒng)風(fēng)控系統(tǒng)建設(shè)思考第三方電子支付是一個(gè)高風(fēng)險(xiǎn)的行業(yè),這就意味著第三方電子支付公司必然要與各種不確定性相伴。從風(fēng)險(xiǎn)受益的角度來看,第三方電子支付公司存在的價(jià)值不在于其能消滅不確定性,消滅風(fēng)險(xiǎn),而在于其能在對(duì)風(fēng)險(xiǎn)有較深入認(rèn)識(shí)的根底上控制和管理風(fēng)險(xiǎn),將風(fēng)險(xiǎn)配置到愿意并能承當(dāng)風(fēng)險(xiǎn)的主體,并使其獲得收益。風(fēng)險(xiǎn)控制系統(tǒng)目標(biāo)是實(shí)現(xiàn)對(duì)各個(gè)業(yè)務(wù)部門、渠道和產(chǎn)品線和相關(guān)人員監(jiān)測(cè),通過對(duì)運(yùn)營(yíng)業(yè)務(wù)交易的實(shí)時(shí)分析、事中和事后分析、跟蹤和處理的方法實(shí)現(xiàn)欺詐風(fēng)險(xiǎn)預(yù)警的自動(dòng)化。通過對(duì)交易的監(jiān)測(cè),可以識(shí)別那些是高風(fēng)險(xiǎn)交易,以及早發(fā)現(xiàn)其欺詐的可能性,并及時(shí)采取各種防范措施,由此來降低交易帶來的損失。1.管理框架第三方電子支付風(fēng)險(xiǎn)管理解決方案由風(fēng)險(xiǎn)戰(zhàn)略,組織架構(gòu)和管理流程組成。其中,風(fēng)險(xiǎn)戰(zhàn)略確實(shí)定是欺詐風(fēng)險(xiǎn)管理業(yè)務(wù)體制和運(yùn)作機(jī)制設(shè)計(jì)的根底;組織架構(gòu)確立風(fēng)險(xiǎn)管理運(yùn)作機(jī)制和相應(yīng)的組織管理模式,明確相關(guān)部門、人員、關(guān)鍵崗位分工和職責(zé);管理流程那么是一個(gè)完整的風(fēng)險(xiǎn)管理過程所包含的各個(gè)環(huán)節(jié)。各種風(fēng)險(xiǎn)管理的機(jī)制和體制需要通過統(tǒng)一的管理平臺(tái)來實(shí)現(xiàn)。統(tǒng)一的欺詐風(fēng)險(xiǎn)管理平臺(tái)包括監(jiān)測(cè)模塊、分析模塊和案件管理模塊。構(gòu)建風(fēng)險(xiǎn)管理平臺(tái)的關(guān)鍵技術(shù)是以合理標(biāo)準(zhǔn)的數(shù)據(jù)模型,建立整合的風(fēng)險(xiǎn)數(shù)據(jù)平臺(tái);以及針對(duì)內(nèi)部程序、人員和外部事件,實(shí)施有效的業(yè)務(wù)運(yùn)營(yíng)監(jiān)測(cè)。風(fēng)險(xiǎn)控制系統(tǒng)管理框架統(tǒng)一的風(fēng)險(xiǎn)控制系統(tǒng)包括三大模塊:監(jiān)測(cè)模塊、分析模塊和案件管理模塊。監(jiān)測(cè)模塊對(duì)支付平臺(tái)的運(yùn)營(yíng)作業(yè)進(jìn)行全面監(jiān)測(cè),將可疑行為信息和相關(guān)信息發(fā)送到分析模塊進(jìn)行分析確認(rèn),當(dāng)發(fā)現(xiàn)異常行為時(shí)發(fā)出警報(bào),將警報(bào)和與警報(bào)相關(guān)的信息都發(fā)送到分析模塊和案件管理模塊。分析模塊能對(duì)各種數(shù)據(jù)源進(jìn)行集成,對(duì)各種歷史數(shù)據(jù)進(jìn)行學(xué)習(xí)分析,通過數(shù)據(jù)挖掘建模定義出典型的行為特征,建立行為模式、場(chǎng)景,并制定欺詐風(fēng)險(xiǎn)監(jiān)測(cè)規(guī)那么。案件管理模塊最終將案件處理的數(shù)據(jù)反響到監(jiān)測(cè)模塊,從而增強(qiáng)監(jiān)測(cè)模塊對(duì)風(fēng)險(xiǎn)的監(jiān)測(cè)和識(shí)別能力。2.監(jiān)測(cè)模塊交易監(jiān)控系統(tǒng)要及時(shí)對(duì)交易進(jìn)行處理,在最短的時(shí)間內(nèi)對(duì)可能存在的交易風(fēng)險(xiǎn)進(jìn)行判別,準(zhǔn)確的報(bào)告欺詐等高風(fēng)險(xiǎn)交易,在第一時(shí)間提供詳盡的信息以協(xié)助工作人員對(duì)可疑交易進(jìn)行識(shí)別、處理。為保證這種效能,交易監(jiān)控系統(tǒng)需要采用準(zhǔn)實(shí)時(shí)、分布式的模式進(jìn)行交易處理。在部署上交易監(jiān)控系統(tǒng)和交易系統(tǒng)應(yīng)當(dāng)支持分布式部署,在不同的主機(jī)系統(tǒng)上部署,系統(tǒng)間通過可靠的消息中間件進(jìn)行信息的傳遞,降低系統(tǒng)間的耦合度,保證交易系統(tǒng)的高性能,同時(shí)也可以通過前置機(jī)方式來降低交易系統(tǒng)對(duì)信息處理的負(fù)荷。交易系統(tǒng)在接收到主機(jī)的交易信息,及時(shí)地發(fā)送至交易監(jiān)控系統(tǒng);而交易監(jiān)控系統(tǒng)的接收端也要及時(shí)地處理發(fā)送至交易監(jiān)控系統(tǒng)的分析審查信息。當(dāng)一筆交易進(jìn)入交易系統(tǒng)后,系統(tǒng)會(huì)根據(jù)業(yè)務(wù)規(guī)那么進(jìn)行處理,完成以后系統(tǒng)會(huì)給這筆交易返回一個(gè)結(jié)果代碼〔批準(zhǔn)或拒絕〕。在整個(gè)交易處理完成之后,主機(jī)將交易信息下傳至前置系統(tǒng)。交易系統(tǒng)接到聯(lián)機(jī)交易后,通過消息隊(duì)列將此筆交易信息傳送到交易監(jiān)控系統(tǒng),在交易監(jiān)控系統(tǒng)內(nèi)部進(jìn)行交易情況分析及報(bào)警處理。交易系統(tǒng)除了向交易監(jiān)控系統(tǒng)傳送交易信息外,還需提供客戶的根本信息例如狀態(tài)等資料。交易監(jiān)控系統(tǒng)將從前置系統(tǒng)的jms消息隊(duì)列中接收交易系統(tǒng)主機(jī)發(fā)送的交易信息。上述交易信息將由前置系統(tǒng)所在平臺(tái)上的接口程序與帳戶資料、卡片資料等信息組合后形成一個(gè)XML報(bào)文,通過jms消息隊(duì)列傳送給運(yùn)行在交易系統(tǒng)平臺(tái)上的交易監(jiān)控系統(tǒng)接口程序,經(jīng)監(jiān)控系統(tǒng)接口處理后通過jms隊(duì)列送入交易監(jiān)控系統(tǒng)。為保證交易監(jiān)控系統(tǒng)和交易系統(tǒng)間信息的同步,可采用數(shù)據(jù)庫的replication機(jī)制來保證數(shù)據(jù)的實(shí)時(shí)同步;也可以采用程序或存儲(chǔ)過程來實(shí)時(shí)同步核心數(shù)據(jù)〔例如客戶資料的變動(dòng)〕,定時(shí)同步其他數(shù)據(jù)的方式。3.分析模塊分析模塊采用商業(yè)智能技術(shù)來構(gòu)建風(fēng)險(xiǎn)控制系統(tǒng)的風(fēng)險(xiǎn)分析引擎,采用商業(yè)智能技術(shù)可以對(duì)海量數(shù)據(jù)快捷的存儲(chǔ)和提取,基于數(shù)據(jù)的分析、操縱,建模,穩(wěn)定的報(bào)表能力,多用戶支持能力,再結(jié)合有效的信息權(quán)限控制、風(fēng)險(xiǎn)預(yù)警模型、風(fēng)險(xiǎn)預(yù)測(cè)、信息整合等,就能夠有效進(jìn)行電子支付系統(tǒng)的風(fēng)險(xiǎn)管理。商業(yè)智能在風(fēng)險(xiǎn)控制中所起的作用:數(shù)據(jù)準(zhǔn)備:數(shù)據(jù)準(zhǔn)備主要是從源數(shù)據(jù)中,提取有效的指標(biāo)數(shù)據(jù)、預(yù)算數(shù)據(jù)、交易匯總數(shù)據(jù)等,并轉(zhuǎn)換到總體的數(shù)據(jù)倉庫或風(fēng)險(xiǎn)管理的數(shù)據(jù)集市中,其本質(zhì)是實(shí)現(xiàn)從操作型數(shù)據(jù)源到分析型數(shù)據(jù)變換。分析模版定義:對(duì)各種分析內(nèi)容進(jìn)行分類,同時(shí)明確風(fēng)險(xiǎn)管理方面的各個(gè)數(shù)據(jù)主題模版定義,包括風(fēng)險(xiǎn)評(píng)級(jí),風(fēng)險(xiǎn)分析,風(fēng)險(xiǎn)預(yù)測(cè)幾個(gè)模版定義,提供給風(fēng)險(xiǎn)分析內(nèi)容進(jìn)行調(diào)用。風(fēng)險(xiǎn)分析:目前已有多種風(fēng)險(xiǎn)分析度量模型,如根本指標(biāo)法、標(biāo)準(zhǔn)化方法、內(nèi)部衡量法、損失分布法、極值理論模型等,可根據(jù)銀行業(yè)務(wù)需求建立。這一階段主要是運(yùn)用這些模型來對(duì)風(fēng)險(xiǎn)進(jìn)行分析,確定數(shù)據(jù)的維度、事實(shí)表、量度等信息,根據(jù)維度來分析各個(gè)指標(biāo)和預(yù)測(cè)信息。自動(dòng)化分析:利用商業(yè)智能軟件提供的功能,并根據(jù)已經(jīng)定義的風(fēng)險(xiǎn)分析內(nèi)容,由系統(tǒng)自動(dòng)到數(shù)據(jù)倉庫系統(tǒng)進(jìn)行優(yōu)化分析,加載與鉆取這些風(fēng)險(xiǎn)內(nèi)容。定量、定性分析報(bào)告:根據(jù)系統(tǒng)的自動(dòng)化分析,生成各種定量和定性的分析指標(biāo)報(bào)告。4.案件管理案例管理系統(tǒng)采用神經(jīng)元網(wǎng)絡(luò)技術(shù),構(gòu)筑有學(xué)習(xí)能力的交易模式識(shí)別的案例庫。神經(jīng)元網(wǎng)絡(luò)技術(shù)對(duì)于交易模式的變化,可再造學(xué)習(xí)模型和案例庫。用戶可以通過對(duì)其應(yīng)用模型的更新,來適應(yīng)新的交易模式和欺詐形式的變化,提高對(duì)欺詐交易的識(shí)別和控制能力。案件管理模塊最終將案件處理的數(shù)據(jù)反響到監(jiān)測(cè)模塊,從而增強(qiáng)監(jiān)測(cè)模塊對(duì)欺詐風(fēng)險(xiǎn)的監(jiān)測(cè)和識(shí)別能力。一旦某個(gè)交易被確認(rèn)為是欺詐行為,案件管理模塊會(huì)對(duì)這些相關(guān)數(shù)據(jù)、潛在的客戶聯(lián)系和影響進(jìn)行管理以及對(duì)客戶賬戶進(jìn)行必要的調(diào)整。該模塊作為面向業(yè)務(wù)用戶的展現(xiàn)層,將實(shí)現(xiàn)全面有效的案件管理,完成對(duì)欺詐的預(yù)防和調(diào)查。5、風(fēng)險(xiǎn)監(jiān)控系統(tǒng)架構(gòu)6、參考資料IBM:整合管理平臺(tái),躲避欺詐風(fēng)險(xiǎn):銀行業(yè)全面提升操作風(fēng)險(xiǎn)管理水平://sybase.mx/files/Legal_Docs/Sybase_CEP.pdf://smartcitychina/upload/2013-12/13121109345350.pdf第三方支付風(fēng)控系統(tǒng)是如何運(yùn)作的?如何搭建?系統(tǒng)架構(gòu)如何?時(shí)間:2014-4-1620:38:11核心提示:第三方電子支付是一個(gè)高風(fēng)險(xiǎn)的行業(yè),這就意味著第三方電子支付公司必然要與各種不確定性相伴。從風(fēng)險(xiǎn)受益的角度來看,第三方電子支付公司存在的價(jià)值不在于其能消滅不確定性,消滅風(fēng)險(xiǎn),而在于其能在對(duì)風(fēng)險(xiǎn)有較深入認(rèn)...第三方電子支付是一個(gè)高風(fēng)險(xiǎn)的行業(yè),這就意味著第三方電子支付公司必然要與各種不確定性相伴。從風(fēng)險(xiǎn)受益的角度來看,第三方電子支付公司存在的價(jià)值不在于其能消滅不確定性,消滅風(fēng)險(xiǎn),而在于其能在對(duì)風(fēng)險(xiǎn)有較深入認(rèn)識(shí)的根底上控制和管理風(fēng)險(xiǎn),將風(fēng)險(xiǎn)配置到愿意并能承當(dāng)風(fēng)險(xiǎn)的主體,并使其獲得收益。風(fēng)險(xiǎn)控制系統(tǒng)目標(biāo)是實(shí)現(xiàn)對(duì)各個(gè)業(yè)務(wù)部門、渠道和產(chǎn)品線和相關(guān)人員監(jiān)測(cè),通過對(duì)運(yùn)營(yíng)業(yè)務(wù)交易的實(shí)時(shí)分析、事中和事后分析、跟蹤和處理的方法實(shí)現(xiàn)欺詐風(fēng)險(xiǎn)預(yù)警的自動(dòng)化。通過對(duì)交易的監(jiān)測(cè),可以識(shí)別那些是高風(fēng)險(xiǎn)交易,以及早發(fā)現(xiàn)其欺詐的可能性,并及時(shí)采取各種防范措施,由此來降低交易帶來的損失。一個(gè)新產(chǎn)品需要重點(diǎn)考慮業(yè)務(wù)風(fēng)險(xiǎn)控制。關(guān)于風(fēng)險(xiǎn)控制系統(tǒng)整體的技術(shù)方案。此方案盡管能夠滿足業(yè)務(wù)需求,但對(duì)于海量交易數(shù)據(jù)分析、風(fēng)險(xiǎn)事件的實(shí)時(shí)處理、大量的風(fēng)險(xiǎn)規(guī)那么處理上,在實(shí)時(shí)性、性能、架構(gòu)的可擴(kuò)展性上都不是很理想,有必要重新從架構(gòu)上考慮一下實(shí)現(xiàn)方案。
一般而言,風(fēng)險(xiǎn)控制系統(tǒng)標(biāo)準(zhǔn)的軟件架構(gòu)如下:
1、風(fēng)控系統(tǒng)實(shí)現(xiàn)的幾種方案
1)、數(shù)據(jù)庫方案:將風(fēng)險(xiǎn)規(guī)那么、交易數(shù)據(jù)等都采用關(guān)系數(shù)據(jù)庫存放。正如支付系統(tǒng)風(fēng)控系統(tǒng)建設(shè)思考所提到的方案,交易庫和風(fēng)險(xiǎn)庫一般分別部署在不同的效勞器上,在事件觸發(fā)上可以采用數(shù)據(jù)庫觸發(fā)器、消息隊(duì)列事件等方案。此種方案技術(shù)實(shí)現(xiàn)相對(duì)簡(jiǎn)單,但在進(jìn)行海量交易數(shù)據(jù)查詢以及大量風(fēng)險(xiǎn)規(guī)那么處理時(shí)候,數(shù)據(jù)庫系統(tǒng)查詢性能及擴(kuò)展性成為一個(gè)較大的瓶頸。很難滿足風(fēng)險(xiǎn)事件實(shí)時(shí)分析的要求。
2)、內(nèi)存數(shù)據(jù)庫方案:由于對(duì)海量交易數(shù)據(jù)的查詢、分析極其消耗數(shù)據(jù)庫資源,可以采用內(nèi)存數(shù)據(jù)庫方案來替代關(guān)系數(shù)據(jù)庫,保證風(fēng)險(xiǎn)事件實(shí)時(shí)處理的性能。但目前開源的內(nèi)存數(shù)據(jù)中VoltDB、H2、MonetDB、FastDB、BerkeleyDB、SQLite等在大規(guī)模的業(yè)務(wù)場(chǎng)合應(yīng)用的成熟度尚待考察,而OracleTimesTen、MCObjecteXtremeDB、Altibase價(jià)格太高。
3)、分布式緩存方案:采用Memcached等NOSQL的分布式緩存來緩存交易數(shù)據(jù)、風(fēng)險(xiǎn)規(guī)那么等,但由于NOSQL解決方案并不擅長(zhǎng)數(shù)據(jù)間的關(guān)系邏輯處理,需要在程序中大量維護(hù)業(yè)務(wù)處理邏輯,遠(yuǎn)不如關(guān)系數(shù)據(jù)庫或內(nèi)存數(shù)據(jù)庫方案方便。
以上方案,都可以通過規(guī)那么引擎〔例如drools〕來完成風(fēng)險(xiǎn)規(guī)那么的管理和維護(hù),防止了風(fēng)險(xiǎn)規(guī)那么維護(hù)的繁瑣及規(guī)那么間復(fù)雜關(guān)系處理。
ComplexEventProcessing(復(fù)雜事件處理)是一種新興的基于事件流的技術(shù),它將系統(tǒng)數(shù)據(jù)看作不同類型的事件,通過分析事件間的關(guān)系,建立不同的事件關(guān)系序列庫,利用過濾、關(guān)聯(lián)、聚合等技術(shù),最終由簡(jiǎn)單事件產(chǎn)生高級(jí)事件或商業(yè)流程。CEP適合的場(chǎng)景包括實(shí)時(shí)風(fēng)險(xiǎn)管理、實(shí)時(shí)交易分析、網(wǎng)絡(luò)詐欺、網(wǎng)絡(luò)攻擊、市場(chǎng)趨勢(shì)分析等等。
CEP的幾大特點(diǎn):基于數(shù)據(jù)流時(shí)間序列實(shí)時(shí)復(fù)雜
支付系統(tǒng)風(fēng)控系統(tǒng)建設(shè)思考1.管理框架第三方電子支付風(fēng)險(xiǎn)管理解決方案由風(fēng)險(xiǎn)戰(zhàn)略,組織架構(gòu)和管理流程組成。其中,風(fēng)險(xiǎn)戰(zhàn)略確實(shí)定是欺詐風(fēng)險(xiǎn)管理業(yè)務(wù)體制和運(yùn)作機(jī)制設(shè)計(jì)的根底;組織架構(gòu)確立風(fēng)險(xiǎn)管理運(yùn)作機(jī)制和相應(yīng)的組織管理模式,明確相關(guān)部門、人員、關(guān)鍵崗位分工和職責(zé);管理流程那么是一個(gè)完整的風(fēng)險(xiǎn)管理過程所包含的各個(gè)環(huán)節(jié)。各種風(fēng)險(xiǎn)管理的機(jī)制和體制需要通過統(tǒng)一的管理平臺(tái)來實(shí)現(xiàn)。統(tǒng)一的欺詐風(fēng)險(xiǎn)管理平臺(tái)包括監(jiān)測(cè)模塊、分析模塊和案件管理模塊。構(gòu)建風(fēng)險(xiǎn)管理平臺(tái)的關(guān)鍵技術(shù)是以合理標(biāo)準(zhǔn)的數(shù)據(jù)模型,建立整合的風(fēng)險(xiǎn)數(shù)據(jù)平臺(tái);以及針對(duì)內(nèi)部程序、人員和外部事件,實(shí)施有效的業(yè)務(wù)運(yùn)營(yíng)監(jiān)測(cè)。統(tǒng)一的風(fēng)險(xiǎn)控制系統(tǒng)包括三大模塊:監(jiān)測(cè)模塊、分析模塊和案件管理模塊。監(jiān)測(cè)模塊對(duì)支付平臺(tái)的運(yùn)營(yíng)作業(yè)進(jìn)行全面監(jiān)測(cè),將可疑行為信息和相關(guān)信息發(fā)送到分析模塊進(jìn)行分析確認(rèn),當(dāng)發(fā)現(xiàn)異常行為時(shí)發(fā)出警報(bào),將警報(bào)和與警報(bào)相關(guān)的信息都發(fā)送到分析模塊和案件管理模塊。分析模塊能對(duì)各種數(shù)據(jù)源進(jìn)行集成,對(duì)各種歷史數(shù)據(jù)進(jìn)行學(xué)習(xí)分析,通過數(shù)據(jù)挖掘建模定義出典型的行為特征,建立行為模式、場(chǎng)景,并制定欺詐風(fēng)險(xiǎn)監(jiān)測(cè)規(guī)那么。案件管理模塊最終將案件處理的數(shù)據(jù)反響到監(jiān)測(cè)模塊,從而增強(qiáng)監(jiān)測(cè)模塊對(duì)風(fēng)險(xiǎn)的監(jiān)測(cè)和識(shí)別能力。1.監(jiān)測(cè)模塊交易監(jiān)控系統(tǒng)要及時(shí)對(duì)交易進(jìn)行處理,在最短的時(shí)間內(nèi)對(duì)可能存在的交易風(fēng)險(xiǎn)進(jìn)行判別,準(zhǔn)確的報(bào)告欺詐等高風(fēng)險(xiǎn)交易,在第一時(shí)間提供詳盡的信息以協(xié)助工作人員對(duì)可疑交易進(jìn)行識(shí)別、處理。為保證這種效能,交易監(jiān)控系統(tǒng)需要采用準(zhǔn)實(shí)時(shí)、分布式的模式進(jìn)行交易處理。在部署上交易監(jiān)控系統(tǒng)和交易系統(tǒng)應(yīng)當(dāng)支持分布式部署,在不同的主機(jī)系統(tǒng)上部署,系統(tǒng)間通過可靠的消息中間件進(jìn)行信息的傳遞,降低系統(tǒng)間的耦合度,保證交易系統(tǒng)的高性能,同時(shí)也可以通過前置機(jī)方式來降低交易系統(tǒng)對(duì)信息處理的負(fù)荷。交易系統(tǒng)在接收到主機(jī)的交易信息,及時(shí)地發(fā)送至交易監(jiān)控系統(tǒng);而交易監(jiān)控系統(tǒng)的接收端也要及時(shí)地處理發(fā)送至交易監(jiān)控系統(tǒng)的分析審查信息。當(dāng)一筆交易進(jìn)入交易系統(tǒng)后,系統(tǒng)會(huì)根據(jù)業(yè)務(wù)規(guī)那么進(jìn)行處理,完成以后系統(tǒng)會(huì)給這筆交易返回一個(gè)結(jié)果代碼〔批準(zhǔn)或拒絕〕。在整個(gè)交易處理完成之后,主機(jī)將交易信息下傳至前置系統(tǒng)。交易系統(tǒng)接到聯(lián)機(jī)交易后,通過消息隊(duì)列將此筆交易信息傳送到交易監(jiān)控系統(tǒng),在交易監(jiān)控系統(tǒng)內(nèi)部進(jìn)行交易情況分析及報(bào)警處理。交易系統(tǒng)除了向交易監(jiān)控系統(tǒng)傳送交易信息外,還需提供客戶的根本信息例如狀態(tài)等資料。交易監(jiān)控系統(tǒng)將從前置系統(tǒng)的jms消息隊(duì)列中接收交易系統(tǒng)主機(jī)發(fā)送的交易信息。上述交易信息將由前置系統(tǒng)所在平臺(tái)上的接口程序與帳戶資料、卡片資料等信息組合后形成一個(gè)XML報(bào)文,通過jms消息隊(duì)列傳送給運(yùn)行在交易系統(tǒng)平臺(tái)上的交易監(jiān)控系統(tǒng)接口程序,經(jīng)監(jiān)控系統(tǒng)接口處理后通過jms隊(duì)列送入交易監(jiān)控系統(tǒng)。為保證交易監(jiān)控系統(tǒng)和交易系統(tǒng)間信息的同步,可采用數(shù)據(jù)庫的replication機(jī)制來保證數(shù)據(jù)的實(shí)時(shí)同步;也可以采用程序或存儲(chǔ)過程來實(shí)時(shí)同步核心數(shù)據(jù)〔例如客戶資料的變動(dòng)〕,定時(shí)同步其他數(shù)據(jù)的方式。3.分析模塊分析模塊采用商業(yè)智能技術(shù)來構(gòu)建風(fēng)險(xiǎn)控制系統(tǒng)的風(fēng)險(xiǎn)分析引擎,采用商業(yè)智能技術(shù)可以對(duì)海量數(shù)據(jù)快捷的存儲(chǔ)和提取,基于數(shù)據(jù)的分析、操縱,建模,穩(wěn)定的報(bào)表能力,多用戶支持能力,再結(jié)合有效的信息權(quán)限控制、風(fēng)險(xiǎn)預(yù)警模型、風(fēng)險(xiǎn)預(yù)測(cè)、信息整合等,就能夠有效進(jìn)行電子支付系統(tǒng)的風(fēng)險(xiǎn)管理。商業(yè)智能在風(fēng)險(xiǎn)控制中所起的作用:a.數(shù)據(jù)準(zhǔn)備:數(shù)據(jù)準(zhǔn)備主要是從源數(shù)據(jù)中,提取有效的指標(biāo)數(shù)據(jù)、預(yù)算數(shù)據(jù)、交易匯總數(shù)據(jù)等,并轉(zhuǎn)換到總體的數(shù)據(jù)倉庫或風(fēng)險(xiǎn)管理的數(shù)據(jù)集市中,其本質(zhì)是實(shí)現(xiàn)從操作型數(shù)據(jù)源到分析型數(shù)據(jù)變換。b.分析模版定義:
對(duì)各種分析內(nèi)容進(jìn)行分類,同時(shí)明確風(fēng)險(xiǎn)管理方面的各個(gè)數(shù)據(jù)主題模版定義,包括風(fēng)險(xiǎn)評(píng)級(jí),風(fēng)險(xiǎn)分析,風(fēng)險(xiǎn)預(yù)測(cè)幾個(gè)模版定義,提供給風(fēng)險(xiǎn)分析內(nèi)容進(jìn)行調(diào)用。c.風(fēng)險(xiǎn)分析:
目前已有多種風(fēng)險(xiǎn)分析度量模型,如根本指標(biāo)法、標(biāo)準(zhǔn)化方法、內(nèi)部衡量法、損失分布法、極值理論模型等,可根據(jù)銀行業(yè)務(wù)需求建立。這一階段主要是運(yùn)用這些模型來對(duì)風(fēng)險(xiǎn)進(jìn)行分析,確定數(shù)據(jù)的維度、事實(shí)表、量度等信息,根據(jù)維度來分析各個(gè)指標(biāo)和預(yù)測(cè)信息。d.自動(dòng)化分析:利用商業(yè)智能軟件提供的功能,并根據(jù)已經(jīng)定義的風(fēng)險(xiǎn)分析內(nèi)容,由系統(tǒng)自動(dòng)到數(shù)據(jù)倉庫系統(tǒng)進(jìn)行優(yōu)化分析,加載與鉆取這些風(fēng)險(xiǎn)內(nèi)容。e.定量、定性分析報(bào)告:
根據(jù)系統(tǒng)的自動(dòng)化分析,生成各種定量和定性的分析指標(biāo)報(bào)告。SybaseCEP:資本市場(chǎng)中的復(fù)雜事件處理引言二十一世紀(jì)的泰坦尼克號(hào)歷史也許會(huì)將雷曼兄弟公司的倒閉視為2007年到2009年的這場(chǎng)信貸危機(jī)并導(dǎo)致金融效勞機(jī)構(gòu)巨變的標(biāo)志性事件??雌饋?,華爾街巨頭之一的雷曼兄弟公司最不可能倒閉,因?yàn)樗鼡碛械娘L(fēng)險(xiǎn)管理系統(tǒng)和資產(chǎn)負(fù)債系統(tǒng)被認(rèn)為能夠抵御任何的風(fēng)暴。而事實(shí)上,擊沉雷曼兄弟公司的冰山是抵押擔(dān)保證券。雖然在2007年中,它已經(jīng)引起了市場(chǎng)的“關(guān)注”,但其深層次所包含的原因卻絕非單一。這就和20世紀(jì)泰坦尼克號(hào)的結(jié)局類似—雷曼兄弟公司的倒閉僅僅是序幕的開始,而非結(jié)束。這是市場(chǎng)劇烈變動(dòng)的信號(hào),存在著新的危機(jī),同時(shí)也有新的機(jī)遇。本文將展示由于市場(chǎng)變動(dòng)急劇加快,呈指數(shù)級(jí)增長(zhǎng)的數(shù)據(jù)量以及日益復(fù)雜的數(shù)據(jù)和工具所帶來的影響,并介紹一種名為復(fù)雜事件處理(CEP)的新技術(shù),它旨在加強(qiáng)市場(chǎng)分析平臺(tái),并幫助金融效勞機(jī)構(gòu)鑒別并獲得新的盈利時(shí)機(jī),同時(shí)減少風(fēng)險(xiǎn)。復(fù)雜事件處理(CEP)簡(jiǎn)介在金融效勞和其他行業(yè)中,如何使那些重要且具有戰(zhàn)略意義的業(yè)務(wù)信息以高速數(shù)據(jù)流的方式到達(dá)企業(yè)變得尤其重要,而復(fù)雜事件處理(CEP)就是這一過程的代名詞。復(fù)雜事件處理是一項(xiàng)用于構(gòu)建和管理信息系統(tǒng)的新興技術(shù),它是通過定義事件操作代數(shù)對(duì)底層的原始事件進(jìn)行聚合,并通過在規(guī)那么或查詢語言中引用事件代數(shù)操作不斷過濾連續(xù)到達(dá)的事件流,利用事件間的關(guān)聯(lián)、事件提取以及事件分層等技術(shù),從而由原始事件查詢,從多個(gè)事件中提取有意義的、符合應(yīng)用需求的復(fù)雜事件,供系統(tǒng)的不同使用者提取各自需要的信息。在復(fù)雜事件處理中,數(shù)據(jù)是不斷變化的,而“操作”是“靜態(tài)”的——“操作”是用戶預(yù)定義或訂閱的規(guī)那么,根據(jù)預(yù)定義或訂閱的規(guī)那么來發(fā)現(xiàn)可能原本不被注意的模式和趨勢(shì)(即復(fù)雜事件),從而使用戶有能力建模、確認(rèn)、預(yù)計(jì)及迅速響應(yīng)看似無關(guān)的事件所帶來的機(jī)遇和威脅。也就是說,復(fù)雜事件處理具備了分析高速數(shù)據(jù)流并鑒別重要事件的能力,而這些重要事件通常是按照一定順序或在特定時(shí)間段內(nèi)發(fā)生在多個(gè)數(shù)據(jù)點(diǎn)的組合,雖然對(duì)這些事件的鑒別過程是復(fù)雜的,但結(jié)果卻是無價(jià)的。復(fù)雜事件處理能夠幫助企業(yè)及時(shí)全面地洞察市場(chǎng)變化,降低風(fēng)險(xiǎn)和提高決策效率。在當(dāng)今的金融市場(chǎng)中,不可預(yù)測(cè)的市場(chǎng)事件(見“二十一世紀(jì)的泰坦尼克號(hào)”)和歷史上的高度波動(dòng)(見圖1)顯示著市場(chǎng)變動(dòng)正在急劇加快,加之諸如衍生品之類的新工具的出現(xiàn),都使得市場(chǎng)環(huán)境和事件的復(fù)雜程度逐步增加。顯而易見,市場(chǎng)分析遇到了前所未有的困難,也就要求所有資本市場(chǎng)的機(jī)構(gòu)必須具備執(zhí)行復(fù)雜交易和風(fēng)險(xiǎn)分析的能力。SybaseCEP的非凡價(jià)值——實(shí)時(shí)分析能力為了滿足企業(yè)對(duì)能支持實(shí)時(shí)分析、高速交易的應(yīng)用程序的需求,Sybase開創(chuàng)了強(qiáng)大的復(fù)雜事件處理(CEP)引擎。它能夠從多個(gè)數(shù)據(jù)源中吸收新的數(shù)據(jù),并在數(shù)據(jù)之間創(chuàng)立關(guān)系從而能鑒別出代表時(shí)機(jī)和問題的模式??稍谑录鎯?chǔ)到磁盤之前,能實(shí)時(shí)持續(xù)分析多個(gè)事件流。它通過使用大量原始而重要的數(shù)據(jù)流,將跨多個(gè)流的事件關(guān)聯(lián)起來,從而能夠鑒別出新的關(guān)聯(lián)業(yè)務(wù)條件并在毫秒(或更短)的時(shí)間內(nèi)對(duì)這些事件做出響應(yīng)。正因?yàn)榫邆淞嗽L問流式數(shù)據(jù)、實(shí)時(shí)數(shù)據(jù)和歷史數(shù)據(jù)的能力,該產(chǎn)品能迅速地讓智能的決定生效。另外,SybaseCEP同樣可用來生成簡(jiǎn)潔、信息豐富的流并將它們分發(fā)至下游的系統(tǒng)、應(yīng)用程序和歷史庫中。在資本市場(chǎng)中,SybaseCEP能夠鑒別有價(jià)值的市場(chǎng)事件,并通知包括諸如交易系統(tǒng)或風(fēng)險(xiǎn)管理系統(tǒng)之類的其它系統(tǒng),以確保企業(yè)能夠快速并高效應(yīng)對(duì)市場(chǎng)中的重要商業(yè)事件。在這方面,SybaseCEP就猶如“獨(dú)眼王”——不斷實(shí)時(shí)監(jiān)測(cè)市場(chǎng)變化,并支持公司克服之前曾經(jīng)遇到過的障礙,提高決策能力。事實(shí)上,SybaseCEP解決方案在高速度、高容量的環(huán)境下極具價(jià)值。原因就是SybaseCEP使用與傳統(tǒng)商務(wù)智能系統(tǒng)完全不同的方法來進(jìn)行數(shù)據(jù)分析。傳統(tǒng)的方法是——捕獲數(shù)據(jù),將其結(jié)構(gòu)化為一種固定的格式,將數(shù)據(jù)存儲(chǔ)在基于磁盤的數(shù)據(jù)倉庫中,然后定期在這些數(shù)據(jù)之上運(yùn)行報(bào)表。SybaseCEP與之不同的是它在數(shù)據(jù)到達(dá)時(shí)即檢查數(shù)據(jù),甚至在其被存儲(chǔ)至磁盤之前。SybaseCEP鑒別重要事件的能力幾乎是實(shí)時(shí)的,并能從最新的數(shù)據(jù)中抽取出商務(wù)智能,形成多種用途。在實(shí)時(shí)鑒別重要事件之外,SybaseCEP的事件驅(qū)動(dòng)機(jī)制還能告訴用戶在何時(shí)采取應(yīng)對(duì)行動(dòng)?!凹词故窃诋?dāng)今衰退的市場(chǎng)環(huán)境中,這項(xiàng)改變(事件驅(qū)動(dòng)機(jī)制)將得以加速采用,因?yàn)閮H僅問問題顯而易見已經(jīng)無濟(jì)于事了,”最近IDC報(bào)告的作者評(píng)價(jià)SybaseCEP。在CEP的幫助下,業(yè)務(wù)將變得更加靈活、敏捷,且能根據(jù)實(shí)時(shí)信息管理它們的風(fēng)險(xiǎn)。根據(jù)IDC的研究分析報(bào)告《復(fù)雜事件處理是時(shí)機(jī)分析和評(píng)估的重要產(chǎn)品》(作者為MaureenFleming和JeffSilverstein),它將支持更頻繁、更全面的決策。實(shí)時(shí)市場(chǎng)分析對(duì)于機(jī)構(gòu)的重要作用不可動(dòng)替代,它在發(fā)揮這一作用的同時(shí),也給機(jī)構(gòu)帶來了非凡的價(jià)值——實(shí)時(shí)風(fēng)險(xiǎn)管理、實(shí)時(shí)交易和市場(chǎng)數(shù)據(jù)的梳理與提煉。實(shí)時(shí)市場(chǎng)分析的價(jià)值之一——實(shí)時(shí)風(fēng)險(xiǎn)管理“風(fēng)險(xiǎn)分析市場(chǎng)剛剛起步。對(duì)于供給商來說,可以通過提供創(chuàng)新的產(chǎn)品來優(yōu)化性能,從而抓住巨大的商機(jī)。受創(chuàng)的華爾街需要尋找能在交易周期內(nèi)提供更好效率的解決方案?!盩owerGroup的高級(jí)分析師TomPrice總結(jié)出“效率”是實(shí)時(shí)市場(chǎng)分析的迫切需求。目前來看,面對(duì)數(shù)據(jù)分析時(shí)間是以毫秒來計(jì)算的市場(chǎng)環(huán)境,實(shí)時(shí)風(fēng)險(xiǎn)管理已迅速成為當(dāng)今最頂級(jí)資本公司首當(dāng)其沖的需求,而在許多機(jī)構(gòu)內(nèi)部,風(fēng)險(xiǎn)管理也正經(jīng)歷著巨大而深刻的變革。眾所周知,所有類型的風(fēng)險(xiǎn)管理——從信貸、交易對(duì)手風(fēng)險(xiǎn)到組合投資以及流動(dòng)性風(fēng)險(xiǎn),都影響著商業(yè)的開展。而重要的市場(chǎng)事件能從本質(zhì)上影響企業(yè)運(yùn)作中風(fēng)險(xiǎn)的情況,所以企業(yè)需要對(duì)其進(jìn)行實(shí)時(shí)監(jiān)控。但是,僅僅簡(jiǎn)單地對(duì)潛在的危機(jī)事件進(jìn)行鑒別是遠(yuǎn)遠(yuǎn)不夠的,風(fēng)險(xiǎn)分析需要以一種超越以往的速率進(jìn)行,以往隔夜的報(bào)表處理已然太過普通,許多機(jī)構(gòu)都希望能在數(shù)分鐘內(nèi)執(zhí)行風(fēng)險(xiǎn)評(píng)估,這樣才能確保他們能做出更加及時(shí)和高效的應(yīng)對(duì)行動(dòng)。而對(duì)于交易對(duì)手風(fēng)險(xiǎn)來說,機(jī)構(gòu)也需要每天屢次計(jì)算所暴露的風(fēng)險(xiǎn),并通過在最初就正確調(diào)整產(chǎn)品定價(jià)從而驅(qū)動(dòng)業(yè)務(wù)決策。以上需求正是促使SybaseCEP和SybaseRAP—交易版得以組合誕生的原因。這一版本可實(shí)現(xiàn)對(duì)流式數(shù)據(jù)的低延遲分析,能令風(fēng)險(xiǎn)處理的速度最高加快至1,000倍,從而實(shí)現(xiàn)分鐘級(jí)別的風(fēng)險(xiǎn)評(píng)估,幫助企業(yè)機(jī)構(gòu)及時(shí)作出決策,搶占收益時(shí)機(jī)。實(shí)時(shí)市場(chǎng)分析的價(jià)值之二——實(shí)時(shí)交易今天的市場(chǎng)環(huán)境已使電子交易加快至不可想象的程度——每秒的消息速率超過百萬,交易窗口常常小于一毫秒。顯然,在這樣的速率下,人力已不可能做出正常、正確的交易決策,所以需要算法交易系統(tǒng)來代替人力做出更多決策。算法交易系統(tǒng)根據(jù)預(yù)定義的模型發(fā)送或執(zhí)行訂單,通常,這些模型依賴于諸如成交量加權(quán)平均(VWAP)或時(shí)間加權(quán)平均(TWAP)之類的法那么,傳統(tǒng)的數(shù)據(jù)庫計(jì)算模式是先將數(shù)據(jù)存儲(chǔ)到磁盤然后執(zhí)行復(fù)雜數(shù)據(jù)庫計(jì)算,耗時(shí)較長(zhǎng)。而在SybaseCEP的幫助下,實(shí)現(xiàn)了“在數(shù)據(jù)流入企業(yè)時(shí)就根據(jù)各法那么類型進(jìn)行計(jì)算”的計(jì)算模式,這不僅在性能上提高了很多,更能滿足在當(dāng)今市場(chǎng)的速率下處理數(shù)據(jù)流的需求。同時(shí),通過與SybaseRAP交易版的配合使用,還可用來鑒別交易時(shí)機(jī),豐富決策支持的過程,并支持交易系統(tǒng)生成并執(zhí)行更低風(fēng)險(xiǎn)和更高利潤(rùn)的訂單。其實(shí),SybaseCEP與SybaseRAP—交易版組合的價(jià)值還不止于此,“能夠創(chuàng)立新的風(fēng)險(xiǎn)模型和交易策略”是這一組合的另一顯著優(yōu)勢(shì)。同時(shí)它還可將歷史數(shù)據(jù)從SybaseRAP交易版中取出,并屢次將實(shí)時(shí)市場(chǎng)數(shù)據(jù)送入SybaseCEP中進(jìn)行回溯檢驗(yàn),這一功能不但支持了對(duì)交易算法和風(fēng)險(xiǎn)模型的不斷改良,也成為在競(jìng)爭(zhēng)機(jī)構(gòu)的不同算法系統(tǒng)之間贏取勝利而不可或缺的要素。實(shí)時(shí)市場(chǎng)分析的價(jià)值之三——市場(chǎng)數(shù)據(jù)梳理與提煉為了能更加迅速地應(yīng)對(duì)市場(chǎng)事件,使用超短延遲的數(shù)據(jù)輸入非常重要。但實(shí)際上,獲得最快速的數(shù)據(jù)可能有兩個(gè)缺點(diǎn)——第一,數(shù)據(jù)中可能包含錯(cuò)誤;第二,數(shù)據(jù)信息通常是非常根底的。于是,為了從這些高速、低延遲的輸入中獲取最具價(jià)值的內(nèi)容信息,對(duì)這些數(shù)據(jù)進(jìn)行梳理和提煉就成為必須要解決的問題。在SybaseCEP的幫助下,企業(yè)能夠創(chuàng)立復(fù)雜的過濾器來識(shí)別錯(cuò)誤數(shù)據(jù)并插入評(píng)估值。另外,正如我們?cè)谇懊婵匆姷?,SybaseCEP能計(jì)算移動(dòng)平均數(shù)和其他值以及較復(fù)雜的導(dǎo)出值如索引、風(fēng)險(xiǎn)模型等;客戶端應(yīng)用程序幾乎不用額外的編程即可使用這些經(jīng)過提煉的數(shù)據(jù),并能快速高效地促進(jìn)交易的決策、執(zhí)行和風(fēng)險(xiǎn)管理。結(jié)語目前,強(qiáng)大的復(fù)雜事件處理引擎SybaseCEP正支持金融效勞機(jī)構(gòu)以近乎實(shí)時(shí)的方式分析并應(yīng)對(duì)重要的市場(chǎng)事件,并提煉流入的市場(chǎng)數(shù)據(jù)。同時(shí),SybaseCEP與SybaseRAP—交易版同心協(xié)力,以高速的回溯能力不斷提升交易策略和風(fēng)險(xiǎn)模型,以驚人的高速度支持著更深層次的分析,從而進(jìn)一步促進(jìn)交易決策和風(fēng)險(xiǎn)管理,令Sybase的客戶能領(lǐng)先市場(chǎng),領(lǐng)先競(jìng)爭(zhēng)對(duì)手。復(fù)雜事件處理技術(shù)在金融領(lǐng)域的應(yīng)用導(dǎo)讀:本文介紹了復(fù)雜事件處理技術(shù)在金融領(lǐng)域的應(yīng)用,CEP技術(shù)會(huì)結(jié)合實(shí)時(shí)的數(shù)據(jù)進(jìn)行分析各種正在發(fā)生的事件之間的因果關(guān)系。關(guān)鍵詞:CEP
復(fù)雜事件處理
商業(yè)智能
【TechTarget中國(guó)原創(chuàng)】在金融交易領(lǐng)域,每一分每一秒都是珍貴的。拿銀行來說,在進(jìn)行歐元兌換美元的操作時(shí),市場(chǎng)是一直在浮動(dòng)的,而在何時(shí)進(jìn)行交易將對(duì)未來是否能夠獲利起到至關(guān)重要的作用。投機(jī)不是一個(gè)好的選擇,許多家銀行都已經(jīng)轉(zhuǎn)而使用復(fù)雜事件處理技術(shù)來決定何時(shí)進(jìn)行交易才能將利潤(rùn)最大化。CEP技術(shù)會(huì)結(jié)合實(shí)時(shí)的數(shù)據(jù)進(jìn)行分析各種正在發(fā)生的事件之間的因果關(guān)系。它根本上是使用過去發(fā)生過的基于事件的數(shù)據(jù),來尋找模式并預(yù)測(cè)有可能的結(jié)果。舉個(gè)例子,比方上面所說的外匯兌換市場(chǎng),CEP可以幫助銀行區(qū)分何時(shí)美元對(duì)歐元的匯率最高,從而實(shí)施交易的時(shí)候才能證明其最有利可圖。在這樣的場(chǎng)景下,即使是很小的一個(gè)變化都會(huì)引起數(shù)額巨大的差異,特別是對(duì)那些大的銀行而言,每天都要有成千上萬筆交易發(fā)生。英國(guó)金融研究機(jī)構(gòu)ClientKnowledge首席分析師JustynTrenner表示:“從盈利到虧損,在金融領(lǐng)域可是說只是一瞬間的事。而大多數(shù)銀行并沒有一個(gè)像樣的分析系統(tǒng)來捕捉這一時(shí)刻。”而有了復(fù)雜事件處理技術(shù)之后,這一切即將改變。在ClientKnowledge接手的許多客戶當(dāng)中,由于利用CEP技術(shù)而使得利潤(rùn)率增長(zhǎng)了多達(dá)10%到20%。許多公司都削減了交易執(zhí)行和監(jiān)控的人員崗位,取而代之將他們安排在更需要人手的崗位上,從而提高了工作效率。CEP技術(shù)在諸多的企業(yè)分析管理技術(shù)當(dāng)中屬于較為高端的技術(shù),因此復(fù)雜程度可想而知,而部署該系統(tǒng)對(duì)于客戶來說已經(jīng)算不上什么巨大的挑戰(zhàn)了。用戶需要將一些商業(yè)規(guī)那么寫入系統(tǒng)以作為基于CEP決策的根本框架,這些規(guī)那么將適用于大多數(shù)銀行和金融公司。Trenner表示:“真正的挑戰(zhàn)來源于用戶是否擁有概念性貿(mào)易和良好的數(shù)學(xué)技能,這樣才能將CEP技術(shù)發(fā)揮到極致。這對(duì)于大多數(shù)銀行來說應(yīng)該是最困難的局部?!盩renner認(rèn)為在銀行領(lǐng)域中,CEP技術(shù)的采用率還處在一個(gè)相對(duì)較低的階段,他希望在未來看到CEP技術(shù)可以進(jìn)入更多的金融領(lǐng)域,比方利率和固定收入交易領(lǐng)域。他總結(jié)說:“萬語千言匯成一句話:銀行領(lǐng)域并不缺少使用CEP技術(shù)的時(shí)機(jī),就看誰能有眼光可以抓住這樣的時(shí)機(jī)?!边B續(xù)性智能推動(dòng)“實(shí)時(shí)”分析應(yīng)用日期:2011-3-4來源:Sybase中國(guó)
Sybase
我要評(píng)論\o"大號(hào)字體"大|\o"中號(hào)字體"中|\o"小號(hào)字體"小投稿\o"打印本文章"打印導(dǎo)讀:為了滿足連續(xù)性智能對(duì)應(yīng)用平臺(tái)的苛刻要求,保證其分析性能在企業(yè)業(yè)務(wù)中的有效發(fā)揮,Sybase開創(chuàng)了可擴(kuò)展的、更靈活的下一代復(fù)雜事件處理(CEP)平臺(tái)。關(guān)鍵詞:Sybase
復(fù)雜事件處理
CEP
商業(yè)智能
分析應(yīng)用
時(shí)至今日,在全球化市場(chǎng)、多樣化客戶行為、復(fù)雜的產(chǎn)品經(jīng)銷鏈以及變化多端的動(dòng)態(tài)效勞等多種因素的催化下,商業(yè)環(huán)境正以前所未有的速度發(fā)生著快速地變化,在無比復(fù)雜的商業(yè)環(huán)境以及不斷增加的海量數(shù)據(jù)的雙重挑戰(zhàn)下,為了保持競(jìng)爭(zhēng)力,企業(yè)需要快速、實(shí)時(shí)、準(zhǔn)確地挖掘數(shù)據(jù)背后的信息,分析商業(yè)環(huán)境的波動(dòng),從而區(qū)分利潤(rùn)時(shí)機(jī)與威脅,采取行動(dòng)來保護(hù)或增加利潤(rùn)。然而,這樣的狀況時(shí)有出現(xiàn)——?jiǎng)觼y且快速變化的金融市場(chǎng)掩蓋了交易時(shí)機(jī)、客戶利潤(rùn)增長(zhǎng)以及因市場(chǎng)、交易、訂單數(shù)據(jù)加速波動(dòng)而帶來的風(fēng)險(xiǎn);促進(jìn)客戶購置或減少客戶流失的時(shí)機(jī)隱藏在各種渠道的客戶交流和交易數(shù)據(jù)中;隱藏在大量復(fù)雜效勞的使用、網(wǎng)絡(luò)、RFID和傳感器數(shù)據(jù)中的大量緊急問題將造成利潤(rùn)流失,或者因效勞受阻、低劣的工作執(zhí)行力、庫存缺貨等構(gòu)成的風(fēng)險(xiǎn)……。由于分析方法的限制,隱藏在數(shù)據(jù)背后的關(guān)鍵信息往往未能被企業(yè)實(shí)時(shí)獲取。如何幫助企業(yè)洞悉海量數(shù)據(jù)背后的時(shí)機(jī)與威脅、最大化地發(fā)揮數(shù)據(jù)對(duì)企業(yè)行動(dòng)的良性效用,以上各種狀況都對(duì)數(shù)據(jù)分析提出了更智能化的要求。傳統(tǒng)分析方法的詬病與日俱增的業(yè)務(wù)對(duì)提交迅速的、可付諸行動(dòng)的數(shù)據(jù)分析技術(shù)提出各種新的要求,這也使得企業(yè)在建立實(shí)時(shí)的分析應(yīng)用方面面臨著前所未有的困難——如何從不同的客戶和運(yùn)營(yíng)接觸點(diǎn)收集到大量的、不斷變化的數(shù)據(jù)?如何將這些數(shù)據(jù)同現(xiàn)有客戶和運(yùn)營(yíng)信息進(jìn)行整合,并提供完整的商業(yè)情境?如何持續(xù)分析快速變化的信息,從而確定問題和時(shí)機(jī),提交正確的行動(dòng)方案?如要同時(shí)解決上述問題,在傳統(tǒng)的分析方法面前,企業(yè)只有兩個(gè)選擇:一個(gè)是啟動(dòng)一個(gè)耗時(shí)長(zhǎng)、投資高的開發(fā)工程,用于創(chuàng)建定制的應(yīng)用;另一個(gè)那么是嘗試部署復(fù)雜又不連貫的BI進(jìn)程,將信息快速推送到BI堆棧。而這兩種選擇無一例外地需要消耗大量珍貴的時(shí)間與資金,在目前“毫秒必爭(zhēng)”的商業(yè)環(huán)境中,幾秒鐘的時(shí)間便能影響企業(yè)的盈虧,因此很多企業(yè)不得不放棄這兩種選擇而另謀他法。無法與“時(shí)”俱“進(jìn)”的傳統(tǒng)分析方法迫使BI和數(shù)據(jù)管理團(tuán)隊(duì)必須建立一種可以與企業(yè)數(shù)據(jù)進(jìn)行同步、“實(shí)時(shí)”的分析應(yīng)用系統(tǒng)?!皩?shí)時(shí)”分析方法——連續(xù)性智能?讓企業(yè)擺脫桎梏為了解決企業(yè)決策者和一線職員對(duì)“實(shí)時(shí)”信息進(jìn)行分析、建議和低本高效等的強(qiáng)烈需求,一種新的分析方法——連續(xù)性智能?應(yīng)運(yùn)而生,它從快速變化、“實(shí)時(shí)”的數(shù)據(jù)中提取最直接的信息,同時(shí)為一線人員制定立即可行的行動(dòng)以增長(zhǎng)利潤(rùn)、解決客戶問題、降低風(fēng)險(xiǎn),幫助企業(yè)更深入的分析市場(chǎng)、交易和運(yùn)營(yíng)數(shù)據(jù)。尤其在各種高挑戰(zhàn)行業(yè)中,連續(xù)性智能?在加速企業(yè)執(zhí)行力方面的優(yōu)異表現(xiàn)更是無與倫比。在金融市場(chǎng),很多大型機(jī)構(gòu)、銷售方公司和代理商每天從客戶收到、管理、執(zhí)行大量且持續(xù)增長(zhǎng)的訂單,領(lǐng)先的連續(xù)性智能?可以幫助決策者最大化地挖掘并利用隱藏在訂單流中的關(guān)鍵信息——交易人員能夠掌握不同證券、部門、投資種類、貨幣、市場(chǎng)之間的投資資本轉(zhuǎn)移,以便做出即時(shí)的交易決定;運(yùn)營(yíng)經(jīng)理能夠觀測(cè)不同的交易柜臺(tái)、地區(qū)、訂單種類、業(yè)務(wù)線和執(zhí)行地點(diǎn)的狀況和執(zhí)行時(shí)間,從而采取適當(dāng)?shù)牟襟E突破交易瓶頸;風(fēng)險(xiǎn)管理人員能夠監(jiān)測(cè)來自交易人、交易柜臺(tái)、業(yè)務(wù)線、客戶、投資種類等持續(xù)不斷的訂單所累積的風(fēng)險(xiǎn)并采取適當(dāng)?shù)牟襟E來躲避交易或?qū)_頭寸。依靠連續(xù)性智能?,無論企業(yè)每天執(zhí)行的交易量是百萬還是上億,企業(yè)都可以在極精細(xì)的層面整合并且分析訂單流和執(zhí)行情況,它的實(shí)時(shí)分析功能都能夠輕松區(qū)分執(zhí)行問題和交易趨勢(shì),確保迅速地執(zhí)行。在電子商務(wù)行業(yè),網(wǎng)絡(luò)貿(mào)易運(yùn)作需要將現(xiàn)實(shí)商店中的銷售和效勞模式導(dǎo)入電子商務(wù)站點(diǎn)中,假設(shè)在互聯(lián)網(wǎng)上成功實(shí)現(xiàn)這種模式就需要企業(yè)系統(tǒng)具備從點(diǎn)擊流和電子交易等大量、復(fù)雜的數(shù)據(jù)中進(jìn)行篩選的能力,通過連續(xù)性智能?,企業(yè)能夠持續(xù)地分析所有的顧客數(shù)據(jù)——從實(shí)時(shí)的點(diǎn)擊流和交易數(shù)據(jù),到歷史活動(dòng)和交易,維持一個(gè)實(shí)時(shí)、詳細(xì)的顧客概況,并由實(shí)時(shí)分析產(chǎn)生恰當(dāng)?shù)摹⒓磿r(shí)的行動(dòng)——優(yōu)先考慮并組織現(xiàn)階段顧客所關(guān)注的產(chǎn)品或效勞內(nèi)容;綜合考慮當(dāng)前顧客的興趣、行為、過往特征和交易數(shù)據(jù),提交個(gè)性化的交叉銷售或衍生銷售;綜合考慮當(dāng)前顧客行為以及過往的效勞問題,提供相應(yīng)的效勞以留住顧客等等。在競(jìng)爭(zhēng)極其劇烈的通信效勞業(yè),由于顧客可以隨時(shí)改變業(yè)務(wù)提供商,因此每一位顧客都代表著一個(gè)當(dāng)前、未來或已失去的收益源,那些看似并無太大價(jià)值的呼叫詳細(xì)記錄、效勞使用數(shù)據(jù)、呼叫中心記錄、互聯(lián)網(wǎng)客服應(yīng)用點(diǎn)擊流等大量的實(shí)時(shí)數(shù)據(jù)源背后卻隱藏著能夠驅(qū)動(dòng)效勞供給商即時(shí)行動(dòng)的關(guān)鍵信息。通過連續(xù)性智能?,通訊效勞供給商可以整合并分析這些實(shí)時(shí)客戶數(shù)據(jù),維持詳細(xì)、精確的客戶概況以及客戶分析,從而驅(qū)動(dòng)即時(shí)行動(dòng)——在不同的客戶接觸點(diǎn)如電子商務(wù)、客服網(wǎng)站、公用亭和零售店提供個(gè)性化、即時(shí)的交叉銷售和衍生銷售;采取主動(dòng)行動(dòng)解決客戶問題,糾正客戶效勞中斷或其他問題;積極保存客戶以減少客戶流失和未來收入損失的風(fēng)險(xiǎn),來最大化企業(yè)利潤(rùn)。除了以上競(jìng)爭(zhēng)極其劇烈的行業(yè),連續(xù)性智能?還可以應(yīng)用在諸如通信、電信、網(wǎng)絡(luò)、物流、運(yùn)輸和政府等面臨著實(shí)時(shí)分析高挑戰(zhàn)的行業(yè),幫助這些行業(yè)應(yīng)對(duì)海量增長(zhǎng)的數(shù)據(jù)量及不斷增長(zhǎng)的數(shù)據(jù)分析業(yè)務(wù)壓力、實(shí)現(xiàn)利潤(rùn)最大化和降低風(fēng)險(xiǎn)的業(yè)務(wù)目標(biāo)。連續(xù)性智能?如此神通廣闊,那么要實(shí)現(xiàn)其有效且高效的分析性能,企業(yè)平臺(tái)需要具備怎樣的條件呢?首先,一個(gè)快速、靈活的分析根底架構(gòu)是必要的,因?yàn)橹挥羞@樣的平臺(tái)才能低本高效地實(shí)現(xiàn)實(shí)時(shí)分析應(yīng)用,加速前線決策和行動(dòng),從而使市場(chǎng)執(zhí)行力更為迅速。另外,軟件平臺(tái)還必須具備如下能力——能夠提供持續(xù)及“實(shí)時(shí)”地分析結(jié)果、產(chǎn)生可擴(kuò)展的動(dòng)態(tài)實(shí)時(shí)分析、在不同處理速度下靈活提交分析信息、為全面語境、精確度提供深層次的信息、能夠驅(qū)動(dòng)即時(shí)建議和行動(dòng)、提供訪問實(shí)時(shí)信息的簡(jiǎn)易途徑及支持快速、靈活的分析開發(fā)過程等等。由此可見,連續(xù)性智能?是一個(gè)對(duì)軟件平臺(tái)有較高要求的應(yīng)用,而被業(yè)界譽(yù)為“最正確復(fù)雜事件處理(CEP)解決方案提供商”——Sybase的復(fù)雜事件處理(CEP)平臺(tái)可滿足上述全部要求。分析時(shí)代的“核武器”——Sybase復(fù)雜事件處理(CEP)平臺(tái)幫助企業(yè)實(shí)現(xiàn)高效分析夢(mèng)想在當(dāng)今瞬息萬變的競(jìng)爭(zhēng)環(huán)境中,次秒級(jí)和毫秒級(jí)數(shù)據(jù)正得到企業(yè)前所未有的重視,為了滿足企業(yè)對(duì)能支持實(shí)時(shí)分析、高速交易的應(yīng)用程序的需求,截至目前,Sybase已開創(chuàng)了強(qiáng)大的復(fù)雜事件處理(CEP)平臺(tái)——第一代和下一代復(fù)雜事件處理(CEP)引擎。第一代復(fù)雜事件處理(CEP)平臺(tái)——SybaseCEP因其具備高速處理引擎、易于使用的類SQL開發(fā)語言、高效的開發(fā)套件及可更快速、更低本高效的實(shí)時(shí)分析應(yīng)用而著稱。它能夠從多個(gè)數(shù)據(jù)源中吸收新的數(shù)據(jù),并在數(shù)據(jù)之間創(chuàng)立關(guān)系從而能鑒別出代表時(shí)機(jī)和問題的模式??稍谑录鎯?chǔ)到磁盤之前,能實(shí)時(shí)持續(xù)分析多個(gè)事件流。它通過使用大量原始而重要的數(shù)據(jù)流,將跨多個(gè)流的事件關(guān)聯(lián)起來,從而能夠鑒別出新的關(guān)聯(lián)業(yè)務(wù)條件并在毫秒(或更短)的時(shí)間內(nèi)對(duì)這些事件做出響應(yīng)。正因?yàn)榫邆淞嗽L問流式數(shù)據(jù)、實(shí)時(shí)數(shù)據(jù)和歷史數(shù)據(jù)的能力,該產(chǎn)品能迅速地讓智能的決定生效。然而,SybaseCEP也有著明顯的缺乏之處——僅“流通”式的處理模式使結(jié)果僅限于有限的、靜態(tài)的維度,下游的客戶那么只有“通過高速的訂閱”一種方式訪問數(shù)據(jù),該平臺(tái)在以上兩個(gè)方面的缺陷大大地限制了更廣泛的分析。為了滿足連續(xù)性智能?對(duì)應(yīng)用平臺(tái)的苛刻要求,保證其分析性能在企業(yè)業(yè)務(wù)中的有效發(fā)揮,在第一代SybaseCEP引擎的根底上,Sybase開創(chuàng)了可擴(kuò)展的、更靈活的下一代復(fù)雜事件處理(CEP)平臺(tái)——SybaseAleriStreaming。作為高性能的、專為在最苛刻的環(huán)境中部署企業(yè)級(jí)應(yīng)用而設(shè)計(jì)的企業(yè)級(jí)CEP引擎,這一平臺(tái)有效地結(jié)合了高速事件處理技術(shù)與用于數(shù)據(jù)倉庫分析中傳統(tǒng)技術(shù)的優(yōu)異之處,它將性能、多樣性與易用性融于一爐,擁有最小的延遲和最大化的吞吐量,可用于快速實(shí)施和部署各種需要對(duì)事件數(shù)據(jù)進(jìn)行實(shí)時(shí)分析與響應(yīng)的應(yīng)用,支持一系列連續(xù)性智能?應(yīng)用,使一線決策者在市場(chǎng)中擁有更快的執(zhí)行力。智領(lǐng)下一代分析——SybaseAleriStreaming引擎的非凡價(jià)值作為目前世界上最先進(jìn)復(fù)雜事件處理技術(shù)的代表,下一代復(fù)雜事件處理(CEP)平臺(tái)——SybaseAleriStreaming引擎具有哪些非凡價(jià)值呢?非凡價(jià)值之一:大規(guī)模連續(xù)性“實(shí)時(shí)”分析結(jié)果為了解決某些領(lǐng)域比方金融交易中時(shí)常發(fā)生的“延時(shí)”問題,SybaseAleriStreaming平臺(tái)以C/C++開發(fā),可部署于不同的操作系統(tǒng),能夠提交毫秒級(jí)的低延時(shí)分析、最大限度的減小延時(shí)。不僅如此,SybaseAleriStreaming平臺(tái)通過高性能的架構(gòu)與先進(jìn)的可動(dòng)態(tài)管理大規(guī)模實(shí)時(shí)數(shù)據(jù)分析生成的復(fù)雜負(fù)載的優(yōu)化器來聯(lián)合實(shí)現(xiàn)高速吞吐(每個(gè)CPU核每秒40萬條信息);同時(shí),該平臺(tái)還可以通過高度優(yōu)化的內(nèi)存管理和并行執(zhí)行來管理大規(guī)模的實(shí)時(shí)信息集,并可擴(kuò)展至數(shù)千萬的實(shí)時(shí)記錄。這兩種特性的結(jié)合使SybaseAleriStreaming平臺(tái)對(duì)大規(guī)模的實(shí)時(shí)信息從廣泛的譜維和度量上產(chǎn)生分析結(jié)果。非凡價(jià)值之二:可擴(kuò)展的動(dòng)態(tài)分析眾所周知,根本數(shù)據(jù)的復(fù)制是一項(xiàng)昂貴的進(jìn)程。第一代復(fù)雜事件處理(CEP)平臺(tái)——SybaseCEP產(chǎn)品所提供的共享窗口(SharedWindows)高級(jí)特性可有效地從不同的維度和度量對(duì)實(shí)時(shí)信息進(jìn)行擴(kuò)展和分析。而類似于物化視圖(MaterializedViews)允許關(guān)系型數(shù)據(jù)庫擴(kuò)展數(shù)據(jù)倉庫的功能,共享SharedWindows允許實(shí)時(shí)信息在新的維度集上被重新索引化和聚合,大大節(jié)約了本錢。事實(shí)上,這些都對(duì)SybaseAleriStreaming平臺(tái)從不同維度高效地度量分析、聚合相同的根底數(shù)據(jù)起到了積極的作用,從而滿足了不同業(yè)務(wù)部門的需求。與第一代CEP引擎只能產(chǎn)生流或事件輸出不同,SybaseAleriStreaming引擎還為基于分析結(jié)果的個(gè)性化查詢需求提供了動(dòng)態(tài)查詢和過濾處理的訂閱,并能夠管理大量的動(dòng)態(tài)查詢和過濾結(jié)果,為大客戶量的用戶提供基于多種維度和度量的結(jié)果。非凡價(jià)值之三:以不同處理速度提交連續(xù)性智能?需要為各類用戶在不同速度和模式下的執(zhí)行進(jìn)程提供信息分析支持,在這一前提下,Sybase提供了各種訪問實(shí)時(shí)分析結(jié)果的方式,比方動(dòng)態(tài)的或組合的連續(xù)查詢能夠?qū)⑤敵觥獜目焖龠\(yùn)動(dòng)的分析結(jié)果到離散的警報(bào),以流方式提交到實(shí)時(shí)儀表板或自動(dòng)執(zhí)行行動(dòng)的下游應(yīng)用程序;支持面向結(jié)果集的、通過標(biāo)準(zhǔn)SQL來實(shí)現(xiàn)查詢實(shí)時(shí)結(jié)果的“快照查詢(Snapshotqueries)工具”;使用戶不僅可以在得到當(dāng)前結(jié)果,還可繼續(xù)了解最新更新的“快照加更新查詢(Snapshot-Plus-Updatesqueries)”等等。這些功能幫助用戶在面對(duì)不同的業(yè)務(wù)進(jìn)程時(shí)能夠選用適當(dāng)?shù)乃俣仍L問實(shí)時(shí)分析結(jié)果,或在下游應(yīng)用中生成自動(dòng)的行動(dòng)。非凡價(jià)值之四:全語境下的信息深度連續(xù)性智能?通過詳細(xì)的分析生成一對(duì)一的、個(gè)性化的行動(dòng),這就要求實(shí)時(shí)信息、數(shù)據(jù)倉庫必須與應(yīng)用中的歷史數(shù)據(jù)、參考數(shù)據(jù)進(jìn)行整合,才能產(chǎn)生準(zhǔn)確、全語境下的建議和行動(dòng)。于是,即插即用的整合公司數(shù)據(jù)庫和應(yīng)用數(shù)據(jù)的能力將成為必要。SybaseAleriStreaming通過數(shù)據(jù)庫子查詢和異步數(shù)據(jù)寫入(Asynchronousdatawrites)工具,提供了與關(guān)系型數(shù)據(jù)庫內(nèi)部整合的能力——當(dāng)“異步數(shù)據(jù)寫入”將實(shí)時(shí)事件和分析結(jié)果高速輸入到長(zhǎng)期存儲(chǔ)的數(shù)據(jù)倉庫時(shí),“數(shù)據(jù)庫子查詢”將分析結(jié)果與歷史分析的合并更加容易。同時(shí),SybaseAleriStreaming還為外部應(yīng)用中的數(shù)據(jù)提供RFC/RPC插件程序,正是因?yàn)镾ybase擁有了一個(gè)支持以上所有功能的透明、高速的數(shù)據(jù)緩沖,才有效減少了對(duì)外界數(shù)據(jù)源的訪問,從而使系統(tǒng)保持最優(yōu)的性能。非凡價(jià)值之五:即時(shí)建議和行動(dòng)即使是在諸如BusinessActivityMonitoring(BAM)的應(yīng)用中,在一個(gè)代表有問題發(fā)生的警揭發(fā)出后,決定和行動(dòng)也有可能受到延遲響應(yīng)的影響。這是因?yàn)锽AM應(yīng)用程序不能提供所有相關(guān)信息,或者因處理能力受限而不能創(chuàng)立全面的認(rèn)知,因此決策者必須從其他應(yīng)用程序中獲得相關(guān)數(shù)據(jù)做出自己的決定與行動(dòng)。Sybase不僅可為全語境輕松集成歷史和參考數(shù)據(jù),還提供了基于實(shí)時(shí)的、歷史的、參考的所有數(shù)據(jù)執(zhí)行實(shí)時(shí)分析的能力。這使得Sybase支持的連續(xù)性智能?可以提交精確、連續(xù)而及時(shí)的決定和行動(dòng)。非凡價(jià)值之六:訪問實(shí)時(shí)數(shù)據(jù)源對(duì)連續(xù)性智能?來講,來自企業(yè)的各個(gè)一線接觸點(diǎn)的實(shí)時(shí)數(shù)據(jù)至關(guān)重要,這些實(shí)時(shí)信息將為連續(xù)性智能?的即時(shí)狀況分析提供力量。SybaseAleriStreaming技術(shù)提供了大量獲取實(shí)時(shí)數(shù)據(jù)源的預(yù)包裝的適配器。這些適配器可以快速合并各種實(shí)時(shí)信息,比方市場(chǎng)和交易數(shù)據(jù)、互聯(lián)網(wǎng)/電子商務(wù)交互、RFID數(shù)據(jù)、事務(wù)數(shù)據(jù)、傳感器數(shù)據(jù)等,從而提供實(shí)時(shí)的、即時(shí)的市場(chǎng)分析、客戶分析和運(yùn)營(yíng)分析。非凡價(jià)值之七:快速、靈活的分析開發(fā)過程相比傳統(tǒng)分析工具中分散、批量的分析進(jìn)程,SybaseAleriStreaming的分析進(jìn)程更為簡(jiǎn)潔、單一和集成化,這也使得它的分析開發(fā)更加迅速,生成實(shí)時(shí)分析結(jié)果的能力更加優(yōu)化,維護(hù)更加輕松,參加新的分析結(jié)果也更加簡(jiǎn)單。功能強(qiáng)大的SybaseAleriStreaming使分析開發(fā)和部署更加迅速,表現(xiàn)在以下四個(gè)方面——獲取(Acquisition),在實(shí)時(shí)數(shù)據(jù)源被獲取的同時(shí),團(tuán)隊(duì)可迅速發(fā)現(xiàn)數(shù)據(jù)間的關(guān)鍵關(guān)系和規(guī)律;模型(Model),當(dāng)實(shí)時(shí)數(shù)據(jù)與歷史和參考數(shù)據(jù)集成并規(guī)格化時(shí),核心的維度、度量和評(píng)估被定義;行動(dòng)(Actions),基于不同維度和度量定義明確確實(shí)定緊急狀況和警告的閾值;提交(Delivery),當(dāng)輸出數(shù)據(jù)和目的地確定,適當(dāng)?shù)男畔⒃L問和平安需求被定義。結(jié)語在當(dāng)今動(dòng)態(tài)的商業(yè)環(huán)境中,擁有著以上特性的SybaseAleriStreaming正在全球范圍內(nèi)有效驅(qū)動(dòng)著連續(xù)性智能?,監(jiān)測(cè)數(shù)據(jù)異動(dòng),幫助企業(yè)最大化地獲取深層次的商業(yè)信息,推動(dòng)著全球市場(chǎng)的快速交易。目前,可擴(kuò)展的、靈活的SybaseAleriStreaming平臺(tái)已成為復(fù)雜競(jìng)爭(zhēng)環(huán)境下企業(yè)成功管控運(yùn)營(yíng)風(fēng)險(xiǎn)、提高利潤(rùn)和減少客戶流失的有力保證。全新SYBASE流功能完勝資本市場(chǎng)交易和風(fēng)險(xiǎn)分析的高挑戰(zhàn)日期:2011-4-25來源:Sybase中國(guó)
Sybase
我要評(píng)論\o"大號(hào)字體"大|\o"中號(hào)字體"中|\o"小號(hào)字體"小投稿\o"打印本文章"打印導(dǎo)讀:Sybase,SAP(NYSE:SAP)旗下的公司近日按方案發(fā)布了其最新適配器——Sybase復(fù)制與CEP平臺(tái)(SybaseReplicationandCEPPlatform)。關(guān)鍵詞:Sybase
CEP
復(fù)雜事件處理
金融行業(yè)
全球領(lǐng)先的企業(yè)級(jí)和移動(dòng)軟件公司Sybase,SAP(NYSE:SAP)旗下的公司近日按方案發(fā)布了其最新適配器——Sybase復(fù)制與CEP平臺(tái)(SybaseReplicationandCEPPlatform),該平臺(tái)具有連接SybaseReplicationServer和SybaseAleriStreamingPlatform的全新突破性功能。這項(xiàng)新功能將為數(shù)據(jù)事件提供從異構(gòu)數(shù)據(jù)庫到通過CEP(ComplexEventProcessing,復(fù)雜事件處理)進(jìn)行實(shí)時(shí)傳播的能力,并解決諸如參考數(shù)據(jù)管理和風(fēng)險(xiǎn)聚集這樣的重要問題。利用SybaseAleriStreamingPlatform這樣一個(gè)具有高度市場(chǎng)領(lǐng)先性的CEP平臺(tái),企業(yè)可將這項(xiàng)新功能與自身數(shù)據(jù)庫系統(tǒng)進(jìn)行集成,從而把交易變成能夠被整合并進(jìn)行實(shí)時(shí)分析的業(yè)務(wù)事件。該舉措進(jìn)一步印證了Sybase在資本市場(chǎng)為風(fēng)險(xiǎn)和交易應(yīng)用領(lǐng)域“以客戶為導(dǎo)向”的承諾和創(chuàng)新。“數(shù)據(jù)存取和數(shù)據(jù)質(zhì)量是阻礙風(fēng)險(xiǎn)管理和交易系統(tǒng)提升的主要問題。這些限制也促成了對(duì)金融效勞業(yè)的巨大需求,通過集中多個(gè)系統(tǒng)的實(shí)時(shí)數(shù)據(jù),并把這些系統(tǒng)連接到一個(gè)應(yīng)用程序,該應(yīng)用程序能夠清理、互相參照并豐富跨越資產(chǎn)類別和地區(qū)的數(shù)據(jù),最終加強(qiáng)風(fēng)險(xiǎn)管理?!盩owerGroup資本市場(chǎng)研究總監(jiān)StephenBruel說,“所設(shè)計(jì)的解決方案旨在消除試圖持續(xù)收集和分析儲(chǔ)存在庫中的數(shù)據(jù)時(shí)所出現(xiàn)的延遲和常見的性能問題,從而幫助金融效勞業(yè)在競(jìng)爭(zhēng)劇烈的資本市場(chǎng)中做出更明智的決定?!痹诮鹑谑袌?chǎng),很多機(jī)構(gòu)已經(jīng)使用SybaseReplicationServer和AleriCEP對(duì)各種資產(chǎn)類別進(jìn)行實(shí)時(shí)交易和風(fēng)險(xiǎn)敞口分析。在很多情況下,交易和位置數(shù)據(jù)是分割的,存儲(chǔ)在多個(gè)地理位置上的各種關(guān)系數(shù)據(jù)庫里。通過集成SybaseReplicationServer與AleriCEP引擎,用戶能夠克服這種分割的情況并實(shí)時(shí)整合異構(gòu)數(shù)據(jù)。最重要的益處在于這是一種非侵入式的方式,可以將Aleri引擎接入現(xiàn)有系統(tǒng),并且無需對(duì)這些系統(tǒng)作任何改變?!癝ybase領(lǐng)先的金融解決方案包括先進(jìn)的數(shù)據(jù)管理和分析,能夠提升整個(gè)企業(yè)的交易、風(fēng)險(xiǎn)管理、合規(guī)性和市場(chǎng)數(shù)據(jù)管理,已被全球前50強(qiáng)的所有銀行和證券公司所采用?!盨ybase市場(chǎng)總監(jiān)NeilMcGovern先生說,“我們致力于提供廣泛的分析資產(chǎn)組合來滿足廣闊客戶的需求,在復(fù)制和CEP已有的強(qiáng)大功能中再增加這一新功能,是我們?cè)谶@一領(lǐng)域成功實(shí)踐的又一力證?!辟Y本市場(chǎng)公司使用Sybase新適配器潛在的應(yīng)用案例包括:估算綜合風(fēng)險(xiǎn)——從多個(gè)數(shù)據(jù)庫中實(shí)時(shí)捕捉交易,并在CEP引擎里把它們互相聯(lián)系起來以評(píng)估客戶、地區(qū)以及在時(shí)間間隔內(nèi)產(chǎn)生的風(fēng)險(xiǎn)和敞口。動(dòng)態(tài)資產(chǎn)組合追蹤——當(dāng)使用者添加了新的工具或者與現(xiàn)有的資產(chǎn)組合相反的資產(chǎn)組合,CEP引擎就會(huì)捕捉到這些信息,并利用流入到引擎的市場(chǎng)數(shù)據(jù),開始動(dòng)態(tài)地保持和更新資產(chǎn)組合市值。監(jiān)控交易執(zhí)行——從數(shù)據(jù)庫中捕捉交易,實(shí)時(shí)監(jiān)控?fù)p益,如果超過了臨界值(例如交易超過一定金額,或與某些符號(hào)沖突),就會(huì)接收到通知。其它產(chǎn)業(yè)潛在的應(yīng)用案例包括:臨界值監(jiān)控——持續(xù)監(jiān)控產(chǎn)品訂單流程,如果客戶的訂單超過了一定金額,那么接收到通知,從而啟動(dòng)進(jìn)一步的驗(yàn)證檢查。庫存追蹤——持續(xù)監(jiān)控每小時(shí)的銷售量平均值,如果庫存水平有風(fēng)險(xiǎn)那么采取行動(dòng)。呼叫中心追蹤——持續(xù)地追蹤問題解決方案的平均耗時(shí),能夠事先識(shí)別和預(yù)防問題的發(fā)生。近日在波士頓舉行的2011TowerGroup/CEB金融效勞戰(zhàn)略與技術(shù)會(huì)議暨展覽上,Sybase介紹了這項(xiàng)新產(chǎn)品,該產(chǎn)品目前定于2011年第二季度末全面上市。欲獲取更多Sybase資本市場(chǎng)行業(yè)解決方案的信息,請(qǐng)?jiān)L問:sybase/capitalmarketsSybase推出事件流處理器ESP日期:2011-6-17來源:Sybase中國(guó)
Sybase
我要評(píng)論\o"大號(hào)字體"大|\o"中號(hào)字體"中|\o"小號(hào)字體"小投稿\o"打印本文章"打印導(dǎo)讀:Sybase,SAP(NYSE:SAP)旗下的公司近日宣布推出Sybase事件流處理器,這是備受贊譽(yù)的SybaseAleriCEP平臺(tái)的重要新版本。關(guān)鍵詞:Sybase
SAP
事件流處理器
ESP
CEP
Sybase,SAP(NYSE:SAP)旗下的公司近日宣布推出SybaseEventStreamingProcessor(ESP)——Sybase事件流處理器,這是備受贊譽(yù)的SybaseAleriCEP平臺(tái)的重要新版本。SybaseESP說明了Sybase在客戶對(duì)實(shí)時(shí)分析需求不斷增加的形勢(shì)下,引領(lǐng)創(chuàng)新步伐并在競(jìng)爭(zhēng)中遙遙領(lǐng)先于對(duì)手的承諾。SybaseESP是SybaseAleriEventStreamProcessor事件流處理器的第5版,在企業(yè)可擴(kuò)展性和用戶生產(chǎn)率方面擁有重要的新功能。這一全新解決方案將幫助客戶提供諸如連續(xù)風(fēng)險(xiǎn)評(píng)估等實(shí)時(shí)應(yīng)用、極其復(fù)雜的低延時(shí)算法交易,創(chuàng)立并傳輸高度豐富的市場(chǎng)數(shù)據(jù),而消耗的時(shí)間僅是傳統(tǒng)方法所需時(shí)間的一小局部?!霸诟?jìng)爭(zhēng)劇烈的CEP環(huán)境中脫穎而出的關(guān)鍵因素是提高工具靈活性的能力,這些工具是指幫助用戶以最低的延時(shí)、在高速流媒體市場(chǎng)獲得智能和交易數(shù)據(jù)的工具,”TABB集團(tuán)創(chuàng)始人兼CEOLarryTabb表示,“為客戶提供極其快速、易于集成和可擴(kuò)展的平臺(tái),不僅幫助企業(yè)達(dá)成它們目前所需的一切,而且還能適應(yīng)快速變化的環(huán)境——這是所有CEP公司的‘終極目標(biāo)’”。SybaseAleriESP提供實(shí)時(shí)ContinuousIntelligence?,為資本市場(chǎng)、電信和其他公司提供監(jiān)控、探測(cè)、分析和響應(yīng)事件的能力。連續(xù)智能解決方案幫助企業(yè)制定最合時(shí)宜的糾正、盈利、競(jìng)爭(zhēng)和增值決策?!拔覀儗?duì)新發(fā)布的SybaseAleriEventStreamProcessor事件流處理器非常感興趣。我們期望新的開發(fā)人員界面能夠進(jìn)一步加速應(yīng)用程序開發(fā),我們目前已經(jīng)在實(shí)時(shí)交易匹配系統(tǒng)Teevra和CFD交易平臺(tái)STRIDE啟用了SybaseESP,”Headstrong產(chǎn)品部負(fù)責(zé)人PrakashNeelakantan說道,“新的群集能力將同時(shí)提高當(dāng)前局部應(yīng)用的速度,擴(kuò)展使用CEP時(shí)的應(yīng)用范圍?!盨ybase公司金融效勞行業(yè)高級(jí)副總裁EricJohnson說道:“從低延時(shí)基準(zhǔn)到成熟的可擴(kuò)展性,我們長(zhǎng)期以來一直在實(shí)時(shí)分析領(lǐng)導(dǎo)力方面的表現(xiàn)非常卓著。我們已經(jīng)使用了最快速的CEP引擎,并使其更快速、更適合企業(yè)和更易于使用。Sybase全力投入事件流處理領(lǐng)域的研發(fā),因此,新版本的問世將會(huì)幫助Sybase提供無與倫比的創(chuàng)新性。我們相信,SybaseESP正在為客戶帶來戰(zhàn)略性實(shí)時(shí)競(jìng)爭(zhēng)優(yōu)勢(shì)?!毙掳姹镜腟ybaseAleriESP能夠直接滿足客戶對(duì)各種關(guān)鍵領(lǐng)域的需求。為了易于定義連續(xù)查詢并提高效率,ESPStudio提供了一款擁有強(qiáng)大的、基于SQL事件處理連續(xù)計(jì)算語言(CCL)的簡(jiǎn)單的可視編輯器。新的高級(jí)群集架構(gòu)將顯著提升私有云環(huán)境中部署連續(xù)查詢時(shí)的可擴(kuò)展性和部署選項(xiàng)。在金融市場(chǎng)中,有些客戶是對(duì)SybaseCEP技術(shù)要求最嚴(yán)苛的用戶,事件流處理器恰好能夠應(yīng)對(duì)這種挑戰(zhàn)。有了市場(chǎng)數(shù)據(jù)分析,買方和賣方公司能夠通過流式和批量加載,在流入的市場(chǎng)數(shù)據(jù)中應(yīng)用清洗和壓縮規(guī)那么。用戶還可收集SybaseRAP的市場(chǎng)數(shù)據(jù),通過查詢,獲得珍貴的新數(shù)據(jù)商業(yè)見解或突破性的競(jìng)爭(zhēng)交易戰(zhàn)略。此外,SybaseESP還提供了一種非侵入式方法,將異構(gòu)系統(tǒng)的風(fēng)險(xiǎn)和位置數(shù)據(jù)與實(shí)時(shí)評(píng)價(jià)和監(jiān)控進(jìn)行整合和匯總。在事件發(fā)生時(shí),用戶能夠使用此信息進(jìn)行實(shí)時(shí)分析,或者用于更具體的壓力情境,從而提供深刻的洞察力,或響應(yīng)意料之外的實(shí)時(shí)事件。SybaseESP還能夠?qū)崿F(xiàn)交易和算法監(jiān)控,幫助用戶監(jiān)控交易性能指標(biāo),管理自動(dòng)化交易戰(zhàn)略,從而實(shí)現(xiàn)最優(yōu)成效。機(jī)構(gòu)可以利用SybaseESP與SybaseRAP的組合,分析當(dāng)前和歷史數(shù)據(jù),探索支持實(shí)時(shí)決策的模式,并通過回歸測(cè)試改正戰(zhàn)略。除了進(jìn)一步提升當(dāng)前Aleri解決方案的優(yōu)勢(shì),版本5同時(shí)提供重要的新功能,包括:·CCL+SPLASH–本版本在產(chǎn)品中采用CCL——來自Coral8公司基于SQL的事件編程語言,同時(shí)保存Aleri開拓性的SPLASH腳本處理語言,實(shí)現(xiàn)可擴(kuò)展性?!た梢暰庉嫼臀谋揪庉嫧C創(chuàng)新的新Studio設(shè)計(jì)提供各種編輯風(fēng)格選擇,能夠隨時(shí)切換。這對(duì)于更廣泛的用戶而言將極具吸引力。甚至連程序員也將會(huì)享受流暢地進(jìn)入可視編輯器,通過復(fù)雜模型快速導(dǎo)航的樂趣。·高級(jí)群集架構(gòu)–私有云風(fēng)格操作允許任何數(shù)量的機(jī)器作為“虛擬效勞器”的一局部運(yùn)行,實(shí)現(xiàn)幾乎無限制的物理容量;工程能在群集里運(yùn)行,同時(shí)在不影響其他工程的情況下開始/停止,從而形成動(dòng)態(tài)的環(huán)境?!み\(yùn)行時(shí)間可擴(kuò)展性–工程能夠獨(dú)立開始/停止,能夠動(dòng)態(tài)地與其他工程關(guān)聯(lián);新的連續(xù)查詢可隨時(shí)開始,而現(xiàn)有模型可在確保效勞器正常運(yùn)行的情況下,通過其他查詢進(jìn)行擴(kuò)展?!つK化–工程可以調(diào)用用戶定義的可重復(fù)使用的模塊,促進(jìn)再利用,簡(jiǎn)化團(tuán)隊(duì)開發(fā)和代碼維護(hù);模塊可被參數(shù)化,以便在調(diào)用時(shí)調(diào)整它們的行為本產(chǎn)品目前方案于6月份推出測(cè)試版,并于2011年第三季度全面上市。有關(guān)Sybase資本市場(chǎng)行業(yè)解決方案的更多信息,請(qǐng)登錄sybase/capitalmarkets網(wǎng)站或閱讀blogs.sybase/tradingandrisk博客。Esper近況:事件流處理框架作者FloydMarinescu,ThomasBernhardt,譯者陳俊發(fā)布于2007年10月15日|1討論分享到:\o"分享到新浪微博"微博\o"分享到微信"微信\o"分享到QQ空間"QQ空間LinkedIn\o"分享到Facebook"Facebook\o"分享到郵件"郵件分享稍后閱讀我的閱讀清單Esper〔InfoQ曾在一年前報(bào)道其1.0版本的發(fā)布消息〕是一個(gè)事件流處理〔EventStreamProcessing,ESP〕和復(fù)雜事件處理〔ComplexEventProcessing,CEP〕的系統(tǒng),它可以監(jiān)測(cè)事件流并當(dāng)特定事件發(fā)生時(shí)觸發(fā)某些行動(dòng)——可看作是把數(shù)據(jù)庫反過來,語句是固定的,而數(shù)據(jù)流進(jìn)進(jìn)出出。事件處理是軟件行業(yè)的一個(gè)開展趨勢(shì),已有數(shù)家大廠商以及許多初創(chuàng)企業(yè)參加到該市場(chǎng)中。其常有的應(yīng)用例子包括系統(tǒng)自動(dòng)交易、BAM、RFID、高級(jí)監(jiān)測(cè)系統(tǒng)、欺詐檢測(cè),甚至直接集成進(jìn)SOA。InfoQ恰遇Esper的創(chuàng)始人,向他了解了工程的近況,以及最近的基準(zhǔn)測(cè)試問題。如Esper開發(fā)小組所說,Esper現(xiàn)在是僅有的純Java開源ESP/CEP引擎,由\o"://espertech/"EsperTech公司提供商業(yè)支持效勞,而這個(gè)公司也在維護(hù)一個(gè)同樣的.Net工程。BEA得到了Esper授權(quán),將在修改后在參加到六月發(fā)布的WebLogicEventServer中。根據(jù)多方面的反響,Thomas跟InfoQ談道:我相信Esper在BEA的產(chǎn)品中占一席位的事實(shí),在多個(gè)方面都有助于Esper的開展。首先,我們所獲得的反響的聲音對(duì)于Esper的改良有很重要的作用。其次,BEA的產(chǎn)品從總體上提高了CEP/ESP技術(shù)的知名度,并且因此擴(kuò)大了市場(chǎng)的共識(shí)。第三,這是Esper技術(shù)的開放性,可擴(kuò)展性,適應(yīng)企業(yè)級(jí)應(yīng)用的最好的證明。Esper社區(qū)和用戶群都真的為此而感到自豪。隨著市場(chǎng)空間的擴(kuò)大,多種實(shí)現(xiàn)之間出現(xiàn)的競(jìng)爭(zhēng),標(biāo)準(zhǔn)化能給該行業(yè)帶來一定的好處。Thomas對(duì)CEP語言標(biāo)準(zhǔn)化的潛力和背景作了評(píng)價(jià):CEP社區(qū)顯然把CEP和ESP看作是互補(bǔ)的,并且認(rèn)為其他手段〔如貝葉斯網(wǎng)絡(luò)或神經(jīng)網(wǎng)絡(luò)〕也可應(yīng)用于CEP的問題。由于存在各種實(shí)現(xiàn)技術(shù),各廠商又各執(zhí)己見,ANSISQL標(biāo)準(zhǔn)化委員會(huì)在擴(kuò)展SQL根底上所提供的“行序列的模式匹配”似乎成為最重要的曙光。
對(duì)于這個(gè)初步的課題當(dāng)然會(huì)有進(jìn)一步的研究,并且標(biāo)準(zhǔn)化很可能會(huì)超出ESP/CEP語言標(biāo)準(zhǔn)化的范圍。Esper近期最突出的消息是在八月中旬發(fā)布了一個(gè)性能基準(zhǔn)測(cè)試工具及公布了性能測(cè)試結(jié)果:Esper在雙2GHzCPU的Intel系統(tǒng)測(cè)試環(huán)境下,處理超過500000個(gè)事件/秒;在VWAP基準(zhǔn)測(cè)試中在有1000語句的情況下,引擎延時(shí)平均小于3微妙〔在10us時(shí)超過99%的預(yù)測(cè)準(zhǔn)確率〕——最高時(shí)有70Mbit/s流量并占用85%的CPU資源。雖然這個(gè)基準(zhǔn)測(cè)試是基于一個(gè)相當(dāng)簡(jiǎn)單的用例,其發(fā)表的目的是震動(dòng)整個(gè)行業(yè),因?yàn)樗峁┝送暾墓ぞ呒瘉碇噩F(xiàn)測(cè)試結(jié)果。Esper事件效勞器監(jiān)聽遠(yuǎn)端客戶端通過網(wǎng)絡(luò)傳送過來的股票市場(chǎng)事件信息。Esper引擎是通過一個(gè)滑動(dòng)的時(shí)間窗口或事件窗口,來實(shí)時(shí)計(jì)算輸入信息的成交量加權(quán)平均價(jià)。當(dāng)被問及該基準(zhǔn)測(cè)試的必要性時(shí),Esper回應(yīng)道:整個(gè)CEP市場(chǎng)已被模糊不清的信息所包圍,每個(gè)廠商都在各自的宣傳單上做文章,避開詳細(xì)地交待實(shí)際性能和延時(shí)。在這個(gè)領(lǐng)域中還沒有對(duì)它們作比擬的基準(zhǔn)測(cè)試。
在這個(gè)行業(yè)中模糊的性能信息已經(jīng)受到ProgressApama和其他人的批評(píng)。以下是來自于Apama的博客中的抱怨的聲音:……Skyler處理速度高達(dá)200,000條/秒……主要特征:Coral8每秒處理從數(shù)千到百萬計(jì)的事件……StreamBase性能領(lǐng)先,每秒處理超過1百萬個(gè)事件,反響時(shí)間接近零……AleriLabs打破了亞毫秒反響時(shí)間的障礙……Apama自己也說過“一個(gè)能處理數(shù)千事件每秒的高性能、可伸縮的引擎”這種話。同樣的措詞在BEA也能找到,WebLogicEventServer公告了似乎較差但較為精確的指標(biāo)“當(dāng)我們的產(chǎn)品準(zhǔn)備好,它將提供50,000復(fù)雜事件/秒的處理速度”。
那些測(cè)試結(jié)果似乎確定了在這個(gè)領(lǐng)域里“數(shù)十萬”事件每秒是普遍的,毫無例外。同時(shí)也正顯示了Esper在特定場(chǎng)景中的性能表現(xiàn)。它同樣給了用戶群有價(jià)值的工具來更好地得知實(shí)際性能,而不是聽信廠商任意的令人充滿疑惑的宣傳,對(duì)有價(jià)值的開源軟件普遍懷有的偏見。Esper小組已經(jīng)在其wiki上發(fā)布了所有運(yùn)行的詳情,并且已更新了網(wǎng)頁的性能局部和性能最正確實(shí)踐局部。另一個(gè)基準(zhǔn)測(cè)試的來源是最近成立的STAC基準(zhǔn)測(cè)試委員會(huì),該委員會(huì)的目的是為技術(shù)的交易而提供由客戶推動(dòng)的基準(zhǔn)測(cè)試標(biāo)準(zhǔn)。請(qǐng)點(diǎn)擊這里獲取InfoQ之前有關(guān)Esper和CEP背景的相關(guān)報(bào)道首先,我想請(qǐng)問一下盧東明先生,復(fù)雜事件處理(CEP)是什么時(shí)候出現(xiàn)的一項(xiàng)技術(shù)?它是怎么定義的?有哪些具體的技術(shù),它跟我們之前看到的那些分析技術(shù)有什么不同?CEP這個(gè)詞,英文全稱叫ComplexEventProcessing,中文翻譯成復(fù)雜事件處理。
其實(shí)在生活中很多時(shí)候我們會(huì)遇到復(fù)雜事件處理的情況,例如每個(gè)汽車?yán)锏碾娔X,實(shí)時(shí)監(jiān)控著很多東西,比方車速,胎壓,或者如油溫等其他各項(xiàng)指標(biāo)。在這樣一個(gè)復(fù)雜的環(huán)境里,實(shí)際上電腦是通過事件來監(jiān)控的。電腦里會(huì)定義什么叫排壓降低事件。那怎么定義呢?15分鐘內(nèi)胎壓如果從45PSI下降到41PSI,這就被認(rèn)為是胎壓降低事件。另外還有爆胎事件,什么叫爆胎事件?5秒鐘內(nèi)胎壓如果從45PSI下降到20PSI,這就被認(rèn)為是爆胎事件。所以汽車的電腦定義了很多各種各樣的事件,這些事件可以稱為簡(jiǎn)單事件。但是這些簡(jiǎn)單事件通過復(fù)雜組合,最終就構(gòu)成了復(fù)雜事件。比方說爆胎加上車停止,加上司機(jī)離開座椅,這些事件組合起來,如果在很短的時(shí)間內(nèi)發(fā)生,這就構(gòu)成了司機(jī)飛出的事故事件。這是一個(gè)事故,在我們生活中其實(shí)每天都會(huì)遇到這樣的復(fù)雜事件處理場(chǎng)景。
這個(gè)場(chǎng)景在IT領(lǐng)域里就變成了CEP這個(gè)概念,CEP正在逐漸成為IT領(lǐng)域的一個(gè)分支。為了幫助大家更好地理解什么叫復(fù)雜事件處理,我們將它與熟悉的幾項(xiàng)IT技術(shù)進(jìn)行比擬:數(shù)據(jù)庫,傳統(tǒng)的商務(wù)智能,以及消息隊(duì)列。我們從兩個(gè)不同的維度來看這幾項(xiàng)技術(shù):一個(gè)維度是事件復(fù)雜度,也就是這個(gè)事件到底需要多復(fù)雜的計(jì)算;另一個(gè)維度是事件處理速度。
從這兩個(gè)緯度上看,我們可以看到,關(guān)系型數(shù)據(jù)庫解決的是一些事務(wù),這樣的一些事務(wù)實(shí)際是在一個(gè)秒級(jí)或分鐘級(jí)完成的簡(jiǎn)單事件。例如我在銀行里轉(zhuǎn)賬,從一個(gè)帳號(hào)轉(zhuǎn)一百塊錢到另一個(gè)帳號(hào)里,這件事一兩秒鐘就完成了,這就是一個(gè)簡(jiǎn)單的事件。傳統(tǒng)的BI技術(shù)是什么?它是一個(gè)低速卻復(fù)雜的事情,當(dāng)事務(wù)都完成后,要對(duì)事務(wù)進(jìn)行分析。我要分析在過去的一個(gè)月或一個(gè)季度里,哪種類型的客戶,哪個(gè)年齡層及的客戶,對(duì)銀行產(chǎn)生的價(jià)值最高。這就是一項(xiàng)根據(jù)歷史數(shù)據(jù)來做分析的技術(shù),這項(xiàng)技術(shù)是一件低速卻復(fù)雜的事情。消息隊(duì)列是把一些信息快速地傳遞到下游,這是一個(gè)高速毫秒級(jí)的處理技術(shù),但它對(duì)信息不作任何處理,所以我們說它是一個(gè)高速但簡(jiǎn)單的事件。CEP這項(xiàng)技術(shù)在這個(gè)象限圖里是位于第一象限,它實(shí)際是高速毫秒級(jí)的,同時(shí)又能做復(fù)雜處理的。所以通過這樣一個(gè)四象限圖,我們應(yīng)該能夠理解CEP是在什么樣的背景下產(chǎn)生的。
這張圖更能幫助我們對(duì)CEP和大家比擬熟悉的關(guān)系型數(shù)據(jù)庫技術(shù)來進(jìn)行比擬。關(guān)系型數(shù)據(jù)庫將產(chǎn)生的數(shù)據(jù)保存在磁盤中,然后通過調(diào)用實(shí)現(xiàn)查詢與分析的功能,它是基于硬盤的,另外它是要先存儲(chǔ)再處理查詢,更像是水庫的模式,信息就像水一樣存在水庫里面。但是,CEP好似右邊的這個(gè)水管,它的處理模式是完全基于內(nèi)存的,并不需要把數(shù)據(jù)存儲(chǔ)起來,它是隨著水在水管里地流動(dòng)實(shí)時(shí)進(jìn)行分析的。一個(gè)像水管,一個(gè)像水庫,這兩項(xiàng)技術(shù)聽起來雖然非常不一樣,但在實(shí)際上如果要達(dá)到同一效果,比方說想保證水庫里沒有任何泥沙,沒有任何微生物,沒有任何臟東西,可以通過兩種方式去做。一種是在水庫里找到所有的泥沙和微生物,我們大家很熟悉的數(shù)據(jù)庫的操作是通過查詢實(shí)現(xiàn)的,把符合泥沙、微生物這樣條件的物體找出來,然后把它們清理掉,這樣水庫里的水就可以到達(dá)干凈的效果。同樣也可以把規(guī)那么應(yīng)用到水管上,首先在水管上放一個(gè)監(jiān)測(cè)器,當(dāng)水流過這個(gè)水管時(shí),只要滿足了泥沙和微生物這些規(guī)那么的時(shí)候,就實(shí)時(shí)把它過濾掉。這是兩種不同的處理方式,但是最后處理結(jié)果實(shí)際上是一樣的,一個(gè)是用查詢?nèi)フ覕?shù)據(jù),另一個(gè)是用數(shù)據(jù)去觸發(fā)查詢。這兩種操作的特點(diǎn)不同,最后的效果是一個(gè)較慢一個(gè)較快,一個(gè)是處理大量的數(shù)據(jù),一個(gè)是只處理水管里少量的數(shù)據(jù)。CEP最優(yōu)秀的一個(gè)特質(zhì)就是它的速度非常之快。
綜上所述,CEP可歸納為四個(gè)大的特點(diǎn),第一,它是基于數(shù)據(jù)流的操作,不是數(shù)據(jù)庫的操作,這是水管與水庫的差異;第二,它是對(duì)時(shí)間窗口進(jìn)行操作,就像剛剛我們說過的像汽車?yán)锏碾娔X一樣,它監(jiān)控過去的15分鐘或者過去的5秒鐘,實(shí)際都是對(duì)一個(gè)時(shí)間窗口進(jìn)行操作;第三,它具有實(shí)時(shí)性,它可以實(shí)時(shí)分析產(chǎn)生一些結(jié)果;第四,它可以做相當(dāng)復(fù)雜的運(yùn)算。
2.接下來請(qǐng)問一下開總,您是什么時(shí)候接觸CEP技術(shù)的?您印象中CEP又是如何定義的?作為一個(gè)開發(fā)商來說,您是怎么樣來選擇CEP技術(shù)的?謝謝主持人的提問。其實(shí)東南融通作為一家國(guó)內(nèi)非常大的一家金融效勞綜合提供商,很早就開始關(guān)注CEP技術(shù),但我們更多是從這項(xiàng)技術(shù)在業(yè)務(wù)中的應(yīng)用場(chǎng)景這個(gè)角度來看這個(gè)這個(gè)技術(shù)本身的一些意義,包括這項(xiàng)技術(shù)給業(yè)務(wù)本身來帶的價(jià)值。其實(shí)我們關(guān)注CEP技術(shù)是來自業(yè)務(wù)驅(qū)動(dòng)。比方剛剛講到的流技術(shù),流技術(shù)其實(shí)有非常多的應(yīng)用場(chǎng)景,實(shí)際上我們會(huì)發(fā)現(xiàn),在一些資本市場(chǎng),特別是在證券、基金、資產(chǎn)管理公司里,會(huì)經(jīng)常用到這類技術(shù)。因?yàn)檫@類技術(shù)會(huì)跟交易系統(tǒng)、行情系統(tǒng)關(guān)聯(lián),而在資本市場(chǎng)像這種行情或者交易,都是基于這種流數(shù)據(jù),所以在這種流數(shù)據(jù)的處理方面CEP技術(shù)具有天然優(yōu)勢(shì)。除資本市場(chǎng)外,我們發(fā)現(xiàn)在電信和移動(dòng)領(lǐng)域也會(huì)應(yīng)用這類技術(shù),主要是用在欺詐和風(fēng)險(xiǎn)控制領(lǐng)域。例如移動(dòng)客戶在移動(dòng)支付領(lǐng)域和移動(dòng)電子商務(wù)領(lǐng)域就常常會(huì)面臨這種風(fēng)險(xiǎn)控制和欺詐控制,類似于盜鏈這類問題,一方面對(duì)性能提出很高要求,另一方面對(duì)規(guī)那么的復(fù)雜性也提出了要求。所以從資本市場(chǎng)到移動(dòng)到電信等很多領(lǐng)域,CEP技術(shù)具有一些不可取代的優(yōu)勢(shì),我們就是從這樣一些業(yè)務(wù)角度去看CEP的價(jià)值的。
3.Sybase作為一家CEP廠商,在2010年授予SybaseCEP一個(gè)獎(jiǎng)項(xiàng)是最正確CEP技術(shù)。請(qǐng)盧東明先生給我們介紹一下,為什么要使用CEP,SybaseCEP技術(shù)到底有什么特點(diǎn)?盧東明:為什么要使用CEP?隨著用戶對(duì)應(yīng)用需求逐漸細(xì)化與提高,產(chǎn)生了一些非常特殊的領(lǐng)域需求。例如CEP可以做到實(shí)時(shí)分析,在金融行業(yè)里,如果你不能做到實(shí)時(shí)分析,這就好似兩個(gè)人拿著不同的武器,一個(gè)人端著步槍另一個(gè)人拿著大炮,你還沒有接觸到他就已經(jīng)被炸死了,在金融行業(yè)里這種案例非常多。當(dāng)一家基金公司或者投資公司使用了CEP這樣技術(shù)的時(shí)候,他的領(lǐng)先性會(huì)表現(xiàn)在最終的應(yīng)用場(chǎng)景上,不是簡(jiǎn)單的說你有一項(xiàng)技術(shù)而我沒有,而是我在這個(gè)市場(chǎng)上可能會(huì)比你早發(fā)現(xiàn)一些機(jī)會(huì),市場(chǎng)大局部時(shí)機(jī)都被先進(jìn)武器的使用者搶走,因?yàn)樗麄兛偰芙o以毫秒級(jí)響應(yīng)但你卻不能。實(shí)時(shí)分析這點(diǎn)是非常重要的。
CEP技術(shù)在金融、電信這些行業(yè)里的應(yīng)用至少也有五六年時(shí)間了,在這段時(shí)間里,CEP軟件已經(jīng)到了一個(gè)非常高的水平,它可以快速進(jìn)行應(yīng)用開發(fā)。舉個(gè)例子,不管是在金融行業(yè)資本市場(chǎng)里的算法交易或者程序化交易,還是電信行業(yè)里的一些欺詐行為的實(shí)時(shí)預(yù)防等,它可以在幾個(gè)小時(shí)最多幾天的時(shí)間里變成一個(gè)應(yīng)用,而不是像以前從模型設(shè)計(jì)到應(yīng)用開發(fā),到最后上線部署要花幾天甚至幾個(gè)月的時(shí)間。這種快速應(yīng)用開發(fā)也是CEP軟件非常好的特點(diǎn)。
另外一個(gè),非侵害的部署,比方說他基于流的這些整個(gè)數(shù)據(jù)的分析,他可以整個(gè)基于這個(gè)事件的這個(gè)架構(gòu),他可以在一個(gè)已有的應(yīng)用系統(tǒng)里邊,非常容易,而且侵害性非常小的部署進(jìn)去,然后我可以對(duì)已有的系統(tǒng)提供新的價(jià)值,這是CEP技術(shù)的一些特性和一些優(yōu)勢(shì)。剛剛提到SybaseCEP,我們有一份報(bào)告,就是由STAC,STAC全名叫SecuritiesTechnologyAnalysisCenter,中文翻譯叫做證券技術(shù)分析中心。STAC專門分析基于資本市場(chǎng)或者證券行業(yè)的一些技術(shù)平臺(tái),或是一些新的技術(shù)。STAC在過去一段時(shí)間里曾經(jīng)對(duì)影響資本市場(chǎng)的很多技術(shù)做出過非常詳細(xì)地評(píng)價(jià)和測(cè)試。我們這里有一個(gè)圖是STAC在過去一段時(shí)間里對(duì)CEP平臺(tái)做的測(cè)試,SybaseAleriStreamingPlatform這樣的一個(gè)平臺(tái)在STAC測(cè)試?yán)?,我們可以看到它的測(cè)試基準(zhǔn),用六核CPU可以實(shí)現(xiàn)每秒鐘處理30萬筆消息,這個(gè)效率是相當(dāng)驚人的。對(duì)整個(gè)CEP軟件來說有幾個(gè)指標(biāo),一個(gè)是吞吐量,每秒或者說單位時(shí)間里邊能夠處理多少消息,一個(gè)是延遲,就是處理一筆消息到能夠處理下一筆中間要花多少時(shí)間,這兩個(gè)指標(biāo)最終決定了一個(gè)CEP軟件的優(yōu)劣程度,這里我們看到每秒30萬米這個(gè)消息處理的吞吐量是相當(dāng)高的。另外延遲平均是1.29到1.56毫秒,隨著每秒鐘消息的增加,它的延時(shí)雖然也在增加,但是增加的速度是非常緩慢的。所以說SybaseAleriStreamingPlatform這個(gè)平臺(tái)在CEP處理效率上是非常高的,這也是為什么眾多華爾街資本市場(chǎng)公司紛紛采用SybaseCEP技術(shù)實(shí)現(xiàn)他們?cè)谫Y本市場(chǎng)上的算法交易或者城市化交易這些場(chǎng)景。
再給大家舉個(gè)例子,大家知道資本市場(chǎng)瞬息萬變,前臺(tái)后臺(tái)都有大量的人在圍繞這資本市場(chǎng)里的時(shí)機(jī)做研究和分析,像中國(guó)人壽的一支股票,很多人會(huì)分析一些規(guī)律,例如股票市場(chǎng)有一個(gè)規(guī)律叫CCI。什么叫CCI?CCI指的是CommodityChannelIndex,中文翻譯成
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 貴州大學(xué)《ERP軟件原理與應(yīng)用》2023-2024學(xué)年第一學(xué)期期末試卷
- 貴陽學(xué)院《有機(jī)化學(xué)I1》2023-2024學(xué)年第一學(xué)期期末試卷
- 貴陽信息科技學(xué)院《高級(jí)英語視聽說》2023-2024學(xué)年第一學(xué)期期末試卷
- 廣州珠江職業(yè)技術(shù)學(xué)院《英語聽說二》2023-2024學(xué)年第一學(xué)期期末試卷
- 廣州幼兒師范高等??茖W(xué)校《地理課件制作》2023-2024學(xué)年第一學(xué)期期末試卷
- 2025重慶市安全員C證考試(專職安全員)題庫附答案
- 廣州鐵路職業(yè)技術(shù)學(xué)院《數(shù)量經(jīng)濟(jì)學(xué)》2023-2024學(xué)年第一學(xué)期期末試卷
- 2025湖南建筑安全員《A證》考試題庫
- 2025安徽省建筑安全員-B證考試題庫附答案
- 2025湖南省安全員A證考試題庫及答案
- 住院醫(yī)師規(guī)培出科考核評(píng)估表格
- 化纖織造行業(yè)-生產(chǎn)工藝流程簡(jiǎn)介課件
- 棚戶區(qū)改造項(xiàng)目房屋拆除工程施工組織設(shè)計(jì)方案
- 流行病學(xué)知識(shí)考核試題題庫與答案
- DB11-T212-2017園林綠化工程施工及驗(yàn)收規(guī)范
- 兒童自主游戲中教師指導(dǎo)策略-以安徽省說游戲評(píng)比為例
- PLC技術(shù)應(yīng)用ppt課件(完整版)
- 項(xiàng)目經(jīng)濟(jì)測(cè)算模板長(zhǎng)租公寓
- 小學(xué)數(shù)學(xué)自制教具學(xué)具的研究及探討
- 廣東省幼兒園一日活動(dòng)指引(試行)
- 光學(xué)材料-光學(xué)加工流程
評(píng)論
0/150
提交評(píng)論