大數(shù)據(jù)技術(shù)在財務中的應用Python版 課件 任務1.1 了解數(shù)據(jù)的分析方法

項目一

數(shù)據(jù)分析認知數(shù)據(jù)分析基本內(nèi)容認知任務1.1Python開發(fā)環(huán)境的搭建任務1.2目錄引入案例任務分析知識解析案例解析任務實訓實訓評價1.1.1數(shù)據(jù)分析概述1.1.2數(shù)據(jù)分析方法任務1.1數(shù)據(jù)分析基本內(nèi)容認知任務1.1數(shù)據(jù)分析基本內(nèi)容認知引入案例今天，數(shù)據(jù)已滲透到每個行業(yè)和業(yè)務領(lǐng)域，并已成為重要的生產(chǎn)要素。隨著新一輪的生產(chǎn)力增長和消費者盈余浪潮的到來，海量數(shù)據(jù)的挖掘和使用預示著“大數(shù)據(jù)”已經(jīng)存在于我們生活的方方面面。通過本節(jié)任務的學習，請大家列舉一些大家日常生活中遇到的大數(shù)據(jù)分析應用的場景。任務分析當前，越來越多的應用涉及到大數(shù)據(jù)，而這些大數(shù)據(jù)的屬性，包括數(shù)量、速度、多樣性等等都呈現(xiàn)出不斷增長的復雜性。因此，大數(shù)據(jù)分析方法在這一領(lǐng)域也就顯得尤為重要，可以說是決定最終信息是否有價值的決定性因素。基于此，我們要了解數(shù)據(jù)分析的含義，理解數(shù)據(jù)分析的流程，了解數(shù)據(jù)分析的應用場景及數(shù)據(jù)分析常見的統(tǒng)計方法。任務1.1數(shù)據(jù)分析基本內(nèi)容認知知識解析數(shù)據(jù)分析是指為了提取有用的信息和形成結(jié)論而對數(shù)據(jù)加以詳細研究和概括總結(jié)的過程。數(shù)據(jù)分析涵蓋的內(nèi)容很廣，涉及領(lǐng)域包括數(shù)學、統(tǒng)計學、計算機科學以及數(shù)據(jù)科學等。一般來說，數(shù)據(jù)分析分為狹義的數(shù)據(jù)分析和廣義的數(shù)據(jù)分析。

狹義的數(shù)據(jù)分析更側(cè)重傳統(tǒng)的統(tǒng)計分析領(lǐng)域，可以進一步分為描述性數(shù)據(jù)分析、探索性數(shù)據(jù)分析以及驗證性數(shù)據(jù)分析。一、數(shù)據(jù)分析的概念1.1.1數(shù)據(jù)分析概述任務1.1數(shù)據(jù)分析基本內(nèi)容認知廣義數(shù)據(jù)分析除了狹義數(shù)據(jù)分析外，還包含數(shù)據(jù)挖掘。數(shù)據(jù)挖掘是指從大量的、不完全的、有噪聲的、模糊的數(shù)據(jù)中抽取隱含的、以前未知的、具有潛在應用價值的信息的過程,并為管理決策提供支持。任務1.1數(shù)據(jù)分析基本內(nèi)容認知二、數(shù)據(jù)分析的流程需求分析數(shù)據(jù)采集數(shù)據(jù)預處理數(shù)據(jù)可視化分析與建模部署應用1.需求分析數(shù)據(jù)分析的本質(zhì)要求是滿足分析需求，如果沒有確定分析需求，將會導致分析無法落地。因此，需要相應的背景知識幫助明晰分析目標，確定用戶需求。2.數(shù)據(jù)采集根據(jù)確定的分析目標，采集相關(guān)數(shù)據(jù)。在當前時代下，數(shù)據(jù)的種類、復雜性與來源都不斷增長，包括各種財會報表數(shù)據(jù)、銷售業(yè)務數(shù)據(jù)、證券價格數(shù)據(jù)、環(huán)境監(jiān)測數(shù)據(jù)、醫(yī)療保健數(shù)據(jù)、政府公開的統(tǒng)計數(shù)據(jù)、期刊數(shù)據(jù)以及社會化媒體數(shù)據(jù)等。對來源豐富、種類多樣的數(shù)據(jù)，我們不僅需要從多個途徑進行采集，并且還需要對收集的格式多樣的數(shù)據(jù)進行處理與合并。數(shù)據(jù)收集的工具種類繁多，如各種關(guān)系數(shù)據(jù)庫、Python數(shù)據(jù)爬蟲工具、數(shù)據(jù)采集器軟件等。任務1.1數(shù)據(jù)分析基本內(nèi)容認知3.數(shù)據(jù)預處理由于收集的數(shù)據(jù)的多樣與復雜，大數(shù)據(jù)的一個重要特質(zhì)表現(xiàn)為數(shù)據(jù)的噪聲、不完整和不一致，采集的數(shù)據(jù)通常不能直接用于數(shù)據(jù)分析數(shù)。因此，對數(shù)據(jù)進行預處理是必不可少的步驟，數(shù)據(jù)預處理過程包括數(shù)據(jù)集成、數(shù)據(jù)清洗、數(shù)據(jù)變換以及數(shù)據(jù)規(guī)約等。數(shù)據(jù)預處理是一個煩瑣過程，花在數(shù)據(jù)預處理上的時間往往超過數(shù)據(jù)分析其他階段花費的時間。4.分析與建模結(jié)合目標分析對預處理后的數(shù)據(jù)進行建模。首先，我們對數(shù)據(jù)進行比較基礎的統(tǒng)計分析，了解數(shù)據(jù)的基本的規(guī)律與特征，常見的方法包括對比分析法、同比分析法、環(huán)比分析法、結(jié)構(gòu)分析法、因素分析法等。在了解數(shù)據(jù)的基本的規(guī)律與特征后，我們再通過包括相關(guān)分析、聚類分析、回歸分析、分類分析、關(guān)聯(lián)分析以及各種機器學習算法對數(shù)據(jù)建立模型。5.數(shù)據(jù)可視化為了便于理解，對數(shù)據(jù)分析的結(jié)果通過圖形的方式進行呈現(xiàn)，這就是數(shù)據(jù)可化。將數(shù)據(jù)可視化，能夠提高人們閱讀數(shù)據(jù)分析結(jié)果的能力。目前，常見的數(shù)據(jù)可視化工具包括Python、R語言、MicrosoftPowerBI等。6.部署應用數(shù)據(jù)部署應用是指將數(shù)據(jù)分析結(jié)果應用到實際業(yè)務中，是數(shù)據(jù)產(chǎn)生實際價值的直接體現(xiàn)，這個過程需要具有數(shù)據(jù)溝通能力、業(yè)務推動能力和項目工作能力。任務1.1數(shù)據(jù)分析基本內(nèi)容認知任務1.1數(shù)據(jù)分析基本內(nèi)容認知三、大數(shù)據(jù)分析的應用場景1.大數(shù)據(jù)在財務領(lǐng)域的應用財務大數(shù)據(jù)在財務領(lǐng)域的應用場景有財務指標分析、應收賬款信用風險管理、銷售量與訂貨量預測、潛在流失客戶畫像等，大數(shù)據(jù)的應用有利于提高財務管理的效率與質(zhì)量、強化財務風險的評估與防范、全方位支撐業(yè)務的高效開展和精準驅(qū)動企業(yè)的經(jīng)營管理決策。2.大數(shù)據(jù)在金融行業(yè)的應用隨著大數(shù)據(jù)技術(shù)的廣泛普及和發(fā)展成熟，金融大數(shù)據(jù)應用已經(jīng)成為行業(yè)熱點趨勢，在交易欺詐識別、精準營銷、黑產(chǎn)防范、消費信貸、信貸風險評估、供應鏈金融、股市行情預測、股價預測、騙保識別、風險定價等涉及銀行、證券、保險等多領(lǐng)域的具體業(yè)務中得到廣泛應用。對于大數(shù)據(jù)分析的應用能力，正在成為金融機構(gòu)未來發(fā)展的核心競爭要素。3.大數(shù)據(jù)在醫(yī)療領(lǐng)域應用近年來，大數(shù)據(jù)解決方案與大數(shù)據(jù)分析工具開始被廣泛運用于醫(yī)療衛(wèi)生領(lǐng)域。醫(yī)生對患者診療和治療過程中產(chǎn)生的數(shù)據(jù)，包括患者的基本數(shù)據(jù)、電子病歷、診療數(shù)據(jù)、醫(yī)學影像數(shù)據(jù)、醫(yī)學管理、經(jīng)濟數(shù)據(jù)、醫(yī)療設備和儀器數(shù)據(jù)等。以患者為中心，成為醫(yī)療數(shù)據(jù)的主要來源。醫(yī)療大數(shù)據(jù)的主要用于以下方面：用藥分析、病因分析、移動醫(yī)療、基因組學、疾病預防、可穿戴醫(yī)療設備等。任務1.1數(shù)據(jù)分析基本內(nèi)容認知4.大數(shù)據(jù)在交通物流領(lǐng)域的應用物流是物品從供應地向接收地的實體流動，是將運輸、儲存、裝卸搬運、包裝、流通加工、配送和信息處理等功能有機結(jié)合起來而實現(xiàn)用戶要求的過程。用戶可以通過業(yè)務系統(tǒng)和GPS定位系統(tǒng)獲得數(shù)據(jù)，使用數(shù)據(jù)構(gòu)建交通狀況預測分析模型，有效預測實時路況、物流狀況、車流量、客流量和貨物吞吐量，進而提前補貨，制定庫存管理策略。5.大數(shù)據(jù)在教育教學管理方面應用校園數(shù)據(jù)分析對于提升教師能力也有重要的意義。以前的教學主要依靠教師的個人經(jīng)驗和感覺，教師教學能力的學習曲線比較平緩，在教師教學能力提升過程中，教學質(zhì)量難以得到保證。如果能夠?qū)虒W資源管理平臺中的學生學習數(shù)據(jù)進行分析，教師就可以得知學生的興趣點和難點,從而幫助教師有的放矢地把握教學重點、難點，提升教學效果。通過對不同老師教學方法和教學效果的橫向?qū)Ρ?，也可以幫助老師吸取別人的優(yōu)點，提高教學能力。同時,教學數(shù)據(jù)也可以為教學管理者提供全面、科學的教師評價依據(jù)。任務1.1數(shù)據(jù)分析基本內(nèi)容認知大數(shù)據(jù)分析方法，從其技術(shù)實現(xiàn)層面可以分為統(tǒng)計分析類、高級分析類和數(shù)據(jù)挖掘類三種類型。1.1.2數(shù)據(jù)分析方法任務1.1數(shù)據(jù)分析基本內(nèi)容認知案例分析隨著新一輪的生產(chǎn)力增長和消費者盈余浪潮的到來，海量數(shù)據(jù)的挖掘和使用，預示著“大數(shù)據(jù)”已經(jīng)存在于我們生活的方方面面。下面列舉兩個發(fā)生在身邊的大數(shù)據(jù)技術(shù)應用的場景。1.購物推薦系統(tǒng)打開淘寶，首頁內(nèi)容會給你推薦很多商品，這些商品有的是你曾經(jīng)瀏覽過類似的物品，有些是你可能潛意識里想買的物品，于是你不斷刷著淘寶，不斷的點進去看，不斷地買買買。打開美團，首頁給你推薦了很多美食，單是火鍋，就有各種口味的、距離你最近的、最便宜的，再到其他的奶茶等等，于是你就不斷的查看挑選，最終選擇了最心儀的店鋪與美食。2.高德地圖APP高德地圖APP能夠播報實時交通路況，推薦避堵路線方案，用戶可在高德地圖APP中輸入起點與終點可以查詢公交地鐵換乘方案，智能計算到達目的地所需的時間，且可通過輸入公交路線號查詢實時公交位置。這些都離不開大數(shù)據(jù)技術(shù)。任務1.1數(shù)據(jù)分析基本內(nèi)容認知任務實訓在學習本節(jié)內(nèi)容后，請同學結(jié)合自己專業(yè)談談大數(shù)據(jù)在你的專業(yè)領(lǐng)域中如何運用的，可以從以下幾個方面切入，包括數(shù)據(jù)分析的應用場景、數(shù)據(jù)分析流程以及數(shù)據(jù)分析可能用到的方法等。任務評價評價類別評價內(nèi)容分值得分綜合得分知識與技能評價（70%）能結(jié)合專業(yè)思考數(shù)