智慧旅游大數(shù)據(jù)分析實訓(xùn)系統(tǒng)需求說明

智慧旅游大數(shù)據(jù)分析實訓(xùn)系統(tǒng)需求說明功能要求必要功能1. 支持WebSphere、WebLogic、Tomcat等國外中間件，支持金蝶中間件、東方通中間件等國產(chǎn)中間件；2. 提供元數(shù)據(jù)搜索功能，可搜索所有系統(tǒng)資源，可精準定位被搜索資源的位置，支持對不同資源類型的分類查詢，包括分析類型、數(shù)據(jù)集、數(shù)據(jù)源、參數(shù)等。3. 支持對資源進行元數(shù)據(jù)分析，如影響性分析、血統(tǒng)分析，可以從源資源定位目標資源，也可以從目標資源定位到源資源；元數(shù)據(jù)分析支持過濾要分析的數(shù)據(jù)類型，如參數(shù)、字段、圖形主題等。4. 提供系統(tǒng)級別的一鍵備份與恢復(fù)機制，可自動備份；支持資源的備份恢復(fù)，并且在導(dǎo)出資源時可一鍵添加依賴資源、資源權(quán)限、數(shù)據(jù)權(quán)限。5. 提供JAVA、WebService、JS等多種技術(shù)二次開發(fā)接口，并有充分的中文說明文檔。6. 支持功能模塊層面集成，在第三方系統(tǒng)內(nèi)整合模塊功能。7. 支持客戶自行通過JS腳本擴展或插件包擴展方式進行定制化開發(fā)，不直接修改產(chǎn)品源碼，保證產(chǎn)品的穩(wěn)定性與升級的方便性。8. 系統(tǒng)內(nèi)置可視化、統(tǒng)一的系統(tǒng)監(jiān)控界面，方便系統(tǒng)管理員進行系統(tǒng)運行監(jiān)控與問題排查，包括進行線程、緩存、堆打印、實驗監(jiān)控、服務(wù)監(jiān)控、會話、網(wǎng)絡(luò)、內(nèi)存、SQL監(jiān)控等分析。9. 每個報表可進行耗時分析，能查看SQL執(zhí)行時間、數(shù)據(jù)讀取時間、服務(wù)器處理時間、數(shù)據(jù)集行數(shù)。10. 支持安全補丁熱修復(fù)，即可在不重啟設(shè)備的情況下，對設(shè)備當(dāng)前軟件版本的缺陷進行修復(fù)。安全補丁更新方式包括：在線更新和手動更新。11. 支持DB2、Teradata、Sybase、Informix、OracleTimesTen、PostgreSQL、Greenplum、Vertica、Hadoop_Hive、SparkSQL、Presto等國外數(shù)據(jù)庫。12. 支持Kingbase、Gbase、達夢、星環(huán)、Gauss100、Gauss200、aliyunAnalyticDB、aliyunMaxCompute、HuaweiFusionInsightHD、Obase等國產(chǎn)數(shù)據(jù)庫。13. 支持非關(guān)系型的多維數(shù)據(jù)庫與NoSQL數(shù)據(jù)庫，如Essbase、Mondrian、MongoDB等。14. 支持將目錄或報表授權(quán)給用戶、用戶組、角色等，實現(xiàn)查看、編輯、刪除、再授權(quán)等不同粒度的權(quán)限控制。15. 下級目錄或報表可自動繼承上級目錄的授權(quán)設(shè)置，無需逐個目錄或報表進行授權(quán)，并且是否繼承的方式可配置。16. 有自研分發(fā)器，無需依賴應(yīng)用服務(wù)器分發(fā)，系統(tǒng)可自行依據(jù)應(yīng)用節(jié)點CPU、GC時間獨立進行分發(fā)，可在圖形化界面進行節(jié)點配置，負載均衡采用平滑加權(quán)輪詢算法保證系統(tǒng)穩(wěn)定性。17. 支持大數(shù)據(jù)量查詢結(jié)果分批返回，分批返回行數(shù)、前端分頁顯示行數(shù)均可設(shè)置。18. 支持查詢緩存，可在不同用戶間的共享查詢結(jié)果集，無需重復(fù)到數(shù)據(jù)庫查詢。支持整個系統(tǒng)級別、某個查詢級別的啟用緩存、禁止緩存設(shè)置。19. 語義模型能將數(shù)據(jù)庫中的表字段進行拖拽重組，形成面向業(yè)務(wù)分析的邏輯主題，并支持在主題中對表字段進行時間層次、轉(zhuǎn)換規(guī)則、參與分組等設(shè)置。20. 支持在語義模型中對指標設(shè)置默認的數(shù)據(jù)瀏覽格式，如百分比、小數(shù)位數(shù)、千分位、前后綴（如萬元），瀏覽數(shù)據(jù)時該字段自動以該格式展現(xiàn)，無需逐個設(shè)置。21. 支持在語義模型中對指標設(shè)置默認的聚合方式，如合計、計數(shù)、唯一計數(shù)、平均等方式，方便系統(tǒng)管理員在模型層統(tǒng)一設(shè)置。22. 語義模型自動繼承數(shù)據(jù)庫層的表關(guān)系，且可作為私有設(shè)置在此基礎(chǔ)上進一步修改而不會影響數(shù)據(jù)庫層或其他模型。23. 語義模型支持多表關(guān)聯(lián)設(shè)置，支持左連接、右連接、內(nèi)連接、全連接方式，并支持按列名、按別名、按外鍵自動創(chuàng)建表關(guān)系，支持一鍵清除表關(guān)系。24. 在界面配置實現(xiàn)數(shù)據(jù)脫敏功能，支持掩碼、字符替換、正則替換等脫敏算法，可支持指定不同用戶組、用戶、角色生效，并且可控制在瀏覽或者導(dǎo)出時候生效。25. 支持關(guān)聯(lián)、篩選、建立層次、格式設(shè)置、邏輯計算等；自助數(shù)據(jù)集支持引用原生SQL數(shù)據(jù)集、可視化數(shù)據(jù)集、JAVA數(shù)據(jù)集以及即席查詢和透視分析等二次分析結(jié)果。26. 支持定義Excel模板進行批量的數(shù)據(jù)導(dǎo)入，可設(shè)置與目標數(shù)據(jù)庫表的字段映射關(guān)系，支持Java接口進行自定義擴展。27. 支持直接將Excel數(shù)據(jù)、CSV、TXT數(shù)據(jù)、數(shù)據(jù)分析包加載到系統(tǒng)中進行分析，無須預(yù)先定義模板。28. 通過簡單拖放操作對原始數(shù)據(jù)進行處理，并可基于數(shù)據(jù)集進行數(shù)據(jù)增量或者全量抽取；支持數(shù)據(jù)抽取到緩存庫中，緩存庫支持多種類型，如Presto+Hive、星環(huán)、Vertica、Infobright等。29. 支持掃碼添加服務(wù)器，無需輸入地址。30. 使用H5標準，支持與微信企業(yè)號、釘釘集成，無需安裝APP，用戶根據(jù)權(quán)限直接瀏覽公眾號中的報表；支持報表分享，可以匿名將報表分享到微信等第三方系統(tǒng)。31. 支持離線報表，在離線狀態(tài)下可以進行鉆取、跳轉(zhuǎn)、改變查詢條件等交互分析。32. 支持離線包推送，用戶接收后可以增量更新離線數(shù)據(jù)包。33. 訪問密碼驗證失敗5次時，自動刪除已下載的離線報表數(shù)據(jù)，保證離線報表數(shù)據(jù)的安全性。34. 直接支持Excel、WPS作為設(shè)計器（不是導(dǎo)入Excel模版，不是類Excel設(shè)計器），業(yè)務(wù)人員能夠自己在Excel中完成報表開發(fā)。35. 支持Excel樣式，如條件格式，快速分析，等強大的excel功能。36. 支持直接在設(shè)計器刷新報表，并可指定參數(shù)，而不是打開內(nèi)置瀏覽器或默認瀏覽器預(yù)覽。刷新后，可重置為設(shè)計狀態(tài)。37. 設(shè)計器開發(fā)的報表，支持一鍵發(fā)布到PC、平板、手機等終端進行瀏覽，可分別設(shè)置手機和電腦的自適應(yīng)方式。38. 支持基礎(chǔ)統(tǒng)計分析，如平均數(shù)、標準誤差、中位數(shù)、眾數(shù)、方差、標準差、偏度、峰度等；支持高級統(tǒng)計分析，如泊松分布、正態(tài)分布、指數(shù)分布、二項分布、線性回歸、t分布、F分布等；支持杜邦分析。39. 完全復(fù)用Excel函數(shù)，支持數(shù)學(xué)函數(shù)、三角函數(shù)等Excel函數(shù)；支持貼現(xiàn)率、內(nèi)部報酬率、年度單利、年有效利率、等效利率、內(nèi)部回報等財務(wù)函數(shù)；且支持自定義函數(shù)。40. 支持不規(guī)則報表、交叉報表、多區(qū)域報表、分片報表、多源報表等多種復(fù)雜報表。41. 支持跨區(qū)域公式計算；支持把某單元格或某區(qū)域的數(shù)據(jù)生成圖片，將其展示在預(yù)定的位置42. 報表導(dǎo)出Excel格式后，在Excel打開該報表，報表中的函數(shù)依舊可以使用，而不是靜態(tài)文字。43. 可靈活設(shè)計數(shù)據(jù)采集模板，并發(fā)布到PC、手機、平板上進行數(shù)據(jù)填報，并將數(shù)據(jù)回寫到一張或多張數(shù)據(jù)庫表中。44. 數(shù)據(jù)填報支持文件上傳下載到FTP或者SFTP服務(wù)器。45. 可結(jié)合填報的權(quán)限配置，支持不同人員在同一張報表上分別填報及瀏覽自己的數(shù)據(jù)，并且可控制行列單元格、界面控件、Sheet頁的編輯和瀏覽權(quán)限。46. 提供數(shù)據(jù)填報流程審核功能，支持子流程、會簽，通過圖形化的配置界面，可將流程與數(shù)據(jù)填報報表一起導(dǎo)出，并在其他環(huán)境恢復(fù)使用。47. 報表支持水印設(shè)置，支持覆蓋水印與底圖水印模式，水印類型包括文字水印與圖片水印，并且可以使用系統(tǒng)函數(shù)動態(tài)獲取用戶名字、時間等作為水印。48. 支持報表模板管理，管理員可在設(shè)計器中將報表或者圖形提交到報表模板庫中，方便用戶使用。49. 支持Excel圖形及Excel組合圖形，如迷你圖、帕累托圖、子彈圖、小又多圖等特色圖形。50. 支持直接在報表設(shè)計器使用第三方模板，如美化大師，來對表格和圖形進行美化。51. 內(nèi)置中國及各省行政區(qū)域地圖，支持地圖鉆取及回退；支持自定義地圖；內(nèi)置支持百度地圖、航線地圖、散點地圖、熱力地圖等地圖顯示類型，支持集成第三方GIS系統(tǒng)。52. 支持多種數(shù)據(jù)來源的數(shù)據(jù)集，如數(shù)據(jù)庫、語義模型、可視化數(shù)據(jù)集等，也支持直接寫SQL。53. 支持查詢結(jié)果作為數(shù)據(jù)集（如透視分析、即席分析）再與其他數(shù)據(jù)進行關(guān)聯(lián)進行二次分析。54. 支持自定義字段輸出格式，可以設(shè)置顯示值和真實值。55. 支持可視化參數(shù)定義與管理，并支持私有參數(shù)和公共參數(shù)設(shè)置，公有參數(shù)可轉(zhuǎn)化為私有參數(shù)，不被其他數(shù)據(jù)集引用。56. 支持設(shè)置報表打開時只刷新表樣，并可設(shè)置切換參數(shù)后的刷新動作。57. 內(nèi)置跨庫處理引擎，能夠進行不同數(shù)據(jù)源、異構(gòu)數(shù)據(jù)源間的跨庫查詢，數(shù)據(jù)無需抽取，統(tǒng)一使用SQL訪問接口。58. 支持直接在web端拖放式設(shè)計儀表盤，含有豐富的圖形組件及控件組件，如TAB頁組件、URL鏈接、文本組件、圖片組件等控件；支持組件的復(fù)制。59. URL鏈接支持內(nèi)外部資源傳參，在編輯URL鏈接界面中對鏈接目標設(shè)置傳值。60. 支持組件的快捷對齊、分布，支持等比縮放寬度自適應(yīng)、等比縮放高度自適應(yīng)、全屏鋪滿，支持SVG和Canvas圖形渲染方式。61. 支持背景自動壓縮300k以下。62. 同一自助儀表盤可支持來源于不同數(shù)據(jù)源的多個數(shù)據(jù)集，并自動按照同名字段關(guān)聯(lián)或者自定義設(shè)置組件間的聯(lián)動關(guān)系，來對數(shù)據(jù)進行過濾，并支持關(guān)聯(lián)字段過濾時模糊匹配。63. 支持?；鶊D、漏斗圖、旭日圖、極坐標柱圖、極坐標曲線圖、階梯線圖、大數(shù)據(jù)散點圖、力導(dǎo)向關(guān)系圖、無盤油量圖等圖形；用戶瀏覽圖形數(shù)據(jù)時，可直接切換為數(shù)據(jù)模式查看數(shù)據(jù)情況。64. 儀表盤支持系統(tǒng)建議配色和自定義設(shè)置RGB顏色。65. 直接使用ECharts圖形庫展示，支持瀑布圖、關(guān)系圖、雷達圖、油量圖、熱力圖、樹圖等圖形，支持ECharts圖形選項配置。66. 支持默認圖形組件的屬性擴展，填寫擴展屬性，可快速變更圖形樣式。而非使用代碼集成開發(fā)新圖形樣式。67. 分析過程中可以將任意字段作為篩選條件，并靈活更改查詢運算符，還能根據(jù)字段類型智能顯示參數(shù)控件類型。68. 支持設(shè)置報表打開時只刷新表樣，并可設(shè)置切換參數(shù)后的刷新動作。69. 分析過程可以根據(jù)需要靈活設(shè)置查詢條件間的組合關(guān)系，以及條件間的AND、OR邏輯運算關(guān)系。70. 條件選擇框的數(shù)據(jù)來源既可以從當(dāng)前字段自動獲取，還能從另外的維表獲取，解決大數(shù)據(jù)量下的條件框顯示性能問題。71. 支持聚合、鉆取、切片、交叉、行列互換、焦點項等分析方式；支持數(shù)據(jù)上鉆、下鉆、旋轉(zhuǎn)、分級排序等分析功能。72. 即能直接使用語義模型進行分析，也可以基于清單查詢的結(jié)果集一鍵進入數(shù)據(jù)透視模式。73. 對大數(shù)據(jù)量查詢支持后臺批量導(dǎo)出；也支持將分析結(jié)果導(dǎo)出為加密的數(shù)據(jù)分析包，實現(xiàn)數(shù)據(jù)分發(fā)。74. 提供同期值、同期增長率、前期值、環(huán)比、環(huán)比增長率、期初期末值、日均、累計值、增長值等時間計算選項，快速完成時間計算分析。75. 預(yù)留應(yīng)用商店、數(shù)據(jù)答疑、數(shù)據(jù)導(dǎo)航、消息中心等模塊接口，可平滑接入產(chǎn)品中。76. 支持Javabean、JS等擴展取數(shù)接口，滿足第三方系統(tǒng)取數(shù)、特殊格式數(shù)據(jù)加載、復(fù)雜數(shù)據(jù)運算等類型的數(shù)據(jù)分析展現(xiàn)需求。77. 支持用戶自定義門戶組件布局，“零編碼”配置首頁展示樣式；支持豐富的門戶組件，包括收藏夾組件、卡片列表組件、應(yīng)用商店組件、便捷入口組件等。78. 支持快速定位有用數(shù)據(jù)，快速發(fā)現(xiàn)需要的數(shù)據(jù)，數(shù)據(jù)脫敏受控；系統(tǒng)內(nèi)置審批流程，用戶需對未授權(quán)數(shù)據(jù)提交審批流程，審批通過后可查看真實數(shù)據(jù)。79. 支持通過設(shè)定標簽對問題分類；支持在數(shù)據(jù)答疑界面提問時，設(shè)置為私密提問，指定解答人；支持通過可視化圖表形式展示問答的回答數(shù)、獲贊、訪問、評論和最近一周訪問數(shù)據(jù)分析情況。80. 支持將分析結(jié)果發(fā)布成應(yīng)用；內(nèi)置發(fā)布流程，應(yīng)用發(fā)布成功通過消息中心告知平臺所有用戶；商店對應(yīng)用上架、應(yīng)用下架、應(yīng)用重新上架等管理操作進行審核。81. 支持在“應(yīng)用商店”搜索關(guān)鍵字查找自己想要的應(yīng)用；可根據(jù)發(fā)布時間、訪問量、下載量、評論數(shù)對應(yīng)用進行排序；支持通過權(quán)限申請將應(yīng)用安裝到“已安裝應(yīng)用”中進行使用。82. 支持通過系統(tǒng)平臺推送系統(tǒng)消息、公告、私信等各類信息，評論、點贊等互動消息會自動地通過私信消息提醒查看；可直接在可視化界面新建消息，支持設(shè)置消息置頂、附件等。83. 系統(tǒng)支持用戶自定義自己的頭像和個人信息；支持對分析、應(yīng)用、問答等進行點贊、評論；支持對優(yōu)秀的分析成果進行分享，可分享到微信、釘釘，提供鏈接、二維碼等形式進行分享，可以設(shè)置訪問密碼及訪問截止日期。84. 支持相關(guān)性分析、高維數(shù)據(jù)可視化、假設(shè)檢驗、全表統(tǒng)計等統(tǒng)計分析方法。85. 支持分類預(yù)測、回歸預(yù)測與聚類分析；包含邏輯回歸、樸素貝葉斯、向量機、決策樹、隨機森林、K均值、混合高斯模型等算法。86. 支持文本分析算法，能快速實現(xiàn)文本的處理工作，包括文本分詞、TF-IDF、停用詞處理、詞袋模型、詞頻統(tǒng)計。87. 針對不同算法，提供不同的算法評估指標，包括但不限于：準確率、召回率、F1值、擬合優(yōu)度、混淆矩陣、ROC曲線、auc值、KS曲線、均方根誤差、均方誤差、r2等。88. 支持自定義Python、JAVA代碼，靈活幫助用戶擴展算法庫，用戶可以定制新的機器學(xué)習(xí)平臺算法節(jié)點。89. 支持算法自行進行迭代，自動選擇最合適的參數(shù)，無需人工干預(yù)。90. 對于已訓(xùn)練好的優(yōu)化模型，可以保存模型；建好的實驗可以進行導(dǎo)入與導(dǎo)出；模型支持自學(xué)習(xí)。91. 支持將已經(jīng)訓(xùn)練好的優(yōu)化預(yù)測模型部署成為Web服務(wù)，提供API供實際業(yè)務(wù)使用；用戶可直接通過調(diào)用該API向其發(fā)送數(shù)據(jù)，獲取優(yōu)化模型的預(yù)測數(shù)據(jù)，支持實時或者以批處理模式發(fā)送數(shù)據(jù)。92. 支持機器學(xué)習(xí)算法的分布式執(zhí)行，以充分利用計算資源和加快性能。需要支持5個節(jié)點的分布式計算引擎。93. 通過模型離線批量預(yù)測定時調(diào)度訓(xùn)練好的模型DAG來將批量預(yù)測結(jié)果數(shù)據(jù)輸入到目標表中。94. 挖掘平臺和BI數(shù)據(jù)互通，將數(shù)據(jù)挖掘與BI統(tǒng)計分析相結(jié)合，形成功能互補。95. 支持在web端，拖拽式對數(shù)據(jù)進行隨機采樣、加權(quán)采樣、分層采樣，并且可選擇按個數(shù)、比例進行采樣。96. 能進行本地手工數(shù)據(jù)與數(shù)據(jù)庫動態(tài)數(shù)據(jù)的關(guān)聯(lián)分析，業(yè)務(wù)用戶可通過即席查詢進行清單數(shù)據(jù)篩選，基于透視分析做數(shù)據(jù)的透視匯總。97. 制作好的報表資源可以發(fā)布到電腦、平板、手機等不同終端設(shè)備進行查看，通過用戶組、用戶、角色進行權(quán)限管理，還可以通過Web方式將資源共享給其他用戶。98. 支持數(shù)據(jù)拆分、字段過濾與映射、列選擇、過濾空值、合并列、合并行、JOIN、元數(shù)據(jù)編輯、行選擇、去除重復(fù)值、排序、增加序列號、聚合、分列、派生列、類型轉(zhuǎn)換、行列轉(zhuǎn)換。99.負載均衡分發(fā)器支持圖形可視化操作方式擴展集群節(jié)點，不需要手工進行額外的文件轉(zhuǎn)移。100.數(shù)據(jù)包含30余項畫像維度如游客的年齡、性別、學(xué)歷、職業(yè)、住宿偏好