知識挖掘及智能應用課件

1、人工智能的學術研究與工業(yè)應用正引起越來越廣泛的關注。計算機就像人一樣，既需要聰明的大腦，又需要博學的知識，才能為人類提供真正智能的服務。本次報告將重點關注如何通過數(shù)據(jù)挖掘與自然語言處理技術讓計算機掌握知識并在應用場景中使用知識，以此來解決實際應用中的問題。我們將從知識的定義，抽取方法，表示方法開始，進而簡單介紹一些知識推理與語義計算的基本想法，最后擴展到如何通過知識計算賦予計算機一定的聯(lián)想與創(chuàng)造能力。知識挖掘及智能應用知識是什么？人類對世界的認知對經(jīng)驗規(guī)律的總結問答知識其它知識常識知識計算機可以讀取并進行計算有結構的知識一個例子：雙向知識圖譜為什么研究知識？天資聰慧 + 良好教育效率的力量感知

2、的模型化問答知識人-機器（黑箱）-結論人-機器-人（迭代）感知計算單向計算與雙向計算需要背景知識的理解 （自然語言）認知計算研究什么問題？抽取融合如何獲取知識發(fā)現(xiàn)知識在哪知識表示如何讓計算機懂知識知識推理與語義計算知識如何計算不當書呆子如何使用知識發(fā)現(xiàn)與抽取問答知識半結構數(shù)據(jù)無結構數(shù)據(jù)結構數(shù)據(jù) 其它數(shù)據(jù)類型基礎自然語言處理（分詞，NER etc.）關系分類，檢索與抽取大數(shù)據(jù)挖掘主動學習模型，增強學習模型一個例子：半結構數(shù)據(jù)知識抽取問答知識非監(jiān)督包裝器學習算法處理網(wǎng)頁規(guī)模200億抽取事實知識4000億微軟必應第一個基于機器學習的知識抽取算法知識表示與集成 實體等價知識庫 拉肚子 = 腹瀉 = 實

3、體概念知識庫 三叉 IsA 腦外科疾病Acronym/Synonym miningSemantic relation miningConcept graph miningText embeddingKnowledge graph embeddingNetwork embedding實體識別（W2V+LSTM+CRF）實體鏈接 （歧義性，多樣性）主動學習模型符號知識語義表示知識集成分布式知識表示一個例子：共現(xiàn)知識圖分布式表示學習問答知識Network embedding 算法強大的大數(shù)據(jù)處理能力知識可視化，知識推理源代碼開源WWW 2015知識推理與語義計算 實體等價知識庫 拉肚子 = 腹瀉 =

4、 實體概念知識庫 三叉 IsA 腦外科疾病知識推理語義計算一個例子：基于知識推理語義的自動問答問答知識經(jīng)過知識推理的自然語言理解算法客服自動問答系統(tǒng)應用AAAI 2017知識的應用 實體等價知識庫 拉肚子 = 腹瀉 = 一個例子：基于有條件知識的對話問答問答知識CIKM 2016How to upgrade to Windows 10?How to upgrade from Windows XP to Window 10?How to upgrade from Windows 7 to Window 10?Pay $119 to but?Free upgradeSubject: Windows

5、 10Predicate: upgradeObject: Pay $119 to buyCondition: Windows XPSubject: Windows 10Predicate: upgradeObject: Free upgradeCondition: Windows 7問答知識新 機遇算法進展大數(shù)據(jù)處理進展應用行業(yè)認可讓計算機掌握常識 實體等價知識庫 拉肚子 = 腹瀉 = 面向推理的常識知識面向表示的常識知識Acronym/SynonymDefinitionConceptMetaphorSimilar entity概念知識圖 英文版數(shù)據(jù)已開放下載中文高頻數(shù)據(jù)2017秋季開放下載讓

6、計算機學會聯(lián)想實體等價知識庫 拉肚子 = 腹瀉 = 在完全不同的實體類型中找到他們的聯(lián)系人可以聯(lián)想到， 我們的機器呢？關鍵字？上下文？傳統(tǒng)知識圖譜？Large Scale Metaphor Graph LearningHow to extract?How to represent?How to use?提示：慢，癮，不幸福，可依靠游戲時間本喻知識圖 Internet virtual wallA treatment plan road mapRaising kids growing treesfishing yogaThe fog cageRevenge the sweetest joythe elephant lively snake大規(guī)模在建知識圖讓計算機學會創(chuàng)造Can Machines Intelligently Propose Novel and Reason