大模型在汽車行業(yè)的落地實踐

阿里云/公共云大模型技術服務高級專家黃高攀?阿里云大模型技術服務高級專家，2012年畢業(yè)于中科院自動化所，現負責阿里云汽車能源行業(yè)大模型技術服務方向，重點在汽車能源行業(yè)開展大模型技術的全流程場景落地服務。在AI/大模型技術服務領域有豐富的場景應用與行業(yè)落地經驗，先后就職于國網江蘇省電力公司、阿里云計算有限公司，為不同部委、制造業(yè)、交通運輸、汽車行業(yè)、電力能源等行業(yè)客戶提供過AI/大模型技術服務，獲得發(fā)明專利授權20余項。.......AI/大模型技術發(fā)展度網絡自動學習特征，深度學習?2017年：Transformer成為主流?2023年：ChatGPT發(fā)布，AIGC元?大語言模型已逐步擴展到視覺、聽大模型在存量業(yè)務大模型在存量業(yè)務和增量業(yè)務均有很大的推動作用，2028年大模型產業(yè)規(guī)模加成30+%Miaas產晶?LLM?……果性?企業(yè)基于大模型技術，在單個業(yè)務場景落地后，如何快速無縫地擴展到其他更多的業(yè)務場景?平臺、方案、能力如何復用多Agent方案：從單場景到綜合場景智能座艙智能座艙企業(yè)提效企業(yè)提效意圖識別Agent核心要求核心要求?領域Agent動態(tài)擴展AIAI工具鏈的重要性chain的方式，實現多多模態(tài)數據的應用LMOps：生產業(yè)務持續(xù)運營應用觀測應用觀測版本管理等數據回流LMOps：應用可觀測智能問答流程編排智能問答流程編排LMOps：應用可觀測智能問答流程編排智能問答流程編排LMOps：應用可觀測智能問答流程編排智能問答流程編排圖片來源：LincanLi,etal.,Data-CentricEvolutioninAutonomousDriving:AComprehensiveSurveyofBigDataSystem,DataMining,andClosed-LoopTechnologies,2024.01場景需求場景需求關鍵問題落地挑戰(zhàn)落地挑戰(zhàn)景/abs/2103.00020多模態(tài)VL模型編碼器，以及位置感知的視覺-語言適配器Qwen-VL:/abs/2308.12966??這張圖片顯示了一起發(fā)生在高速公路上的嚴重交通事故，導致卡車側翻的場景。天氣看起來陰沉，天空中沒有明顯的陽光。道路是一條高速公路，路面狀況良好，沒有明顯的損壞。?……車身橫躺在路面上。卡車的貨箱部分已經打開，貨物散落在周圍。卡車的輪胎和部分結構受損嚴重，顯示出事故的劇烈程度。?……道路上放置了幾個橙色的交通錐，以警示過往車輛注意避讓。?……可能是高速公路的出口標志。背景中有樹木和建筑物，顯示出這是一個郊區(qū)或鄉(xiāng)村地區(qū)的高速公路。??這張圖片展示了一條正在進行施工的道路。天氣看起來是陰天，路面濕滑，可能是剛下過雨。道路中間有一堆黑色的碎石和泥土，?在道路的左側，有一名穿著反光背心的工作人員正在設置或調整紅色的施工圍欄。圍欄?背景中可以看到一些車輛，包括一輛白色的汽車和一輛紅色的卡車，它們正在繞過施工區(qū)域。遠處還有一些建筑物和路燈，表明這技術方案落地效果內容理解構建圖像-場景詳細描述Pair升Query相似邊緣場景圖像的召回精20%～30%的效果提升場景需求關鍵問題潛在客戶線索邀約到店試駕客戶下訂?LLM對語音數據進行總結提煉，充分融合不同模態(tài)數據?LLM基于生成式預測，針對不同潛客提供個性化運營策略VS技術方案示例數據落地效果?具備靈活的擴展性：基于LLM生成式預測，未來可靈未來展望Agent的落地形態(tài)Agent，隨時接入生產業(yè)務場景?汽車行業(yè)場景業(yè)務和流程重構