專題：2024中國AIGC創(chuàng)新發(fā)展論壇

　　2024年服貿(mào)會專題論壇之一——“2024中國AIGC創(chuàng)新發(fā)展論壇”于9月13日-14日在北京舉行。美的集團(tuán)首席信息安全官兼軟件工程院院長、歐洲科學(xué)院院士劉向陽出席并演講。

　　以下為演講實錄：

　　劉向陽：大家好，非常感謝有這個機(jī)會跟大家做一個交流，我的題目是數(shù)字化底座建設(shè)。

　　題目里面有兩個關(guān)鍵詞：一個是AI，美的集團(tuán)全面擁抱AI大模型始于去年年初。去年使用AI的模式還是外掛式的，今年已經(jīng)轉(zhuǎn)變?yōu)閮?nèi)嵌式的。美的數(shù)字化底座也融入很多AI的能力。第二個是全球化，全球化帶來出海，出海帶來的問題就是“多云”，在國內(nèi)用的是公有云、私有云，在海外可能用海外的公有云，這就會導(dǎo)致數(shù)字化底座的不統(tǒng)一，給上層應(yīng)用帶來非常大的改造量。怎么解決這個問題呢？在美的，我們建設(shè)了一整套云中立的數(shù)字化底座，也就是說不管你是在公有云上還是私有云上，對于應(yīng)用來說整個數(shù)字化底座是一模一樣的，是全球一張網(wǎng)。這樣的話，上面的應(yīng)用不需要任何改造就可以部署在任何一朵云上。

　　今天簡要先介紹幾個系統(tǒng)，分別是大數(shù)據(jù)平臺、數(shù)據(jù)庫平臺和研發(fā)效能平臺。

　　首先講一下大數(shù)據(jù)開發(fā)平臺。大數(shù)據(jù)開發(fā)跟普通應(yīng)用開發(fā)不一樣，普通開發(fā)相對簡單，大數(shù)據(jù)開發(fā)平臺涉及到數(shù)據(jù)的處理，各種表的處理，過程非常復(fù)雜。因此需要有一整套的大數(shù)據(jù)開發(fā)環(huán)境和大數(shù)據(jù)的開發(fā)平臺，這里包括數(shù)據(jù)質(zhì)量的檢測，比如高管早上7點起來，你7點之前必須把這些報表準(zhǔn)備好，如何確保這些數(shù)據(jù)在那個時候能出來？第一是任務(wù)要跑完，第二跑出來的數(shù)據(jù)是準(zhǔn)確的，這經(jīng)常需要手工去檢查。美的數(shù)據(jù)部門必須深夜起來看這個運(yùn)行是否正常，這需要很大人力投入，但我們已經(jīng)把這個檢查過程全部自動化了。

　　大數(shù)據(jù)開發(fā)平臺包括數(shù)據(jù)集成、數(shù)據(jù)開發(fā)、任務(wù)運(yùn)維、數(shù)據(jù)地圖、數(shù)據(jù)血緣等等這些能力，還內(nèi)嵌了很多AI的能力分析。這個是多租戶管理，即使是在一家企業(yè)，多租戶能力也是非常重要的，否則如果一個人寫一個大的數(shù)據(jù)清洗任務(wù)，如果任務(wù)特別耗資源，就會導(dǎo)致其他任務(wù)跑不出來，這個必須具備多租戶的隔離能力，保證任何一個人寫一個非常非常耗資源的任務(wù)不會把別人打掛，只能把自己打掛。同時我們提供了非常豐富的異構(gòu)數(shù)據(jù)源之間的數(shù)據(jù)集成，因為要從各種異構(gòu)數(shù)據(jù)庫提取數(shù)據(jù)。數(shù)據(jù)開發(fā)能力包括離線作業(yè)的開發(fā)、實時作業(yè)的開發(fā)，還包括各種表的管理等等。

　　大數(shù)據(jù)降本也是企業(yè)面臨的一個難題，因為大數(shù)據(jù)非常消耗資源。我們在這方面做了很多工作，比如一般情況大數(shù)據(jù)有兩個集群：一個是生產(chǎn)集群，一個是開發(fā)集群。當(dāng)你在開發(fā)集群上引用生產(chǎn)環(huán)境的數(shù)據(jù)時，要把很多生產(chǎn)數(shù)據(jù)拷貝到生成集群，這個非常消耗資源，也非常耗時。這就帶來了兩個問題：第一你得有兩個集群；第二經(jīng)過數(shù)據(jù)拷貝后，這兩個集群的大小可能都差不多。我們是怎么解決這個難題的？我們把這二者合二為一了，而且數(shù)據(jù)我們只保留一份邏輯數(shù)據(jù)。在數(shù)據(jù)開發(fā)的過程中，當(dāng)對某些表做寫操作時，開發(fā)人員的感受是對任何有權(quán)限表都可以寫操作，但實際上這個操作不會影響我們的生產(chǎn)數(shù)據(jù)。

　　數(shù)據(jù)的血緣分析非常重要。現(xiàn)在美的一張復(fù)雜的表可能由上千張表最終生成的，這些復(fù)雜的表，幾十萬張表、上百萬張表，他們的關(guān)系非常復(fù)雜，靠手工捋清楚是極其耗時的事情，我們實現(xiàn)了全自動數(shù)據(jù)血緣關(guān)系分析，并且以圖形方式展示出來。

　　我們還提供數(shù)據(jù)權(quán)限的管控，不同表采用不同權(quán)限控制，針對敏感數(shù)據(jù)，平臺會自動識別并自動脫敏。

　　大數(shù)據(jù)開發(fā)平臺還內(nèi)嵌AI能力，比如：在大數(shù)據(jù)平臺內(nèi)你可以直接用自然語言來問，告訴我每個城市的銷售額，并且按照倒敘排列，平臺就會直接返回正確結(jié)果。你也可以點開查看對應(yīng)SQL語句，你要想做修改也是可以做修改，也可以一鍵繪圖，就能幫你生成相應(yīng)的圖表。

　　當(dāng)然還提供數(shù)據(jù)洞察、全球部署等等，這些能力是全面對標(biāo)信通院標(biāo)準(zhǔn)的全部能力。

　　下面介紹一下大數(shù)據(jù)引擎平臺。這個引擎平臺是兼容開源大數(shù)據(jù)體系的，因為業(yè)界有很多大數(shù)據(jù)開源的組件，比如Yarn、Spark、Flink等等，這些開源組件，很多公司是拿來直接用的，直接用就會產(chǎn)生一個問題，所有這些開源組件都不是企業(yè)級的軟件，真正用起來時都會有各種各樣問題，那我們怎么解決這個問題的？我們是把開源不具備的能力補(bǔ)齊，包括集群管理、組件管理、資源管理、動態(tài)擴(kuò)縮容、高可用、高可靠等等。形象的比喻是：開源引擎就像肉身一樣，我們做的是外殼，把這些平臺管控和內(nèi)核優(yōu)化能力補(bǔ)齊。

　　當(dāng)然這些也是對標(biāo)信通院的標(biāo)準(zhǔn)。

　　下面介紹一下數(shù)據(jù)庫管理平臺。公司大部分情況下肯定要用到數(shù)據(jù)庫和DBA，DBA大部分情況下是直聯(lián)數(shù)據(jù)庫，然后對數(shù)據(jù)庫進(jìn)行各種操作，沒有權(quán)限管控，即時有管控也只能在庫和表的level上進(jìn)行管控，要么沒有權(quán)限訪問，要么有權(quán)限訪問，HR數(shù)據(jù)庫DBA可以看到所有人工資，這個肯定是不合適的。還有看了哪些數(shù)據(jù)、對哪些數(shù)據(jù)進(jìn)行修改也沒有操作審計，而且看到數(shù)據(jù)的時候，數(shù)據(jù)也沒有脫敏，包括各種數(shù)據(jù)的傳輸。

　　還有一點是SQL診斷，能不能自動診斷出SQL問題，能不能自動給出修改意見。

　　這個是我們建設(shè)一整套數(shù)據(jù)庫管理平臺，我們所有的DBA不再直聯(lián)數(shù)據(jù)庫，我們所有DBA都是登錄我這個平臺，通過這個平臺去連數(shù)據(jù)庫，DBA不能直聯(lián)數(shù)據(jù)庫，所有操作是通過這個平臺來操作，這里有各種權(quán)限管控以及各種操作審計，包括查詢能力、數(shù)據(jù)變更、安全管控、數(shù)據(jù)同步、數(shù)據(jù)歸檔、數(shù)據(jù)訂閱、數(shù)據(jù)校驗、數(shù)據(jù)庫診斷以及運(yùn)維管理，這里講一下內(nèi)嵌的AI能力，比如能夠把自然語言生成SQL語句，也能夠根據(jù)SQL語句能告訴你這個SQL語句是什么意思，能夠完成不同數(shù)據(jù)庫之間SQL語句轉(zhuǎn)化，給我MySQL，給你生成Oracle SQL，還有MySQL的診斷，這塊我們首先有MySQL監(jiān)控，監(jiān)控檢測出來之后，大模型會自動給你修改意見，還有SQL執(zhí)行異常的話也會幫你分析原因。這個我們也是對標(biāo)了信通院的全部標(biāo)準(zhǔn)，美的有5000多個數(shù)據(jù)庫，全部由平臺管理，所有人不能直聯(lián)數(shù)據(jù)庫，只能通過平臺對數(shù)據(jù)庫進(jìn)行操作，這樣對DBA的人數(shù)是一個數(shù)量級的減少，提效非常明顯。

　　下面介紹一下數(shù)據(jù)庫引擎，企業(yè)里用開源數(shù)據(jù)庫很常見，比如MySQL等等數(shù)據(jù)庫，這些最大的一個問題是：不具備高可用、高可靠的能力，想把這些補(bǔ)齊非常困難。我們建設(shè)了一整套的管理平臺，這些開源數(shù)據(jù)庫我們對內(nèi)核做了優(yōu)化，那些沒有的能力我們也進(jìn)行了補(bǔ)齊，不是簡單地把數(shù)據(jù)庫改改，而是跟開源大數(shù)據(jù)平臺一樣，把缺乏的專業(yè)能力補(bǔ)齊。包括資源調(diào)度、彈性的擴(kuò)縮容、高可靠、高可用、安全巡檢等能力。當(dāng)然我們也做了很多優(yōu)化，優(yōu)化后，數(shù)據(jù)庫性能可以提升3倍，并發(fā)能力可以提升4倍。這里面很多高可用能力、高可靠能力，即使有人把這個數(shù)據(jù)庫刪了，跑路也沒有關(guān)系，我們有防護(hù)的能力，彈性的擴(kuò)縮容等能力。

　　下面介紹一下我們的研發(fā)效能平臺，這是一站式的研發(fā)效能平臺，包括幾大平臺：第一是項目管理，這是基于敏捷的研發(fā)模式。第二是研發(fā)平臺，包括構(gòu)建發(fā)布。還有自動化測試平臺，就是質(zhì)量平臺，包括各種流量回放、精準(zhǔn)測試等等能力。這三個平臺數(shù)據(jù)都會實時傳遞給度量平臺，這里面對個人、對團(tuán)隊等等從多個維度對效能進(jìn)行度量。還有一個是WorkSpace，這個是我們一整套基于AI的研發(fā)平臺，從需求分析一直到代碼自動生成上線，整個流程是全部基于大模型的。這是我們的項目管理平臺，這里面也是內(nèi)嵌很多的AI大模型能力，幫你做需求分析等等的能力。這是流水線，包括很多安全能力，包括很多SCA分析、DST、靜態(tài)掃描等等能力。這是代碼掃描和流水線，研發(fā)平臺也包括AI大模型能力，能夠代碼自動補(bǔ)全，也能夠給代碼生成注釋等等。測試平臺里面有很多能力，包括流量回放，省去寫測試用例的時間。精準(zhǔn)測試，一個企業(yè)里的項目很大，測試成千上萬個，改一行代碼經(jīng)常要把所有測試用例庫跑一遍，基本上是幾個小時的時間。我們看程序員好像看似在刷手機(jī)，但沒辦法，得等測試跑完。通過精準(zhǔn)測試，你改了10行代碼，只需要跑和這10行代碼關(guān)聯(lián)的測試用例，其他用例不需要跑，這樣就從幾個小時等待時間降到幾秒鐘時間，大大提高了測試人員的測試效率。我們也包含接口測試、混沌測試等功能。測試平臺也內(nèi)嵌AI大模型的能力，比如：性能測試自動生成性能報告、測試失敗幫你智能分析原因等等。度量平臺包括各種維度的度量，因為有上千個指標(biāo)，那上千的指標(biāo)到底根據(jù)哪一個來衡量團(tuán)隊和個人的效能？其實哪一個都是不合適的，單個指標(biāo)不能夠多維度衡量團(tuán)隊或個人的效能，可以通過平臺內(nèi)置的效能模型來實現(xiàn)多維度，多指標(biāo)的效能度量，當(dāng)然這個模型是支持用戶自定義的。度量平臺也包括了AI大模型能力，對于團(tuán)隊和個人，平臺AI都能夠自動生成效能報告，會幫你自動做分析，找到哪里存在效能瓶頸，哪里存在不足，這些都是AI自動生成的。

　　下面介紹一下WorkSpace，我們打造了一整套的基于大模型的全流程研發(fā)效能平臺，包括產(chǎn)品經(jīng)理Agent、開發(fā)工程師Agent、測試Agent。我們來看一下怎么用這個平臺？首先，你想做一個事情就把需求描述寫在這里，如果你是開發(fā)一個新的程序，你把需求描述寫在這里，99%的情況是改現(xiàn)有的代碼，有些部分做修改，這種情況下就可以把關(guān)聯(lián)代碼倉庫放進(jìn)來，把需求描述給出來，現(xiàn)有代碼修改也是沒問題的。然后平臺會根據(jù)你的需求描述，大模型會幫你自動生成需求分析，需求分析還可以做修改，然后再進(jìn)一步地幫你生成設(shè)計方案，當(dāng)然每一步可以做修改，然后自動拆解任務(wù)，自動生成測試單元等，最后可以一件提交部署。這是一整套的基于AI大模型的能力。這個在業(yè)界我們是第一個做的。

　　美的產(chǎn)品還包括很多電控軟件，所以我們支持電控軟件或者支持服務(wù)端，這也是滿足信通院全部的認(rèn)證標(biāo)準(zhǔn)。美的的內(nèi)部平臺，就有七千多個程序員在用。

　　由于時間關(guān)系，我就介紹到這里，謝謝大家。

　　新浪聲明：所有會議實錄均為現(xiàn)場速記整理，未經(jīng)演講者審閱，新浪網(wǎng)登載此文出于傳遞更多信息之目的，并不意味著贊同其觀點或證實其描述。