* 以下文章來源于科技正能量,作者鄭凱
企業(yè)的數(shù)據(jù)往往分散在各個異構(gòu)系統(tǒng)中,這些數(shù)據(jù)的數(shù)據(jù)結(jié)構(gòu)、數(shù)據(jù)類型、存儲形式各不相同,就像散落在系統(tǒng)中的星星一樣各自“發(fā)光”。
這些“星星”只有在經(jīng)過有效地整合、管理和運營之后,才可以凝聚成璀璨的星云。星云看似雜亂無章,但實際上它們遵循著宇宙中的基本規(guī)律,在無序中創(chuàng)造有序,并釋放出巨大的能量,逐漸進化為璀璨的恒星。

隨著企業(yè)數(shù)字化轉(zhuǎn)型進入深水區(qū),數(shù)據(jù)的價值日益凸顯,要將數(shù)據(jù)價值打造得如“恒星”般耀眼,就需要探索一種新的數(shù)據(jù)運營模式,規(guī)范數(shù)據(jù)開發(fā)流程,增強數(shù)據(jù)開發(fā)效率,提升企業(yè)數(shù)據(jù)價值。
7月19日,2024中國國際金融展,在國家會議中心召開。在展會中,我們在長亮科技的展臺,看到一朵釋放數(shù)據(jù)價值的“星云”------長亮科技星云數(shù)智一體化平臺。
1
生產(chǎn)工具的革新,如新“星”的誕生
“加快發(fā)展新質(zhì)生產(chǎn)力”,在今年的政府工作報告中,被列為2024年十大工作任務(wù)之首。
新質(zhì)生產(chǎn)力如同星云中的新星誕生,代表著生產(chǎn)力的飛躍和變革,這種變革不僅體現(xiàn)在技術(shù)的革新上,更依賴于生產(chǎn)關(guān)系和生產(chǎn)工具的創(chuàng)新。
新星在誕生時會釋放出巨大的能量,照亮宇宙空間,為星云帶來活力和生機。亦如生產(chǎn)工具創(chuàng)新的意義,它將傳統(tǒng)生產(chǎn)力轉(zhuǎn)化為更為高效的新質(zhì)生產(chǎn)力,以實現(xiàn)生產(chǎn)力“求新”的要求和 “質(zhì)優(yōu)”的成果。
在當下復(fù)雜的經(jīng)濟環(huán)境下,“提質(zhì)增效”已成為企業(yè)數(shù)字化戰(zhàn)略的主旋律。而DataOps作為一種革命性的數(shù)據(jù)開發(fā)模式,正在重塑數(shù)據(jù)研運全鏈路生產(chǎn)工具,通過打造規(guī)范化&一體化的數(shù)據(jù)開發(fā)流程、精細化的數(shù)據(jù)運營體系,可實現(xiàn)數(shù)據(jù)產(chǎn)品交付效率與質(zhì)量的雙重躍升,已成為了金融機構(gòu)打破協(xié)作壁壘,解放數(shù)據(jù)生產(chǎn)力的新范式。
南京銀行作為首家在上交所上市的城商行,前瞻性地洞察到數(shù)據(jù)作為核心生產(chǎn)要素的重要性與潛力。
早在2018年,南京銀行就提出了加速大數(shù)據(jù)體系構(gòu)建的戰(zhàn)略規(guī)劃,精心布局了“1+2+3+4”的數(shù)據(jù)平臺架構(gòu)。隨著數(shù)據(jù)需求激增與交付能力受限的雙重挑戰(zhàn)日益嚴峻,南京銀行率先引入DataOps這一先進理念,以期提升數(shù)據(jù)研發(fā)效能,從而應(yīng)對大規(guī)模數(shù)據(jù)處理與分析的需求。
2023年9月,南京銀行攜手長亮科技開啟統(tǒng)一開發(fā)集成平臺的建設(shè)工作,旨在革新數(shù)據(jù)開發(fā)流程、提升數(shù)據(jù)供給能力,實現(xiàn)迅速響應(yīng)市場需求變化,為南京銀行業(yè)務(wù)發(fā)展提供強勁驅(qū)動力。
結(jié)合南京銀行的數(shù)字能力現(xiàn)狀,長亮科技項目團隊遵循“利舊原則”,對其現(xiàn)有數(shù)據(jù)產(chǎn)品進行全面整合與升級,集成了離線開發(fā)平臺、數(shù)據(jù)交換系統(tǒng)、統(tǒng)一調(diào)度平臺及大數(shù)據(jù)接口發(fā)布系統(tǒng),并打通了數(shù)據(jù)資產(chǎn)平臺、數(shù)據(jù)管控平臺、各源系統(tǒng)、科管及統(tǒng)一運維發(fā)版平臺。
此外,該平臺還新增了需求管理、流程管理、數(shù)據(jù)管理、版本管理、系統(tǒng)管理等關(guān)鍵功能,通過構(gòu)建企業(yè)級的一站式數(shù)據(jù)開發(fā)平臺工作站,確保能更好、更快、更敏捷地響應(yīng)南京銀行各業(yè)務(wù)板塊的數(shù)據(jù)開發(fā)需求,全面提升數(shù)據(jù)研發(fā)的效率及質(zhì)量。
該平臺打通了數(shù)據(jù)研發(fā)運維從需求到上線的多個關(guān)鍵環(huán)節(jié),通過敏捷需求管理、模型設(shè)計即治理、全開發(fā)場景支持、自動化單元測試、一鍵提測與發(fā)布、全面需求監(jiān)控的全鏈路智能化管控,確保數(shù)據(jù)開發(fā)全過程的順暢與協(xié)同。
統(tǒng)一數(shù)據(jù)開發(fā)集成平臺的成功上線,不僅滿足了南京銀行各業(yè)務(wù)部門的高效用數(shù)需求,更為其大數(shù)據(jù)平臺、數(shù)據(jù)倉庫及數(shù)據(jù)集市等核心數(shù)據(jù)項目筑牢了堅實的發(fā)展基石,實現(xiàn)了數(shù)據(jù)開發(fā)質(zhì)量和效率的雙重飛躍,將為南京銀行數(shù)字化轉(zhuǎn)型增添澎湃動力。
正如前文所說,一顆“新星”的誕生,離不開星云的孕育和孵化。而南京銀行案例的背后的“星云”——長亮科技星云數(shù)智一體化平臺,正在冉冉升起。
2
星云的“引力”模式
讓數(shù)據(jù)從無序變有序
星云是一個不斷變化的系統(tǒng),它看似無序,但實則有序。是引力的存在,讓星云中的氣體和塵埃相互吸引并聚集,這種聚集的過程逐漸使得原本無序的星云變得有序起來。
在金融企業(yè)的各個分子系統(tǒng)中,沉淀了無數(shù)的數(shù)據(jù),它們過去相互獨立,格式不一,就像是散落在星云中的不同“物質(zhì)”,而DataOps就像是一種“引力”模式,通過構(gòu)建高效協(xié)同機制,建立精細化數(shù)據(jù)運營體系,打造規(guī)范化、一體化的數(shù)據(jù)開發(fā)流程,實現(xiàn)數(shù)據(jù)產(chǎn)品高質(zhì)量與高效率交付。
星云平臺本質(zhì)上就是一個典型的DataOps平臺,它所要解決的就是數(shù)據(jù)開發(fā)過程中遭遇的一系列挑戰(zhàn)。
在傳統(tǒng)數(shù)據(jù)開發(fā)過程中,有很多的不受“引力”約束的數(shù)據(jù)“頑疾”。比如,由手工編碼為主,無有效標準化規(guī)范約束,開發(fā)方式因人而異,所導(dǎo)致的數(shù)據(jù)開發(fā)不規(guī)范化不足;數(shù)據(jù)開發(fā)過程復(fù)雜、流程較多、開發(fā)周期長、響應(yīng)慢、跟蹤監(jiān)控難等問題導(dǎo)致的數(shù)據(jù)質(zhì)量難以保障;開發(fā)過程中,數(shù)據(jù)開發(fā)存在出錯概率大,依賴復(fù)雜,缺少有效變更控制和監(jiān)控能力的問題,以及后期運維、管理過程中,由環(huán)境遷移或數(shù)據(jù)平臺軟件變更等場景,無法應(yīng)對快速部署需求等難題。
針對上述這些痛點,長亮科技為數(shù)據(jù)類項目實施團隊著手打造了“星云數(shù)智一體化平臺”。作為面向數(shù)據(jù)運營的一體化平臺,其設(shè)計方向主要是滿足數(shù)據(jù)倉庫和數(shù)據(jù)湖的數(shù)據(jù)加工需求,為應(yīng)用系統(tǒng)提供加工好的數(shù)據(jù)。并結(jié)合DataOps數(shù)據(jù)運營方法論,實現(xiàn)數(shù)據(jù)資產(chǎn)的加工、建模和對外服務(wù)供給。對數(shù)據(jù)開發(fā)而言,星云平臺可以有效降低管理成本,促進規(guī)范統(tǒng)一和落地,提高開發(fā)效率和質(zhì)量。
但星云平臺的價值絕不僅止于“紙面”上這幾點。
3
揭開星云平臺價值的神秘面紗
我們知道,應(yīng)用能夠快速上線是金融客戶的最迫切的需求,而星云平臺作為一個可插拔式的一體化平臺:允許模塊化集成,根據(jù)客戶需求快速定制和調(diào)整,這就很好滿足了快速部署的敏捷性要求。
而數(shù)據(jù)規(guī)范化是數(shù)據(jù)開發(fā)高效的保證,星云平臺則在一體化開發(fā)環(huán)境中,內(nèi)置規(guī)范化、流程化大數(shù)據(jù)平臺建模工藝、數(shù)據(jù)開發(fā)標準化工藝、測試標準化工藝等,從而滿足各類規(guī)范落地、保障開發(fā)過程的標準化、規(guī)范化和開發(fā)質(zhì)量提升。
解決“規(guī)范不易落地”的關(guān)鍵,就在于批量化。在這方面,星云平臺支持批量化模板開發(fā)、配置化流程開發(fā)和IDE腳本開發(fā)三種模式,從而滿足數(shù)據(jù)的貼源層、整合層、匯總層和集市應(yīng)用各類開發(fā)場景,避免以往手工編程造成的難以維護。同時,星云平臺支持模型設(shè)計反向工程、開發(fā)代碼重構(gòu)工藝,支持數(shù)據(jù)倉庫重構(gòu)和平滑升級,因此可以節(jié)省較大人力物力。
統(tǒng)一管控與監(jiān)控能力是星云平臺的“眼睛”,它能夠打通需求、開發(fā)、測試、代碼庫、運行等環(huán)境、打通開發(fā)、測試和上線環(huán)境,實現(xiàn)開發(fā)流程的自動化和標準化,這也是星云將無序變?yōu)橛行虻年P(guān)鍵因素之一。
當然,在人工智能大行其道的今天,星云平臺也同樣會不斷進化,在未來將會引入智能化應(yīng)用,包括大模型技術(shù),提供SQL開發(fā)智能助手和操作知識的問答服務(wù),來提升用戶體驗和效率。
4
星云平臺如何做到化繁為簡?
在浩瀚而多彩的宇宙中,每一片星云都代表著不同類型、不同需求的客戶群體。這些星云在宇宙中自然形成,各自發(fā)光,恰如市場中客戶群體的多樣性和復(fù)雜性。

而相比云服務(wù)商提供的運營服務(wù),長亮科技多年來深耕金融行業(yè),明顯對金融企業(yè)的需求有更深的理解。星云平臺基于長亮科技的金融數(shù)據(jù)倉庫、數(shù)據(jù)湖實施經(jīng)驗積累,所提供的則是更貼合金融客戶需求的建模體系和工藝流程。
最終落到客戶場景,敏捷性永遠是衡量產(chǎn)品價值的重要因素。星云平臺也同樣緊扣“敏捷”的關(guān)鍵詞,支持快速數(shù)據(jù)開發(fā),批量生成腳本,大幅提升數(shù)據(jù)加工效率,同時提供全面的運維管理功能。
星云平臺并非與眾不同,而是像“田忌賽馬”一樣,在每一個細分領(lǐng)域,以己之長攻敵之短,所以星云平臺的價值,不僅在于技術(shù)理念的勝利,也在于一體化的勝利和客戶理解的勝利。
熊彼特說過,創(chuàng)新是要“建立一種新的生產(chǎn)函數(shù)”,也就是形成一種從來沒有過的生產(chǎn)要素和生產(chǎn)條件的“新組合”。數(shù)據(jù)作為新的生產(chǎn)要素,要發(fā)揮更大的生產(chǎn)力,就需要與數(shù)據(jù)運營平臺形成新組合。長亮科技星云數(shù)智一體化平臺的發(fā)布,無疑讓我們看到了這種可能!