在不確定性的環(huán)境下,目前唯一可以確定的就是企業(yè)數(shù)字化轉(zhuǎn)型,而數(shù)字化技術(shù)已經(jīng)成為各大企業(yè)應(yīng)對“烏卡 (VUCA) 時(shí)代”的一個(gè)關(guān)鍵路徑。伴隨著數(shù)字化轉(zhuǎn)型的深入推進(jìn),作為與土地、勞動力、資本、技術(shù)一樣的生產(chǎn)要素,數(shù)據(jù)的地位愈發(fā)凸顯,如何發(fā)揮數(shù)據(jù)的價(jià)值,讓數(shù)據(jù)成為資產(chǎn)呢?
每年人們的生活、生產(chǎn)中會產(chǎn)生大量的數(shù)據(jù),這些原始數(shù)據(jù)通常存在質(zhì)量差、價(jià)值密度低等問題,在經(jīng)過采集和存儲后,通常需要經(jīng)過多次加工,包括但不限于治理、建模和分析挖掘等工作,才能達(dá)到數(shù)據(jù)的規(guī)范化、資產(chǎn)化,實(shí)現(xiàn)數(shù)據(jù)的共享和流通,進(jìn)而發(fā)掘數(shù)據(jù)的使用價(jià)值,推動業(yè)務(wù)的自動化和智能化,實(shí)現(xiàn)數(shù)字化轉(zhuǎn)型。
在從原始數(shù)據(jù)到數(shù)據(jù)資產(chǎn)化、價(jià)值化的過程中,一般需要三層軟件技術(shù)能力的支撐,以構(gòu)建數(shù)字化基礎(chǔ)設(shè)施,實(shí)現(xiàn)數(shù)據(jù)管理能力:
(資料圖片)
最底層是基礎(chǔ)軟件,提供信息系統(tǒng)的基礎(chǔ)能力,一般包括大數(shù)據(jù)基礎(chǔ)平臺、數(shù)據(jù)庫、數(shù)據(jù)中間件和數(shù)據(jù)科學(xué)平臺等,對多種場景、多種來源、多種類型的源數(shù)據(jù)進(jìn)行有效的采集、儲存、管理,并提供相關(guān)開發(fā)平臺和工具,統(tǒng)一管理業(yè)務(wù)中所需要的數(shù)據(jù),讓客戶在數(shù)字化轉(zhuǎn)型時(shí)有堅(jiān)實(shí)的數(shù)據(jù)和工具支持。
中間層是數(shù)據(jù)應(yīng)用系統(tǒng),構(gòu)建在基礎(chǔ)軟件之上,包括數(shù)據(jù)湖、數(shù)據(jù)倉庫、數(shù)據(jù)集市、情報(bào)搜索、數(shù)據(jù)共享流通平臺等,可按照業(yè)務(wù)特性來整理和加工數(shù)據(jù),為業(yè)務(wù)數(shù)字化提供高價(jià)值、易用的數(shù)據(jù)和工具,滿足用戶各場景應(yīng)用的數(shù)據(jù)需求,為業(yè)務(wù)部門開發(fā)業(yè)務(wù)應(yīng)用系統(tǒng)提供客觀條件。
最上層是業(yè)務(wù)應(yīng)用系統(tǒng),包括為業(yè)務(wù)部門構(gòu)建的數(shù)字化運(yùn)營、數(shù)字化決策、智能制造、數(shù)字營銷、智能風(fēng)控等應(yīng)用系統(tǒng),助力客戶實(shí)時(shí)、準(zhǔn)確地進(jìn)行商業(yè)決策,提高業(yè)務(wù)運(yùn)營效率,并創(chuàng)造更優(yōu)的解決方案等,從而將數(shù)據(jù)價(jià)值轉(zhuǎn)換為業(yè)務(wù)價(jià)值,實(shí)現(xiàn)數(shù)字化轉(zhuǎn)型。
由此可以看出,大數(shù)據(jù)基礎(chǔ)軟件是指提供信息系統(tǒng)的基礎(chǔ)能力, 一般包括大數(shù)據(jù)基礎(chǔ)平臺、數(shù)據(jù)庫、數(shù)據(jù)中間件和數(shù)據(jù)科學(xué)平臺等, 對多種場景、多種來源、多種類型的源數(shù)據(jù)進(jìn)行有效的采集、儲存、管理,并提供相關(guān)開發(fā)平臺和工具, 統(tǒng)一管理業(yè)務(wù)中所需要的數(shù)據(jù), 讓客戶在數(shù)字化轉(zhuǎn)型時(shí)有堅(jiān)實(shí)的數(shù)據(jù)和工具支持。
大數(shù)據(jù)基礎(chǔ)軟件由以下三個(gè)部分組成:
一是大數(shù)據(jù)管理平臺,可以細(xì)分為兩個(gè)部分,一部分是大數(shù)據(jù)基礎(chǔ)平臺,包含關(guān)系型分析引擎、寬表數(shù)據(jù)庫、文檔數(shù)據(jù)庫、圖數(shù)據(jù)庫、時(shí)序數(shù)據(jù)庫、鍵值數(shù)據(jù)庫、消息隊(duì)列、分布式文件系統(tǒng)、實(shí)時(shí)流計(jì)算引擎、搜索引擎等單一組件或相關(guān)功能單元的軟件。常見的公司有ArangoDB、Snowflake、星環(huán)科技等。
另一個(gè)部分是分布式/并行關(guān)系型數(shù)據(jù)庫,包含分布式關(guān)系型數(shù)據(jù)庫、大規(guī)模并行處理 (MPP)數(shù)據(jù)庫等軟件。常見的公司有星環(huán)科技、PingCAP等。
二是數(shù)據(jù)應(yīng)用中間件,包括針對數(shù)據(jù)采集、數(shù)據(jù)整合、數(shù)據(jù)治理、數(shù)據(jù)資產(chǎn)、數(shù)據(jù)建模、數(shù)據(jù)安全、數(shù)據(jù)共享與服務(wù)、可視化分析等一系列數(shù)據(jù)處理工具和中間件。常見的公司有東方通(300379)、普元信息等。
三是數(shù)據(jù)智能分析工具,包括通過機(jī)器學(xué)習(xí)、深度學(xué)習(xí)等技術(shù)支撐數(shù)據(jù)挖掘、預(yù)測性分析等場景的工具和平臺。常見的公司有第四范式、九章云極等。
大數(shù)據(jù)管理平臺、分布式/并行數(shù)據(jù)庫、數(shù)據(jù)應(yīng)用中間件、數(shù)據(jù)智能分析工具等構(gòu)成的大數(shù)據(jù)基礎(chǔ)軟件不但是企業(yè)最終實(shí)現(xiàn)數(shù)字化的技術(shù)基礎(chǔ),其技術(shù)水平?jīng)Q定了業(yè)務(wù)應(yīng)用系統(tǒng)的能力邊界和創(chuàng)造數(shù)據(jù)價(jià)值的效率,而且也是目前以數(shù)據(jù)生成、采集、存儲、加工、分析、服務(wù)為主的國家戰(zhàn)略性新興產(chǎn)業(yè)大數(shù)據(jù)產(chǎn)業(yè)發(fā)展的根基。
中國大數(shù)據(jù)市場在過去五年經(jīng)歷快速增長,2021年市場規(guī)模達(dá)到創(chuàng)紀(jì)錄的1.3萬億元,中國大數(shù)據(jù)軟件市場年復(fù)合增長率達(dá)29.5%。目前支持多模型數(shù)據(jù)統(tǒng)一處理的大數(shù)據(jù)平臺實(shí)現(xiàn)了從GB到PB不同數(shù)據(jù)量的多源異構(gòu)數(shù)據(jù)的快速存取、高效計(jì)算和統(tǒng)一管理,一站式地解決企業(yè)各類數(shù)據(jù)管理需求。
隨著摩爾定律的失效,以前靠升級硬件實(shí)現(xiàn)Scale Up縱向擴(kuò)展的方式已經(jīng)不可行了。沿著同樣的路線再造一個(gè)Oracle根本不可能,也沒有意義。當(dāng)數(shù)據(jù)量達(dá)到一定量級時(shí),讓數(shù)據(jù)庫Scale Out橫向擴(kuò)展的分布式數(shù)據(jù)庫成為是發(fā)展的方向。
而用國產(chǎn)的大數(shù)據(jù)基礎(chǔ)軟件替代甲骨文、微軟、IBM等國外的基礎(chǔ)軟件和開源軟件,實(shí)現(xiàn)信息技術(shù)自主可控,不僅是國家數(shù)據(jù)安全的保障,更是數(shù)字經(jīng)濟(jì)發(fā)展的中堅(jiān)力量,是加快經(jīng)濟(jì)社會發(fā)展質(zhì)量變革、效率變革、動力變革的重要引擎。
【廣告】
(免責(zé)聲明:此文內(nèi)容為廣告,相關(guān)素材由廣告主提供,廣告主對本廣告內(nèi)容的真實(shí)性負(fù)責(zé)。本網(wǎng)發(fā)布目的在于傳遞更多信息,并不代表本網(wǎng)贊同其觀點(diǎn)和對其真實(shí)性負(fù)責(zé),請自行核實(shí)相關(guān)內(nèi)容。廣告內(nèi)容僅供讀者參考。)
關(guān)鍵詞: