[No.H001]
12月12日,以“Data@Future”為主題,由StartDT(奇點(diǎn)云、GrowingIO)主辦的2023 StartDT Day數(shù)智科技大會(huì)暨數(shù)據(jù)云操作系統(tǒng)產(chǎn)品發(fā)布會(huì)召開。
會(huì)上,奇點(diǎn)云自研的新一代數(shù)據(jù)云操作系統(tǒng)StartDT SimbaOS正式亮相,具備跨云原生、全域集成、混合調(diào)度、高效建模、安全合規(guī)、智能運(yùn)維等特性,幫助客戶建立企業(yè)級(jí)的數(shù)據(jù)能力,管好、用好全域數(shù)據(jù)資產(chǎn)。
告別“煙囪”
進(jìn)階的數(shù)字化需要“DT時(shí)代的OS”
面向數(shù)據(jù)量爆發(fā)、數(shù)據(jù)需求激增的未來,企業(yè)的數(shù)據(jù)系統(tǒng)應(yīng)做好哪些準(zhǔn)備?
從眾多客戶的實(shí)踐出發(fā),StartDT COO、奇點(diǎn)云聯(lián)合創(chuàng)始人劉瑩談到,企業(yè)對(duì)數(shù)據(jù)系統(tǒng)的要求可歸納為三層:
· 更簡(jiǎn)單有效的數(shù)據(jù)應(yīng)用,讓數(shù)據(jù)直接為業(yè)務(wù)所用。
· 更強(qiáng)大的數(shù)據(jù)平臺(tái),來保障規(guī);、持續(xù)穩(wěn)定的數(shù)據(jù)生產(chǎn)。
· 更極致的存算調(diào)度能力,來滿足越來越高難度的數(shù)據(jù)處理需求。
過去,數(shù)據(jù)產(chǎn)品廠商往往只能“煙囪式”地提供或拼裝上述三層能力:以數(shù)據(jù)應(yīng)用需求為起點(diǎn),逐個(gè)對(duì)接云資源、數(shù)據(jù)源和存算引擎,逐個(gè)配置權(quán)限體系和安全機(jī)制,在該應(yīng)用涉及的范圍內(nèi)進(jìn)行數(shù)據(jù)治理和分析。
而當(dāng)數(shù)字化轉(zhuǎn)型深入,企業(yè)的數(shù)據(jù)應(yīng)用越來越多,每每出現(xiàn)應(yīng)用新增或配置變更時(shí),仍然只能采用“煙囪式”從0到1建設(shè),甚至不得不把過去的應(yīng)用鏟平重建。
這不僅會(huì)累積時(shí)間與資源浪費(fèi),也無(wú)從實(shí)現(xiàn)全域數(shù)據(jù)資產(chǎn)的統(tǒng)一管理。最終,一家企業(yè)的數(shù)據(jù)系統(tǒng)里煙囪林立,迭代困難。
在StartDT CEO、奇點(diǎn)云創(chuàng)始人行在看來,面向因時(shí)而變的業(yè)務(wù),面對(duì)層出不窮的數(shù)字化進(jìn)階挑戰(zhàn),數(shù)據(jù)云操作系統(tǒng)是最優(yōu)解。
與計(jì)算機(jī)領(lǐng)域的操作系統(tǒng)原理相似,數(shù)據(jù)云操作系統(tǒng)封裝底層各項(xiàng)常用能力,以標(biāo)準(zhǔn)接口的方式向外提供:
· 對(duì)于應(yīng)用開發(fā)者而言,直接調(diào)用OS已有的能力,一套代碼解決“多云適配”、“多數(shù)據(jù)源集成”、“多引擎整合”等難題,有效降低對(duì)接底層的復(fù)雜性,更專注于應(yīng)用本身的研發(fā)。
· 對(duì)于企業(yè)而言,則能實(shí)現(xiàn)用同一套穩(wěn)定的基礎(chǔ)設(shè)施支撐豐富的數(shù)據(jù)應(yīng)用,避免“煙囪式”開發(fā);架構(gòu)具備靈活度,告別“數(shù)據(jù)系統(tǒng)逐漸‘鎖死’又鏟平重建”的輪回。
StartDT SimbaOS
奇點(diǎn)云自研的第一代數(shù)據(jù)云操作系統(tǒng)
“歷經(jīng)4年‘雪藏式研發(fā)’,今天,奇點(diǎn)云第一代數(shù)據(jù)云操作系統(tǒng)StartDT SimbaOS終于面世。”
SimbaOS是奇點(diǎn)云自研的數(shù)據(jù)云操作系統(tǒng),具備跨云原生、全域集成、混合調(diào)度、高效建模、安全合規(guī)、智能運(yùn)維等特性,幫助客戶建立企業(yè)級(jí)的數(shù)據(jù)能力,管好、用好全域數(shù)據(jù)資產(chǎn)。
談及設(shè)計(jì)邏輯與技術(shù)實(shí)現(xiàn),StartDT合伙人、CTO地雷介紹,SimbaOS采用分層結(jié)構(gòu),中間層為SimbaOS Kernel(數(shù)據(jù)云操作系統(tǒng)內(nèi)核),將數(shù)據(jù)領(lǐng)域常用的存算、調(diào)度、服務(wù)、安全、元數(shù)據(jù)等核心能力抽象,封裝為一套對(duì)象體系。“這極為重要,也是OS研發(fā)的關(guān)鍵挑戰(zhàn)所在。”地雷介紹,目前Kernel共包含32個(gè)對(duì)象,分為6個(gè)域。
通過API、SDK、Schema三類方式,數(shù)據(jù)應(yīng)用開發(fā)者可以快速調(diào)用SimbaOS的能力,高效創(chuàng)建數(shù)據(jù)應(yīng)用:
· API:提供南向接口和北向接口,前者對(duì)接多云、多引擎、多數(shù)據(jù)源(包括數(shù)據(jù)源集成接口、元數(shù)據(jù)采集接口、數(shù)據(jù)引擎適配接口、云對(duì)接接口等),后者面向應(yīng)用開發(fā)者,便于他們調(diào)用各個(gè)對(duì)象的動(dòng)詞。
· SDK:在API基礎(chǔ)上,提供Java、Python、JS等編程語(yǔ)言開發(fā)包SDK。
· Schema:支持用戶使用SQL查詢系統(tǒng)元數(shù)據(jù),并基于多款內(nèi)置的分析模型,洞察系統(tǒng)狀態(tài)。
“把復(fù)雜交給操作系統(tǒng),把簡(jiǎn)單留給開發(fā)者。”行在介紹,“基于SimbaOS構(gòu)建數(shù)據(jù)應(yīng)用,效率可以提升4倍,幫助企業(yè)應(yīng)對(duì)洶涌而來的數(shù)據(jù)應(yīng)用需求和進(jìn)階的數(shù)據(jù)技術(shù)挑戰(zhàn)。”
內(nèi)核加持,能力升級(jí)
多款數(shù)據(jù)應(yīng)用產(chǎn)品更新
目前,StartDT SimbaOS生態(tài)內(nèi)的應(yīng)用共有“開發(fā)”、“安全”、“增長(zhǎng)”、“增效”、“AI”五大類。
沒錯(cuò),面向AI應(yīng)用大爆發(fā)的未來,SimbaOS不僅支持開發(fā)者構(gòu)建數(shù)據(jù)應(yīng)用,也支持構(gòu)建AI應(yīng)用,幫助開發(fā)者基于數(shù)據(jù)優(yōu)化算法,提升訓(xùn)練數(shù)據(jù)的質(zhì)量,加快模型部署的速度。
本次發(fā)布會(huì),針對(duì)數(shù)據(jù)開發(fā)、指標(biāo)資產(chǎn)管理及安全合規(guī)場(chǎng)景,三款數(shù)據(jù)應(yīng)用率先帶來最新動(dòng)態(tài):
企業(yè)級(jí)“RAS”的數(shù)據(jù)云平臺(tái) DataSimba
地雷介紹,構(gòu)建企業(yè)級(jí)“RAS”(可靠性、可用性、可服務(wù)性)的數(shù)據(jù)生產(chǎn)系統(tǒng),既需要數(shù)據(jù)工程的最佳實(shí)踐,也需要專業(yè)可靠的數(shù)據(jù)云平臺(tái)。就像“好車手”和“好賽車”,兩者缺一不可。
因此,一方面,DataSimba持續(xù)加固穩(wěn)定性,提供高可用部署方案,可用性達(dá)99.95%。依托SimbaOS的Schema,幫助用戶構(gòu)建可觀測(cè)性,以數(shù)據(jù)驅(qū)動(dòng)運(yùn)維巡檢、血緣治理、研發(fā)風(fēng)控等多個(gè)場(chǎng)景;
另一方面,還提供針對(duì)大數(shù)據(jù)遷移、備份、CI/CD等場(chǎng)景的專業(yè)自動(dòng)化工具,以及開發(fā)陪跑、遷移發(fā)布及各類運(yùn)維服務(wù)包,支持客戶數(shù)據(jù)團(tuán)隊(duì)成為“好車手”、“好車隊(duì)”。
指標(biāo)全生命周期管理平臺(tái) SimbaMetric
SimbaMetric提供數(shù)倉(cāng)規(guī)劃、維度建模、業(yè)務(wù)指標(biāo)體系等完善功能,支持業(yè)務(wù)、研發(fā)等角色通過一個(gè)產(chǎn)品完成無(wú)縫協(xié)作,實(shí)現(xiàn)圍繞指標(biāo)資產(chǎn)的全生命周期管理。
奇點(diǎn)云認(rèn)為,指標(biāo)工具不僅要完成“總線矩陣戶口本”的基本職責(zé),還應(yīng)幫助客戶提高效率,讓指標(biāo)資產(chǎn)的運(yùn)營(yíng)管理高效、方便、可持續(xù)。因此,SimbaMetric還提供配套的自動(dòng)化工具,來完成批量轉(zhuǎn)換、自動(dòng)掃描等工作,解決遷移、兼容、規(guī)范性檢測(cè)等繁雜問題,提升指標(biāo)交付效率。
此外,企業(yè)還可以通過SimbaOS Kernel的元數(shù)據(jù)域,實(shí)現(xiàn)BI、大屏、報(bào)表等應(yīng)用之間指標(biāo)數(shù)據(jù)的交互查詢。
全域數(shù)據(jù)安全管理平臺(tái) DataBlack
DataBlack推出了“數(shù)據(jù)云標(biāo)準(zhǔn)版”、“分析云標(biāo)準(zhǔn)版”、“專業(yè)版”三大版本產(chǎn)品,滿足不同類型企業(yè)不同的數(shù)據(jù)安全合規(guī)需要。
StartDT資深算法專家曾博指出,數(shù)據(jù)安全之于企業(yè),已從過去小部分的風(fēng)控需求,轉(zhuǎn)向全面的合規(guī)建設(shè)需求。如果仍“煙囪式”地逐個(gè)數(shù)據(jù)應(yīng)用實(shí)施合規(guī)治理,不僅重復(fù)建設(shè)耗時(shí)費(fèi)力,還可能出現(xiàn)“漏網(wǎng)之魚”。
得益于SimbaOS Kernel,DataBlack支持對(duì)接企業(yè)所有數(shù)據(jù)源,完成統(tǒng)一的安全合規(guī)治理,助客戶告別數(shù)據(jù)安全“短板”。
重塑數(shù)據(jù)應(yīng)用構(gòu)建的方式
讓數(shù)據(jù)驅(qū)動(dòng)更簡(jiǎn)單
本次大會(huì)的圓桌環(huán)節(jié),StartDT的產(chǎn)品專家、行業(yè)專家們進(jìn)一步分享了基于SimbaOS研發(fā)應(yīng)用、服務(wù)客戶的親身體驗(yàn),解讀真正支持業(yè)務(wù)、賦能業(yè)務(wù)、陪伴業(yè)務(wù)進(jìn)化的數(shù)據(jù)應(yīng)用如何煉成。
簡(jiǎn)化技術(shù)復(fù)雜性,SimbaOS為OneID等組件/應(yīng)用開發(fā)提供強(qiáng)勁支撐
OneID是全域用戶運(yùn)營(yíng)的基礎(chǔ),看似老生常談,卻始終未得到有效解決——用戶ID增長(zhǎng),端/觸點(diǎn)/渠道增加,用傳統(tǒng)的研發(fā)方式不僅費(fèi)時(shí)費(fèi)力、靈活度不足,時(shí)效性和準(zhǔn)確度也遠(yuǎn)遠(yuǎn)達(dá)不到需求。StartDT合伙人、資深行業(yè)專家追風(fēng)介紹,現(xiàn)在基于StartDT標(biāo)準(zhǔn)的OneID組件,客戶可以輕松配置不同數(shù)據(jù)源與身份體系的優(yōu)先級(jí),或按需新增渠道,完成實(shí)時(shí)OneID融合。
OneID組件能支撐海量數(shù)據(jù)的實(shí)時(shí)復(fù)雜計(jì)算,處理結(jié)果準(zhǔn)確度高,與SimbaOS的能力密不可分。StartDT副總裁、GrowingIO聯(lián)合創(chuàng)始人葉玎玎解釋道:“以O(shè)neID底層的‘流批圖一體’為例,我們?cè)拘枰?~4個(gè)月才能適配一個(gè)引擎,現(xiàn)在SimbaOS已經(jīng)解決了這個(gè)問題,預(yù)先完成了7類不同引擎的對(duì)接,還天然支持多引擎混合調(diào)度。”
積木式研發(fā),讓大規(guī)模打造貼合企業(yè)場(chǎng)景的數(shù)據(jù)應(yīng)用成為可能
相較有多年成熟方法論的前鏈路,企業(yè)后鏈路實(shí)現(xiàn)數(shù)據(jù)驅(qū)動(dòng)的場(chǎng)景往往更為復(fù)雜多樣。
以制造業(yè)為例,訂單、庫(kù)存、工廠、供應(yīng)商等環(huán)節(jié)各有各的邏輯。StartDT資深行業(yè)專家、制造業(yè)產(chǎn)研負(fù)責(zé)人航宇表示,哪怕處于同一個(gè)細(xì)分行業(yè),企業(yè)的情況也常常千差萬(wàn)別。
如何大規(guī)模滿足這些個(gè)性化的需求,提供貼合客戶場(chǎng)景的數(shù)據(jù)應(yīng)用?
StartDT合伙人、資深產(chǎn)品專家星魁介紹:“經(jīng)過多年的客戶實(shí)踐和產(chǎn)品調(diào)研,我們把數(shù)據(jù)應(yīng)用研發(fā)抽象為‘存算模塊’、‘分析模塊’、‘數(shù)據(jù)模型’和‘服務(wù)模塊’,共四大類標(biāo)準(zhǔn)模塊。其中,存算模塊和服務(wù)模塊由SimbaOS Kernel提供能力支撐。”
基于標(biāo)準(zhǔn)模塊完成“積木式的產(chǎn)品開發(fā)”,讓StartDT能更及時(shí)地響應(yīng)客戶“個(gè)性化”產(chǎn)品需求。今年推出面向制造業(yè)的六大數(shù)據(jù)產(chǎn)品,就采用上述方式研發(fā),并已在多家制造企業(yè)客戶落地實(shí)踐。同時(shí),客戶的數(shù)據(jù)團(tuán)隊(duì)也能更輕松地組裝出數(shù)據(jù)應(yīng)用,快速把自身Know-how轉(zhuǎn)變?yōu)閿?shù)字化工具。
如行在所說:“數(shù)據(jù)的價(jià)值在于應(yīng)用,而應(yīng)用的核心在于人。只有關(guān)注人的需求,讓人可以更簡(jiǎn)單有效地使用數(shù)據(jù),才能用數(shù)據(jù)驅(qū)動(dòng)企業(yè)和社會(huì)進(jìn)步。”
StartDT SimbaOS的研發(fā)和迭代,正為更簡(jiǎn)單高效、更具性價(jià)比、更可持續(xù)、更規(guī)模化的數(shù)據(jù)生產(chǎn)和消費(fèi)而來,讓數(shù)據(jù)為人所用,為人好用。
StartDT SimbaOS期待得到更多客戶的使用,也期待收到更多DT開發(fā)者的反饋。
Data@Future. Data for all.
榜單收錄、高管收錄、融資收錄、活動(dòng)收錄可發(fā)送郵件至news#citmt.cn(把#換成@)。
海報(bào)生成中...