如上,是ChatGPT的百度指數(shù)和微信指數(shù),繼2022年12月上旬技術(shù)圈火熱之后,因為微軟、谷歌等巨頭的推廣加持,ChatGPT成為全球大眾熱源的話題。各大媒體都在消費這波輿論紅利,打開微信公眾號,劈天蓋地各種姿勢的ChatGPT推文。關(guān)于ChatGPT是否會替代人類的文章,在各個領(lǐng)域和行業(yè)都在討論。
那么,對于數(shù)據(jù)從業(yè)者而言,我覺得應(yīng)該是不用太擔(dān)心的哈。ChatGPT就是一個吃海量、高質(zhì)量數(shù)據(jù)的怪獸。它越流行,數(shù)據(jù)從業(yè)者就越被需要。所以,數(shù)據(jù)人要掌握好數(shù)據(jù)采集、數(shù)據(jù)處理、數(shù)據(jù)治理(元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量)的知識和工具。
本文是【12款開源數(shù)據(jù)資產(chǎn)(元數(shù)據(jù))管理平臺選型分析】系列的前兩篇12款開源數(shù)據(jù)資產(chǎn)(元數(shù)據(jù))管理平臺選型分析(一)、12款開源數(shù)據(jù)資產(chǎn)(元數(shù)據(jù))管理平臺選型分析(二)得到了一些朋友的鼓勵和肯定,本文是該系列第三篇,介紹的是4款商用數(shù)據(jù)資產(chǎn)平臺,它山之石可以攻玉吧。如何只喜歡開源研究的伙伴,可以不用完全看完了。
說好的12款開源數(shù)據(jù)資產(chǎn)(元數(shù)據(jù))管理平臺,只介紹了8款,欠下的4款開源平臺,后續(xù)補(bǔ)上。
后續(xù),計劃寫【16款開源數(shù)據(jù)質(zhì)量管理工具選型分析】、【33款開源數(shù)據(jù)集成/同步工具選項分析】等數(shù)據(jù)中臺開源技術(shù),歡迎大家持續(xù)關(guān)注。
如果你急著看這些組件的全貌,請移步【最全大數(shù)據(jù)開源組件思維導(dǎo)圖】(https://www.jianshu.com/p/5eead28f01a0)查閱,該文檔整理了大數(shù)據(jù)生態(tài)的開源技術(shù)組件思維導(dǎo)圖,至今有4K+的下載量。
下圖是12款數(shù)據(jù)資產(chǎn)(元數(shù)據(jù))管理平臺的橫向、多維度對比全家福。大家可以作為選型的參考,當(dāng)然,本系列文章中,每個平臺都做了較為詳細(xì)的分析,可以針對每個平臺做細(xì)致的調(diào)研。
本文整理剩下的四款(Atlan、Alation、Ataccama、Monte Carlo)開源數(shù)據(jù)資產(chǎn)平臺,并簡單分析其優(yōu)缺點,供選項參考。
Atlan
開源地址:https://github.com/atlanhq
Atlan將元數(shù)據(jù)管理、數(shù)據(jù)治理作為一種協(xié)同工作臺,這種設(shè)計讓數(shù)據(jù)使用者和維護(hù)者,有種天然的感覺:數(shù)據(jù)治理是一種日常的工作。具有豐富的功能,例如數(shù)據(jù)目錄和發(fā)現(xiàn)、數(shù)據(jù)血緣和治理以及數(shù)據(jù)探索和集成。內(nèi)置支持多種數(shù)據(jù)質(zhì)量工具。
Atlan的優(yōu)點:
- 功能豐富、支持協(xié)同工具,Slack等集成
- UI界面美觀、操作指引友好
- 內(nèi)置支持多種數(shù)據(jù)集成工具及數(shù)據(jù)探索工具
Atlan的不足:
- 其實是商用產(chǎn)品,部分開源
相關(guān)介紹:https://atlan.com/
選型建議:1)只能自研做參考學(xué)習(xí),不能拿來主義。
Alation
開源地址:無
Alation是一個數(shù)據(jù)目錄,它優(yōu)先考慮處理數(shù)據(jù)的人的方面。它支持許多有用的功能,以加快登錄、查詢重用和自動化管理。最重要的是,它的UI簡單、一致且直觀。但是,如果您要使用Alation,請記住它有一個自定義的攝取協(xié)議,并且缺少ML實體。這對于想要超越簡單分析和商業(yè)智能,進(jìn)入AI/ML領(lǐng)域的企業(yè)來說至關(guān)重要。
相關(guān)介紹:https://atlan.com/
選型建議:只能自研做參考學(xué)習(xí)的榜樣,不能拿來主義。文章來源:http://www.zghlxwxcb.cn/news/detail-421473.html
Ataccama
開源地址:無
Atacama是一個人工智能驅(qū)動的數(shù)據(jù)和元數(shù)據(jù)企業(yè)平臺,具有數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理和數(shù)據(jù)集成組件。該平臺的UI很好,它使快速分析團(tuán)隊、高度監(jiān)管的治理團(tuán)隊和技術(shù)數(shù)據(jù)團(tuán)隊能夠輕松處理其數(shù)據(jù)資產(chǎn)。Atacama的一大優(yōu)點是它的設(shè)計非常注重數(shù)據(jù)質(zhì)量。這對于敏捷、數(shù)據(jù)驅(qū)動的組織至關(guān)重要。
相關(guān)介紹:https://www.ataccama.com/
選型建議:只能自研做參考學(xué)習(xí)的榜樣,不能拿來主義。
Monte Carlo
開源地址:無
Atacama是一個數(shù)據(jù)平臺,可幫助數(shù)據(jù)團(tuán)隊解決數(shù)據(jù)停機(jī)問題,使他們能夠更有效地處理儀表盤,更快地訓(xùn)練更準(zhǔn)確的ML模型,并推動分析操作。該平臺廣泛關(guān)注機(jī)器學(xué)習(xí)驅(qū)動的數(shù)據(jù)可觀測性,這為數(shù)據(jù)團(tuán)隊提供了深入研究數(shù)據(jù)和大規(guī)模識別潛在問題的高級能力。這使得蒙特卡洛在數(shù)據(jù)可觀測性方面比其競爭對手具有相當(dāng)大的優(yōu)勢。
與許多其他專有數(shù)據(jù)目錄解決方案一樣,蒙特卡洛將用戶鎖定到自己的數(shù)據(jù)接收協(xié)議中。它還缺少某些ML實體,這可能會破壞當(dāng)今許多組織的交易。
相關(guān)介紹:https://www.montecarlodata.com/
選型建議:只能自研做參考學(xué)習(xí)的榜樣,不能拿來主義。
總結(jié)
隨著智能硬件及物聯(lián)網(wǎng)的快速發(fā)展,企業(yè)與政府?dāng)?shù)字化轉(zhuǎn)型的深入、AI不斷刷新人類的認(rèn)知、數(shù)據(jù)資產(chǎn)成為第五要素,數(shù)據(jù)采集、數(shù)據(jù)存儲、數(shù)據(jù)計算、數(shù)據(jù)治理等技術(shù),必將迎來新的一輪發(fā)展與突破。如何管好、用好存量海量數(shù)據(jù)及源源不斷產(chǎn)生的增量海量數(shù)據(jù),數(shù)據(jù)治理的技術(shù)、組織面臨著重大的挑戰(zhàn)。
或許,這就是各大集團(tuán)性企業(yè)、特別是國有企業(yè),大量高薪招聘數(shù)據(jù)治理專員的原因吧。你準(zhǔn)備好了么?文章來源地址http://www.zghlxwxcb.cn/news/detail-421473.html
到了這里,關(guān)于12款開源數(shù)據(jù)資產(chǎn)(元數(shù)據(jù))管理平臺選型分析(三)的文章就介紹完了。如果您還想了解更多內(nèi)容,請在右上角搜索TOY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!