【前言】作為中國的 “Fivetran/Airbyte”, Tapdata Cloud
自去年發(fā)布云版公測以來,吸引了近萬名用戶的注冊使用。應社區(qū)用戶上生產(chǎn)系統(tǒng)的要求,Tapdata Cloud 3.0
將正式推出商業(yè)版服務,提供對生產(chǎn)系統(tǒng)的 SLA 支撐。Tapdata 目前專注在實時數(shù)據(jù)同步和集成領域,核心場景包括以下幾大類:
- 實時數(shù)據(jù)庫同步,如 Oracle → Oracle, Oracle → MySQL, MySQL → MySQL 等
- 數(shù)據(jù)入湖入倉,或者為現(xiàn)代數(shù)據(jù)平臺供數(shù),如:
- 常規(guī) ETL 任務(建寬表、數(shù)據(jù)清洗、脫敏等)
- 為 Kafka/MQ/Bitsflow 供數(shù)或下推
具體場景則數(shù)不勝數(shù),值此之際,我們將以系列文章形式,為大家盤點 Tapdata Cloud 可以支撐的業(yè)務場景和 3.0
版本新特性,以便大家更好在業(yè)務中應用 Tapdata。本期為系列文章第三彈,將詳細介紹 Tapdata Cloud 如何快速打通數(shù)據(jù)與阿里云
Tablestore
之間的高速通路,加速體驗海量數(shù)據(jù)低成本存儲、毫秒級的在線數(shù)據(jù)查詢和檢索以及靈活的數(shù)據(jù)分析能力。(點擊申請產(chǎn)品內(nèi)測,搶先體驗 →)
數(shù)字化進程持續(xù)加速的今天,隨著業(yè)務的發(fā)展累積,以及企業(yè)對數(shù)據(jù)的重視,需要處理的信息量也越來越大。首先,是來自于海量數(shù)據(jù)的存儲挑戰(zhàn),如在實現(xiàn)可靠的持久化的同時,如何實現(xiàn)數(shù)據(jù)的并發(fā)寫入?復雜的分析場景需要對數(shù)據(jù)進行即時訪問,存儲系統(tǒng)運維如何更加高效。其次,大數(shù)據(jù)技術的發(fā)展以及運營水平的不斷提升,也對后續(xù)的數(shù)據(jù)分析工作,如流批處理、ETL 等提出了新的要求。
上述種種行業(yè)變化與技術發(fā)展,都對數(shù)據(jù)的存儲系統(tǒng)提出了更高的要求。傳統(tǒng)方案依賴關系型數(shù)據(jù)庫在面對海量規(guī)模數(shù)據(jù)與復雜數(shù)據(jù)檢索業(yè)務場景時,為了彌補能力限制往往需要分庫分表、引入搜索引擎等,大大增加了開發(fā)工作量與運維復雜度。在這樣的背景下,阿里云表格存儲(Tablestore)能夠支持海量數(shù)據(jù)持久化存儲、支持數(shù)據(jù)復雜檢索的優(yōu)勢日益凸顯 。
一、阿里云 Tablestore:即開即用的 Serverless 表存儲服務
作為阿里云自研的結構化數(shù)據(jù)存儲,Tablestore 面向海量數(shù)據(jù)提供 Serverless 表存儲服務,以及快速查詢和分析的服務,同時針對物聯(lián)網(wǎng)場景深度優(yōu)化提供一站式的 IoTstore 解決方案。該產(chǎn)品適用于海量賬單、IM 消息、物聯(lián)網(wǎng)、車聯(lián)網(wǎng)、風控、推薦等場景中的結構化數(shù)據(jù)存儲,提供海量數(shù)據(jù)低成本存儲、毫秒級在線數(shù)據(jù)查詢和檢索以及靈活的數(shù)據(jù)分析能力。同時兼具零運維管控,即開即用,按量付費的特性。
如何在不影響原有業(yè)務的前提下,加速實現(xiàn)數(shù)據(jù)遷移,把分散的海量異構數(shù)據(jù)實時同步至 Tablestore,以應對更加復雜的數(shù)據(jù)存儲及查詢需求?
近日,以這一需求為出發(fā)點,Tapdata 作為異構數(shù)據(jù)實時同步及開發(fā)的領先平臺,已與阿里云 Tablestore 完成產(chǎn)品集成認證。Tapdata 已支持 Tablestore 作為數(shù)據(jù)目標,從而為 Tablestore 提供海量異構數(shù)據(jù)導入能力支撐。(功能體驗指路 ?? Tapdata Cloud 3.0 現(xiàn)已開放內(nèi)測通道)
二、Tapdata Cloud:開箱即用的異構數(shù)據(jù)實時同步和開發(fā)平臺
秉承讓每個企業(yè)使用數(shù)據(jù)像自來水一樣方便,Tapdata Cloud 以突出的異構數(shù)據(jù)庫實時同步能力和 SaaS 化服務方式,支持無代碼可視化方式將數(shù)據(jù)從任何源端實時同步到指定的目標端。
為什么選擇 Tapdata 作為 Tablestore 的數(shù)據(jù)遷移工具
借助 Tapdata 服務來完成數(shù)據(jù)向 Tablestore 的同步,具備以下特性:
- 低代碼可視化的極簡操作
全流程無代碼和低代碼可視操作,支持用戶在拖拉拽中快速創(chuàng)建任務,無需編碼甚至 SQL 來編寫轉換規(guī)則。
- 基于云原生架構,對云上數(shù)據(jù)庫 Tablestore 更加友好
Tapdata 天然具備云上云下、云內(nèi)/跨云數(shù)據(jù)的無縫遷移和實時同步優(yōu)勢。此外,Tapdata Cloud 自 3.0 版本起開始支持阿里云計算巣部署模式,在實現(xiàn)云上一鍵自動化部署的同時,對于數(shù)據(jù)向阿里云上遷移也更加便捷流暢。
- 內(nèi)置 50+ 數(shù)據(jù)連接器,穩(wěn)定的實時采集和傳輸能力
以實時的方式從各個數(shù)據(jù)來源,包括數(shù)據(jù)庫、API、隊列、物聯(lián)網(wǎng)等數(shù)據(jù)提供者采集或同步最新的數(shù)據(jù)變化。支持多源異構數(shù)據(jù)雙向同步,自動映射關系型到非關系型。一鍵實現(xiàn)實時捕獲,毫秒內(nèi)更新。已內(nèi)置50+連接器且不斷拓展中,覆蓋大部分主流的數(shù)據(jù)庫和類型,并支持您自定義數(shù)據(jù)源。
- 數(shù)據(jù)一致性保障
通過多種自研技術,保障目標端數(shù)據(jù)與源數(shù)據(jù)的高一致性,并支持通過多種方式完成一致性校驗,保障生產(chǎn)要求。
- 對源庫幾乎無影響
基于自研的 CDC 日志解析技術,0入侵實時采集數(shù)據(jù),對源庫幾乎無影響。
- 全鏈路實時
基于 Pipeline 流式數(shù)據(jù)處理,以應對基于單條數(shù)據(jù)記錄的即時處理需求,如數(shù)據(jù)庫 CDC、消息、IoT 事件等。不同于傳統(tǒng) ETL,每一條新產(chǎn)生并進入到平臺的數(shù)據(jù),會在秒級范圍被響應,計算,處理并寫入到目標表中。同時提供了基于時間窗的統(tǒng)計分析能力,適用于實時分析場景。
三、操作演示:以 Oracle → Tablestore 為例
??????戳這里, 查看完整操作流程演示
第一步:創(chuàng)建數(shù)據(jù)源 Oracle 連接
第二步:創(chuàng)建數(shù)據(jù)目標 Tablestore 連接
第三步:開啟數(shù)據(jù)復制任務
四、Tapdata Cloud 3.0:限量內(nèi)測報名中
全新升級的 Tapdata Cloud 3.0 擁有更加全面的鏈路可觀測性的可視化操作界面、增強的數(shù)據(jù)復制能力,以及數(shù)據(jù)開發(fā)beta 等多重功能特性上新。
內(nèi)測權益
將您的應用場景在最新的 Tapdata Cloud 上得到驗證,幫助您解決切實的技術/業(yè)務痛點,您的內(nèi)測反饋和寶貴建議,將第一時間在 Tapdata Cloud 上得到實現(xiàn)。
- 使用及技術支持:當您遇到使用問題或疑問時,將獲得快速響應和支持。
- 專享訂閱折扣:新版 Tapdata Cloud 將推出收費版本,用戶可獲得 SLA 級服務,保障生產(chǎn)使用的要求。內(nèi)測用戶將獲得優(yōu)惠訂購特權。
- 成為產(chǎn)品共創(chuàng)貢獻者:您將成為 Tapdata Cloud 產(chǎn)品的共創(chuàng)貢獻者,內(nèi)測提出的功能需求及優(yōu)化建議,將有機會納入產(chǎn)品路線圖。
目前,Tapdata Cloud 3.0 已開放內(nèi)測報名通道:https://tapdata.net/tapdata-cloud/closed-beta-version.html ←戳這里即可參與哦文章來源:http://www.zghlxwxcb.cn/news/detail-792406.html
原文鏈接:https://tapdata.net/how-to-import-data-into-tablestore-alibaba-cloud.html文章來源地址http://www.zghlxwxcb.cn/news/detail-792406.html
到了這里,關于Tapdata Cloud 場景通關系列:將數(shù)據(jù)導入阿里云 Tablestore,獲得毫秒級在線查詢和檢索能力的文章就介紹完了。如果您還想了解更多內(nèi)容,請在右上角搜索TOY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關文章,希望大家以后多多支持TOY模板網(wǎng)!