操作場(chǎng)景
Datahub 支持接入各種數(shù)據(jù)源產(chǎn)生的不同類(lèi)型的數(shù)據(jù),統(tǒng)一管理,再分發(fā)給下游的離線(xiàn)/在線(xiàn)處理平臺(tái),構(gòu)建清晰的數(shù)據(jù)通道。
本文以 COS 數(shù)據(jù)為例介紹如何在 CKafka 控制臺(tái)創(chuàng)建數(shù)據(jù)異步拉取任務(wù),并對(duì)任務(wù)進(jìn)行修改配置,幫助用戶(hù)更好地了解數(shù)據(jù)接入功能。
關(guān)聯(lián)unirech注冊(cè)騰訊云國(guó)際站賬號(hào),量大優(yōu)惠且可以有多重優(yōu)勢(shì),無(wú)-需-綁-定PayPal即可注冊(cè),代-充-值騰訊云國(guó)際站、阿里云國(guó)際站、AWS亞馬遜云、GCP谷歌云,官方授權(quán)經(jīng)銷(xiāo)商!靠譜!T-G
飛機(jī)@unirech_dingding
操作步驟
創(chuàng)建數(shù)據(jù)接入任務(wù)
前提條件
- 已創(chuàng)建好目標(biāo) CKafka 實(shí)例和 Topic。
- 已創(chuàng)建好存儲(chǔ)桶和對(duì)象。
操作步驟:
- 登錄 CKafka 控制臺(tái) 。
- 在左側(cè)導(dǎo)航欄單擊數(shù)據(jù)流入,選擇好地域后,單擊新建任務(wù)。
- 在彈窗中數(shù)據(jù)源類(lèi)型選擇異步拉取 > COS。
- 單擊下一步,填寫(xiě)任務(wù)詳情。
-
任務(wù)名稱(chēng):只能包含字母、數(shù)字、下劃線(xiàn)、“-”、“.”。
-
CKafka 實(shí)例:選擇 CKafka 實(shí)例。
-
目標(biāo) CKafak topic:選擇數(shù)據(jù)投遞的目標(biāo) CKafka Topic。
-
源存儲(chǔ)桶:選擇源數(shù)據(jù)存儲(chǔ)桶。
-
源對(duì)象:選擇源數(shù)據(jù)對(duì)象,當(dāng)前 Topic 支持的最大消息大小為12MB,單行文本數(shù)據(jù)超過(guò)12MB 會(huì)寫(xiě)入失敗。
-
角色授權(quán):使用對(duì)象存儲(chǔ)(COS)產(chǎn)品功能,您需要授予一個(gè)第三方角色代替您執(zhí)行訪(fǎng)問(wèn)相關(guān)產(chǎn)品權(quán)限。
- 單擊提交,完成任務(wù)創(chuàng)建。
更改數(shù)據(jù)源和數(shù)據(jù)目標(biāo)
登錄 CKafka 控制臺(tái) 。
在左側(cè)導(dǎo)航欄單擊數(shù)據(jù)接入,單擊目標(biāo)任務(wù)的ID,進(jìn)入任務(wù)基本信息頁(yè)面。
單擊數(shù)據(jù)目標(biāo)模塊右上角的更改數(shù)據(jù)目標(biāo),修改數(shù)據(jù)目標(biāo)信息。
查看監(jiān)控
登錄 CKafka 控制臺(tái) 。
在左側(cè)導(dǎo)航欄單擊數(shù)據(jù)接入,單擊目標(biāo)任務(wù)的ID,進(jìn)入任務(wù)基本信息頁(yè)面。
選擇監(jiān)控頁(yè)簽,可查看目標(biāo) Topic 監(jiān)控?cái)?shù)據(jù)。
暫停任務(wù)
在 數(shù)據(jù)接入 頁(yè)面,單擊目標(biāo)任務(wù)的操作欄的暫停,可暫停任務(wù)。
說(shuō)明: 當(dāng)您發(fā)現(xiàn)數(shù)據(jù)接入任務(wù)影響了 CKafka 正常服務(wù)時(shí),可以暫停數(shù)據(jù)接入。
恢復(fù)任務(wù)
在 數(shù)據(jù)接入 頁(yè)面,單擊目標(biāo)任務(wù)的操作欄的恢復(fù),可將暫停任務(wù)恢復(fù)。
說(shuō)明: 處于暫停狀態(tài)的任務(wù)可以重新啟動(dòng),將繼續(xù)轉(zhuǎn)儲(chǔ)數(shù)據(jù)。
刪除任務(wù)
在 數(shù)據(jù)接入 頁(yè)面,單擊目標(biāo)任務(wù)的操作欄的刪除,在二次確認(rèn)彈窗中單擊確認(rèn),可刪除任務(wù)。文章來(lái)源:http://www.zghlxwxcb.cn/news/detail-713381.html
說(shuō)明: 刪除任務(wù)表示停止數(shù)據(jù)接入并刪除任務(wù)記錄,不會(huì)影響到已經(jīng)轉(zhuǎn)儲(chǔ)的數(shù)據(jù)和相關(guān)的 CKafka 實(shí)例。 任務(wù)一旦刪除不可恢復(fù),請(qǐng)您謹(jǐn)慎操作。文章來(lái)源地址http://www.zghlxwxcb.cn/news/detail-713381.html
到了這里,關(guān)于騰訊云國(guó)際-如何使用對(duì)象存儲(chǔ)COS在 CKafka 控制臺(tái)創(chuàng)建數(shù)據(jù)異步拉取任務(wù)?騰訊云代充的文章就介紹完了。如果您還想了解更多內(nèi)容,請(qǐng)?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!