教程放在這里:TDengine Java Connector,官方文檔已經(jīng)寫的很清晰了,不再贅述。
這里記錄一下踩坑:
1.報錯
java.lang.UnsatisfiedLinkError: no taos in java.library.path
at java.lang.ClassLoader.loadLibrary(ClassLoader.java:1860)
at java.lang.Runtime.loadLibrary0(Runtime.java:843)
at java.lang.System.loadLibrary(System.java:1136)
at com.taosdata.jdbc.TSDBJNIConnector.<clinit>(TSDBJNIConnector.java:30)
at com.taosdata.jdbc.TSDBDriver.connect(TSDBDriver.java:159)
at java.sql.DriverManager.getConnection(DriverManager.java:664)
at java.sql.DriverManager.getConnection(DriverManager.java:208)
at com.taosdata.kafka.connect.db.TSDBConnectionProvider.getConnection(TSDBConnectionProvider.java:35)
at com.taosdata.kafka.connect.db.CacheProcessor.getConnection(CacheProcessor.java:40)
at com.taosdata.kafka.connect.db.CacheProcessor.execute(CacheProcessor.java:66)
at com.taosdata.kafka.connect.db.CacheProcessor.initDB(CacheProcessor.java:55)
at com.taosdata.kafka.connect.db.CacheProcessor.setDbName(CacheProcessor.java:33)
...
這是由于沒有按照taos客戶端,連機(jī)器內(nèi)部調(diào)用了taos客戶端程序去連接TDengine服務(wù),只要安裝TDengine Client即可。安裝TDengine Client教程
2.報錯
Caused by: java.lang.NoClassDefFoundError: Could not initialize class com.taosdata.jdbc.TSDBJNIConnector
at com.taosdata.jdbc.TSDBDriver.connect(TSDBDriver.java:159)
at java.sql.DriverManager.getConnection(DriverManager.java:664)
at java.sql.DriverManager.getConnection(DriverManager.java:208)
at com.taosdata.kafka.connect.db.TSDBConnectionProvider.getConnection(TSDBConnectionProvider.java:35)
at com.taosdata.kafka.connect.db.CacheProcessor.getConnection(CacheProcessor.java:40)
at com.taosdata.kafka.connect.db.CacheProcessor.execute(CacheProcessor.java:66)
at com.taosdata.kafka.connect.db.CacheProcessor.initDB(CacheProcessor.java:55)
at com.taosdata.kafka.connect.db.CacheProcessor.setDbName(CacheProcessor.java:33)
at com.taosdata.kafka.connect.sink.TDengineSinkTask.bulkWriteBatch(TDengineSinkTask.java:94)
at com.taosdata.kafka.connect.sink.TDengineSinkTask.put(TDengineSinkTask.java:85)
at org.apache.kafka.connect.runtime.WorkerSinkTask.deliverMessages(WorkerSinkTask.java:601)
... 11 more
這個報錯是因?yàn)槲也渴餞Dengine服務(wù)的時候用的是docker的方式部署,用原生連接的方式連接TDengine,很多依賴庫本地訪問不了導(dǎo)致的報錯。我們可以改用TestFul的方式去連接。
下面是官方教程中創(chuàng)建 Sink Connector 實(shí)例用到的配置文件
{
"name": "TDengineSinkConnector",
"config": {
"connection.database": "power",
"connection.password": "taosdata",
"connection.url": "jdbc:TAOS://127.0.0.1:6030",
"connection.user": "root",
"connector.class": "com.taosdata.kafka.connect.sink.TDengineSinkConnector",
"data.precision": "ns",
"db.schemaless": "line",
"key.converter": "org.apache.kafka.connect.storage.StringConverter",
"tasks.max": "1",
"topics": "meters",
"value.converter": "org.apache.kafka.connect.storage.StringConverter",
"name": "TDengineSinkConnector",
"errors.tolerance": "all",
"errors.deadletterqueue.topic.name": "dead_letter_topic",
"errors.deadletterqueue.topic.replication.factor": "1",
},
"tasks": [],
"type": "sink"
}
閱讀源碼后,我們將其中的"connection.url": "jdbc:TAOS://127.0.0.1:6030"
修改為"connection.url": "jdbc:TAOS-RS://127.0.0.1:6041?user=root&password=taosdata"
。文章來源:http://www.zghlxwxcb.cn/news/detail-758713.html
解釋一下:文章來源地址http://www.zghlxwxcb.cn/news/detail-758713.html
-
jdbc:TAOS:
代表使用原生連接,jdbc:TAOS-RS
代表使用REST連接。 - 加上
?user=root&password=taosdata
是因?yàn)槲野l(fā)現(xiàn)改成REST連接后,connection.user
配置項(xiàng)不生效,只好在url上直接拼接了。
到了這里,關(guān)于TDengine Kafka Connector將 Kafka 中指定 topic 的數(shù)據(jù)(批量或?qū)崟r)同步到 TDengine的文章就介紹完了。如果您還想了解更多內(nèi)容,請?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!