這篇文章主要講解了“flink mysql數據接入的方法”,文中的講解內容簡單清晰,易于學習與理解,下面請大家跟著小編的思路慢慢深入,一起來研究和學習“flink mysql數據接入的方法”吧!
一.api方式接入
1.添加依賴
|
2.API代碼
|
二.sql方式接入
1.添加jar包至lib下
flink-sql-connector-mysql-cdc_1.1.0.jar
2.mysql中創建表
|
3.創建元數據
|
4.使用查詢sql
|
5.增加和刪除表字段測試
增加不影響
刪除表字段后,會出錯
[ERROR] Could not execute SQL statement. Reason:
org.apache.kafka.connect.errors.DataException: name is not a valid field name
注:mysql的版本如果是8.0,flink端鏈接會出錯
com.github.shyiko.mysql.binlog.network.AuthenticationException: Client does not support authentication protocol requested by server; consider upgrading MySQL client
出現上述問題的原因是:mysql8 之前的版本中加密規則是mysql_native_password,而在mysql8之后,加密規則是caching_sha2_password 把mysql用戶登錄密碼加密規則還原成mysql_native_password
解決方案:在mysql中執行以下命令
alter user 'root'@'%' identified with mysql_native_password by 'root'; 修改認證規則
flush privileges; 刷新權限
感謝各位的閱讀,以上就是“flink mysql數據接入的方法”的內容了,經過本文的學習后,相信大家對flink mysql數據接入的方法這一問題有了更深刻的體會,具體使用情況還需要大家實踐驗證。這里是億速云,小編將為大家推送更多相關知識點的文章,歡迎關注!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。