溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Sqoop新品來了

發布時間:2020-05-25 12:15:40 來源:網絡 閱讀:368 作者:caosheng03 欄目:大數據


Sqoop盡管穩定的應用于生產環境很多年,但是它自身存在的一些缺陷給實際操作帶來了不便。Sqoop2便成為了研究使用的對象,那么Sqoop2有什么優勢呢?

首先我們先來了解一下Sqoop的使用情況,使用Sqoop數據不會出現丟失,而且Sqoop功能強大,可以將數據導到HDFS,Hbase,Hive等各種連接器,但Sqoop是純客戶端的體系架構,這樣就會帶來很多的問題:

(1)客戶端需要連接關系型數據庫,這就需要每一個客戶端都配置一個連接器??蛻舳嗽蕉?,那么相應的每個客戶端相應的配置也就越多,操作麻煩。

(2)需要用戶的用戶密碼,可是Sqoop在執行操作的過程中,密碼會明文的出現,操作不安全。

(3)很難在外部應用中集成命令行借口。

(4)跟JDBC語義緊密結合,無法訪問NoSQL數據庫

Sqoop新品來了

而Sqoop2就是在原有Sqoop基礎上增加了Server端,那么我們是不是可以把連接器統一配置到Server端,是不是可以把連接數據庫的配置項統一維護起來,是不是可以把用戶的密碼統一的保存起來?當然,Sqoop2可以很好地解決這些問題。Sqoop2的優勢:

 (1)    客戶端只需要連接到Sqoop服務器

 (2)    管理員配置好DB連接

 (3)   最終用戶不再需要處理數據庫認證

 (4)   集中審計跟蹤

 (5)   更好的資源管理

 (6)   可以通過CLI,REST API和Web UI訪問Sqoop服務

Sqoop新品來了

可是目前Sqoop2還在開發當中,它的方向是好的,但是它的一些功能和特性還沒有出現在我們的實際應用中,比如Sqoop的一些功能在Sqoop2里面還不能夠使用,像導數據到Hbase就不能使用,盡管Sqoop2跟Sqoop沒有完全相等的特性,但是它已實現的特性被認為是穩定的。那么在實際使用中,Sqoop和Sqoop2如何選擇使用呢?優先推薦使用Sqoop2,除非缺失某些特性再去選擇使用Sqoop。

這就是我對于sqoop2的一些認知和理解,但是sqoop2畢竟還不是一款成熟的產品,也期待我們大家可以一起交流共享。我自平時喜歡關注微信公眾號“大數據cn”“大數據時代學習中心”,里面有很多經典介紹,對于汲取各方面知識來講還不錯。大家在平時的自我提升中,也要多交流溝通,對于改善自己的知識架構來說也有著重要的促進意義。


向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

亚洲午夜精品一区二区_中文无码日韩欧免_久久香蕉精品视频_欧美主播一区二区三区美女