首頁Python+大數(shù)據(jù)學(xué)習(xí)常見問題正文

大數(shù)據(jù)培訓(xùn)：Flume Sinks是什么?

更新時間:2023年12月18日10時19分來源:傳智教育瀏覽次數(shù):

好口碑IT培訓(xùn)

　　Flume Sources采集到的數(shù)據(jù)通過Channels就會流向Sinks中，此時的Sink類似一個集結(jié)的遞進(jìn)中心，它需要根據(jù)后續(xù)需求進(jìn)行配置，從而最終選擇是將數(shù)據(jù)直接進(jìn)行集中式存儲(例如，直接存儲到HDFS中)，還是繼續(xù)作為其他Agent的Source進(jìn)行傳輸。

　　在配置Sinks時，需要明確的就是將要傳輸?shù)臄?shù)據(jù)目的地、結(jié)果類型;接著，根據(jù)這些實(shí)際需求信息，選擇Flume已提供支持的Flume Sinks;然后，再根據(jù)選擇的Sinks類型，配置必要和非必要的Sinks屬性。

　　在Flume1.8.0中，F(xiàn)lume提供并支持的Flume Sinks有很多，如表8-9所示。

　　表8-9 Flume Sinks種類

Flume Sinks種類