全部 大數(shù)據(jù)新聞動態(tài) 大數(shù)據(jù)技術文章 大數(shù)據(jù)常見問題 技術問答

• • 

    HBase表常見Shell命令及具體語法操作講解【大數(shù)據(jù)文章】

    Shell命令可以很方便地操作HBase數(shù)據(jù)庫，例如創(chuàng)建、刪除及修改表、向表中添加數(shù)據(jù)、列出表中的相關信息等操作。不過當使用Shell命令行操作HBase時，首先需要進入HBase Shell交互界面,通過一系列Shell命令操作HBase，接下來，通過一張表列舉一些操作HBase表常見的Shell命令。 查看全文>>

    大數(shù)據(jù)技術文章2020-11-17 |傳智播客 |常見的Shell命令具體是怎樣操作的

  • 

    HDFS的高可用架構是怎樣工作的?

    在Hadoop1.0版本中，NameNode只有一個，一旦這個NameNode發(fā)生故障，就會導致整個Hadoop集群不可用，也就是發(fā)生了單點故障問題。為了解決單點故障問題，Hadoop2.0中的HDFS中增加了對高可用的支持。 查看全文>>

    大數(shù)據(jù)技術文章2020-11-12 |傳智播客 |HDFS高可用架構

  • 

    Combiner組件創(chuàng)建和使用演示【大數(shù)據(jù)文章】

    Combiner組件是MapReduce程序中的一種重要的組件，如果想自定義Combiner，我們需要繼承Reducer類，并且重寫reduce()方法。接下來，我們針對詞頻統(tǒng)計案例編寫一個Combiner組件，演示如何創(chuàng)建和使用Combiner組件 查看全文>>

    大數(shù)據(jù)技術文章2020-11-12 |傳智播客 |Combiner組件

  • 

    MapReduce程序在本地運行的模式怎樣設置？

    MapReduce程序的運行模式主要有兩種：本地運行模式和集群運行模式，集群運行模式只需要將MapReduce程序打成Jar包上傳至集群即可，比較簡單，這里不再贅述。下面我們以詞頻統(tǒng)計為例，講解如何將MapReduce程序設置為在本地運行模式。 查看全文>>

    大數(shù)據(jù)技術文章2020-11-05 |傳智播客 |MapReduce本地運行的模式設置

  • 

    Mapper類中的map()方法怎么用？

    MapReduce程序會根據(jù)輸入的文件產(chǎn)生多個map任務。Hadoop提供的Mapper類是實現(xiàn)Map任務的一個抽象基類，該基類提供了一個map()方法，默認情況下，Mapper類中的map()方法是沒有做任何處理的。 查看全文>>

    大數(shù)據(jù)技術文章2020-11-04 |傳智播客 |Mapper類中的map()方法怎么用

  • 

    InputFormat接口的定義代碼怎么設置？

    Hadoop中有五個編程組件，分別是：InputFormat、Mapper、Reducer、Parttioner、OutputFromat和Canbiner，其中Canbiner的作用是對Map階段的輸出的重復數(shù)據(jù)先做一次合并計算，所以不屬于必屬件。本節(jié)課就來對MapReducer的InputFormat組件做一個簡單介紹 查看全文>>

    大數(shù)據(jù)技術文章2020-11-03 |傳智播客 |InputFormat接口的定義代碼設置

  • 

    Watch機制的顯著特點有哪些？Watch簡介

    在ZooKeeper中，引入了Watch機制來實現(xiàn)這種分布式的通知功能。ZooKeeper允許客戶端向服務端注冊一個Watch監(jiān)聽，當服務端的一些事件觸發(fā)了這個Watch，那么就會向指定客戶端發(fā)送一個事件通知，來實現(xiàn)分布式的通知功能。Watch機制在事件中有以下4個特點： 查看全文>>

    大數(shù)據(jù)技術文章2020-11-03 |傳智播客 |Watch機制簡介

  • 

    Znode儲存結構是怎樣的？節(jié)點類型有幾種？

    Zookeeper的底層是一套數(shù)據(jù)儲存結構，其中的節(jié)點，我們稱之為znode。Zookeeper中數(shù)據(jù)存儲的結構和標準文件系統(tǒng)非常類似，擁有一個層次的命名空間，也是使用斜杠(/)進行分割，兩者都是采用樹形層次結構。不同的是，標準文件系統(tǒng)是由文件夾和文件來組成的樹，而Zookeeper是由什么來組成的樹呢?下面我們來看一下Zookeeper數(shù)據(jù)存儲結構 查看全文>>

    大數(shù)據(jù)技術文章2020-11-03 |傳智播客 |Znode的儲存結構和節(jié)點類型

  << < 1 ... 7 8 9 10 11 12 13 ... 38 > >>