全部 大數(shù)據(jù)新聞動態(tài) 大數(shù)據(jù)技術(shù)文章 大數(shù)據(jù)常見問題 技術(shù)問答

• • 

    Scala的聲明值和變量【大數(shù)據(jù)文章】

    Scala有兩種類型的變量，一種是使用關(guān)鍵字var聲明的變量，值是可變的;另一種是使用關(guān)鍵字val聲明的變量，也叫常量，值是不可變的。這里需要說明的是，雖然聲明值和變量的方式比較簡單，但是有以下幾個事項需要注意： 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-12-17 |傳智教育 |Scala聲明值和變量

  • 

    MapReduce編程的兩種數(shù)據(jù)流模型演示

    MapReduce是一種編程模型，用于處理大規(guī)模數(shù)據(jù)集的并行運算。使用MapReduce執(zhí)行計算任務(wù)的時候，每個任務(wù)的執(zhí)行過程都會被分為兩個階段，分別是Map和Reduce，其中Map階段用于對原始數(shù)據(jù)進(jìn)行處理，Reduce階段用于對Map階段的結(jié)果進(jìn)行匯總，得到最終結(jié)果，這兩個階段的模型如圖1所示。 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-12-17 |傳智教育 |MapReduce編程模型,大規(guī)模數(shù)據(jù)集的運算

  • 

    HBase數(shù)據(jù)庫是怎樣存儲數(shù)據(jù)的？

    HBase分布式數(shù)據(jù)庫最重要的就是存儲數(shù)據(jù)，下面，從四個方面詳細(xì)介紹HBase的物理存儲。 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-12-17 |傳智教育 |數(shù)據(jù)存儲，HBase物理存儲機制

  • 

    HDFS分布式文件系統(tǒng)的優(yōu)點缺點分別是什么？

    隨著互聯(lián)網(wǎng)數(shù)據(jù)規(guī)模的不斷增大，對文件存儲系統(tǒng)提出了更高的要求，需要更大的容量、更好的性能以及安全性更高的文件存儲系統(tǒng)，與傳統(tǒng)分布式文件系統(tǒng)一樣，HDFS分布式文件系統(tǒng)也是通過計算機網(wǎng)絡(luò)與節(jié)點相連，但也有傳統(tǒng)分布式文件系統(tǒng)的優(yōu)點和缺點。 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-12-16 |傳智教育 |HDFS,HDFS分布式文件系統(tǒng)的優(yōu)點

  • 

    怎樣使用Linux和HDFS創(chuàng)建RDD？

    Spark可以從Hadoop支持的任何存儲源中加載數(shù)據(jù)去創(chuàng)建RDD，包括本地文件系統(tǒng)和HDFS等文件系統(tǒng)。我們通過Spark中的SparkContext對象調(diào)用textFile()方法加載數(shù)據(jù)創(chuàng)建RDD。這里以Linux本地系統(tǒng)和HDFS分布式文件系統(tǒng)為例，講解如何創(chuàng)建RDD。 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-12-07 |傳智教育 |創(chuàng)建RDD,RDD

  • 

    什么是Sqoop？Sqoop發(fā)展歷程簡介

    Sqoop是Apache旗下的一款開源工具，該項目開始于2009年，最早是作為Hadoop的一個第三方模塊存在，后來為了讓使用者能夠快速部署，也為了讓開發(fā)人員能夠更快速的迭代開發(fā)，并在2013年，獨立成為Apache的一個頂級開源項目。 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-12-07 |傳智教育 |Sqoop,什么是sqoop

  • 

    什么是數(shù)據(jù)倉庫？大數(shù)據(jù)的數(shù)據(jù)倉庫有哪些特點？

    數(shù)據(jù)倉庫是一個面向主題的、集成的、隨時間變化的，但信息本身相對穩(wěn)定的數(shù)據(jù)集合，它用于支持企業(yè)或組織的決策分析處理，基于數(shù)據(jù)倉庫的定義，數(shù)據(jù)倉庫此處有四個特點： 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-12-02 |傳智教育 |數(shù)據(jù)倉庫特點,數(shù)據(jù)倉庫

  • 

    hadoop虛擬機如何安裝和配置JDK?

    Hadoop是由Java語言開發(fā)的，Hadoop集群的使用依賴于Java環(huán)境，因此在安裝Hadoop集群前，需要先安裝并配置好JDK。接下來，就在前面規(guī)劃的Hadoop集群主節(jié)點hadoop01機器上分步驟演示，如何安裝和配置JDK，具體如下。 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-12-02 |傳智播客 |JDK的安裝和配置

  << < 1 ... 5 6 7 8 9 10 11 ... 35 > >>