全部 大數(shù)據(jù)新聞動(dòng)態(tài) 大數(shù)據(jù)技術(shù)文章 大數(shù)據(jù)常見問(wèn)題 技術(shù)問(wèn)答

• • 

    HBase表常見Shell命令及具體語(yǔ)法操作講解【大數(shù)據(jù)文章】

    Shell命令可以很方便地操作HBase數(shù)據(jù)庫(kù)，例如創(chuàng)建、刪除及修改表、向表中添加數(shù)據(jù)、列出表中的相關(guān)信息等操作。不過(guò)當(dāng)使用Shell命令行操作HBase時(shí)，首先需要進(jìn)入HBase Shell交互界面,通過(guò)一系列Shell命令操作HBase，接下來(lái)，通過(guò)一張表列舉一些操作HBase表常見的Shell命令。 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-11-17 |傳智播客 |常見的Shell命令具體是怎樣操作的

  • 

    HDFS的高可用架構(gòu)是怎樣工作的?

    在Hadoop1.0版本中，NameNode只有一個(gè)，一旦這個(gè)NameNode發(fā)生故障，就會(huì)導(dǎo)致整個(gè)Hadoop集群不可用，也就是發(fā)生了單點(diǎn)故障問(wèn)題。為了解決單點(diǎn)故障問(wèn)題，Hadoop2.0中的HDFS中增加了對(duì)高可用的支持。 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-11-12 |傳智播客 |HDFS高可用架構(gòu)

  • 

    Combiner組件創(chuàng)建和使用演示【大數(shù)據(jù)文章】

    Combiner組件是MapReduce程序中的一種重要的組件，如果想自定義Combiner，我們需要繼承Reducer類，并且重寫reduce()方法。接下來(lái)，我們針對(duì)詞頻統(tǒng)計(jì)案例編寫一個(gè)Combiner組件，演示如何創(chuàng)建和使用Combiner組件 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-11-12 |傳智播客 |Combiner組件

  • 

    MapReduce程序在本地運(yùn)行的模式怎樣設(shè)置？

    MapReduce程序的運(yùn)行模式主要有兩種：本地運(yùn)行模式和集群運(yùn)行模式，集群運(yùn)行模式只需要將MapReduce程序打成Jar包上傳至集群即可，比較簡(jiǎn)單，這里不再贅述。下面我們以詞頻統(tǒng)計(jì)為例，講解如何將MapReduce程序設(shè)置為在本地運(yùn)行模式。 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-11-05 |傳智播客 |MapReduce本地運(yùn)行的模式設(shè)置

  • 

    Mapper類中的map()方法怎么用？

    MapReduce程序會(huì)根據(jù)輸入的文件產(chǎn)生多個(gè)map任務(wù)。Hadoop提供的Mapper類是實(shí)現(xiàn)Map任務(wù)的一個(gè)抽象基類，該基類提供了一個(gè)map()方法，默認(rèn)情況下，Mapper類中的map()方法是沒(méi)有做任何處理的。 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-11-04 |傳智播客 |Mapper類中的map()方法怎么用

  • 

    InputFormat接口的定義代碼怎么設(shè)置？

    Hadoop中有五個(gè)編程組件，分別是：InputFormat、Mapper、Reducer、Parttioner、OutputFromat和Canbiner，其中Canbiner的作用是對(duì)Map階段的輸出的重復(fù)數(shù)據(jù)先做一次合并計(jì)算，所以不屬于必屬件。本節(jié)課就來(lái)對(duì)MapReducer的InputFormat組件做一個(gè)簡(jiǎn)單介紹 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-11-03 |傳智播客 |InputFormat接口的定義代碼設(shè)置

  • 

    Watch機(jī)制的顯著特點(diǎn)有哪些？Watch簡(jiǎn)介

    在ZooKeeper中，引入了Watch機(jī)制來(lái)實(shí)現(xiàn)這種分布式的通知功能。ZooKeeper允許客戶端向服務(wù)端注冊(cè)一個(gè)Watch監(jiān)聽，當(dāng)服務(wù)端的一些事件觸發(fā)了這個(gè)Watch，那么就會(huì)向指定客戶端發(fā)送一個(gè)事件通知，來(lái)實(shí)現(xiàn)分布式的通知功能。Watch機(jī)制在事件中有以下4個(gè)特點(diǎn)： 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-11-03 |傳智播客 |Watch機(jī)制簡(jiǎn)介

  • 

    Znode儲(chǔ)存結(jié)構(gòu)是怎樣的？節(jié)點(diǎn)類型有幾種？

    Zookeeper的底層是一套數(shù)據(jù)儲(chǔ)存結(jié)構(gòu)，其中的節(jié)點(diǎn)，我們稱之為znode。Zookeeper中數(shù)據(jù)存儲(chǔ)的結(jié)構(gòu)和標(biāo)準(zhǔn)文件系統(tǒng)非常類似，擁有一個(gè)層次的命名空間，也是使用斜杠(/)進(jìn)行分割，兩者都是采用樹形層次結(jié)構(gòu)。不同的是，標(biāo)準(zhǔn)文件系統(tǒng)是由文件夾和文件來(lái)組成的樹，而Zookeeper是由什么來(lái)組成的樹呢?下面我們來(lái)看一下Zookeeper數(shù)據(jù)存儲(chǔ)結(jié)構(gòu) 查看全文>>

    大數(shù)據(jù)技術(shù)文章2020-11-03 |傳智播客 |Znode的儲(chǔ)存結(jié)構(gòu)和節(jié)點(diǎn)類型

  << < 1 ... 7 8 9 10 11 12 13 ... 38 > >>