首頁最新資訊

全部 新聞動態(tài) 技術(shù)文章 常見問題 技術(shù)問答

    • HBASE命令行演示

      進(jìn)入hbase命令行 ./hbase shell 顯示hbase中的表 list 創(chuàng)建user表,包含info、data兩個列族......查看全文>>

      技術(shù)文章2018-11-26 |黑馬程序員 |黑馬程序員,HBASE命令
    • Compact是如何存儲大數(shù)據(jù)的?

      最近,在工作中遇到了MySQL中如何存儲長度較長的字段類型問題,于是花了一周多的時間抽空學(xué)習(xí)了一下,并且記錄下來。查看全文>>

      技術(shù)文章2018-11-16 |黑馬程序員技術(shù)社區(qū) |MySQL基礎(chǔ),Compact基礎(chǔ),
    • 大數(shù)據(jù)離線階段Day9之HDFS安全模式

      安全模式是HDFS所處的一種特殊狀態(tài),在這種狀態(tài)下,文件系統(tǒng)只接受讀數(shù)據(jù)請求,而不接受刪除、修改等變更請求,是一種保護機制,用于保證集群中的數(shù)據(jù)塊的安全性。查看全文>>

      技術(shù)文章2018-10-24 |黑馬程序員 |黑馬程序員,大數(shù)據(jù),HDFS
    • 大數(shù)據(jù)離線階段Day9之HDFS元數(shù)據(jù)管理機制

      HDFS元數(shù)據(jù),按類型分,主要包括以下幾個部分:   1、文件、目錄自身的屬性信息,例如文件名,目錄名,修改信息等。   2、文件記錄的信息的存儲相關(guān)的信息,例如存儲塊信息,分塊情況,副本個數(shù)等。   3、記錄HDFS的Datanode的信息,用于DataNode的管理。查看全文>>

      技術(shù)文章2018-10-24 |黑馬程序員 |黑馬程序員,大數(shù)據(jù),HDFS
    • 大數(shù)據(jù)離線階段Day8之MapReduce優(yōu)化參數(shù)

      mapreduce.map.memory.mb: 一個Map Task可使用的內(nèi)存上限(單位:MB),默認(rèn)為1024。如果Map Task實際使用的資源量超過該值,則會被強制殺死。查看全文>>

      技術(shù)文章2018-10-24 |黑馬程序員 |黑馬程序員
    • 大數(shù)據(jù)離線階段Day8之MapReduce并行度機制

      MapTask的并行度指的是map階段有多少個并行的task共同處理任務(wù)。map階段的任務(wù)處理并行度,勢必影響到整個job的處理速度。那么,MapTask并行實例是否越多越好呢?其并行度又是如何決定呢?查看全文>>

      技術(shù)文章2018-10-24 |黑馬程序員 |黑馬程序員,大數(shù)據(jù)
和我們在線交談!