HBase MapReduce摘要到沒有Reducer的HBase

如果您使用 HBase 作為減速器(reducer),也可以在不使用減速器的情況下執行摘要。

工作摘要需要 HBase 目標表。Table 方法 incrementColumnValue 將用於自動增加值。從性能角度來看,對於每個 map-task,保留一個 value 值為 map 的值,並且 在 mapper 的 cleanup 方法期間為每個 key 設置一次更新可能是有意義的。但是,根據要處理的行數和唯一鍵的不同,您的里程可能會有所不同。

最後,摘要結果在 HBase 中。


分享到:


相關文章: