한땀한땀 정성들인 코딩

[맵리듀스]row count 테이블 로우갯수 본문

빅데이터

[맵리듀스]row count 테이블 로우갯수

romance penguin 2017. 1. 13. 18:18
반응형
for (Result rs = scanner.next(); rs != null; rs = scanner.next()) {
    number++;
}
 hbase org.apache.hadoop.hbase.mapreduce.RowCounter <tablename>

Usage: RowCounter [options] 
    <tablename> [          
        --starttime=[start] 
        --endtime=[end] 
        [--range=[startKey],[endKey]] 
        [<column1> <column2>...]
    ]

2가지 방법

1. 맵리듀스를 쓰지 않고 scan 클래스를 이용하기 - 느림

2. 맵리듀스 RowCounter 사용

반응형

'빅데이터' 카테고리의 다른 글

[빅데이터]동시성공부  (0) 2017.01.16
[spark]스파크가 왜 좋냐?  (0) 2017.01.16
[맵리듀스]join하기  (0) 2017.01.09
항공데이터 hbase상 맵리듀스 완료!!!  (0) 2017.01.06
[HBase]shell명령어  (0) 2017.01.06