한땀한땀 정성들인 코딩
[맵리듀스]row count 테이블 로우갯수 본문
반응형
for (Result rs = scanner.next(); rs != null; rs = scanner.next()) {
number++;
}
hbase org.apache.hadoop.hbase.mapreduce.RowCounter <tablename>
Usage: RowCounter [options]
<tablename> [
--starttime=[start]
--endtime=[end]
[--range=[startKey],[endKey]]
[<column1> <column2>...]
]
2가지 방법
1. 맵리듀스를 쓰지 않고 scan 클래스를 이용하기 - 느림
2. 맵리듀스 RowCounter 사용
반응형
'빅데이터' 카테고리의 다른 글
[빅데이터]동시성공부 (0) | 2017.01.16 |
---|---|
[spark]스파크가 왜 좋냐? (0) | 2017.01.16 |
[맵리듀스]join하기 (0) | 2017.01.09 |
항공데이터 hbase상 맵리듀스 완료!!! (0) | 2017.01.06 |
[HBase]shell명령어 (0) | 2017.01.06 |