HBase의 공식 레퍼런스에 있는 Coprocessor 예제 를 더 단순화 시켜서 Count를 만들어 봤다.
테스트로, 약 2GB, Row 당 크기는 약 20byte, 총 1억개를 가지고 있는 테이블을 각각 Apache Phoenix를 통해서, 혹은 내 스스로 나누어서 넣고 count를 실행해봤다. 실험에 사용한 노드가 10대라서 phoenix 테이블이나 hbase에 바로 넣은것이나 둘 다 region 구간은 동일하고 나누고 하나의 region당 1천개 씩 넣었다.
hbase heap에 cache 되는것도 고려하여 총 10번씩 실행시켜 평균을 냈는데 phoenix는 약 6.51초, coprocessor는 11.43초가 나왔다.
아무래도 Apache phoenix에서는 단순히 endpoint coprocessor로만 처리하는것은 아닌것 같고 코드를 더 분석해 봐야겠다.
반응형
'Programming > Java' 카테고리의 다른 글
| Remote hbase에 접근이 불가능할때 (0) | 2016.04.05 |
|---|---|
| 초간단 Maven local repository 만들기 (0) | 2016.01.07 |
| Maven 3.x 의존성과 함께 컴파일하기 (0) | 2015.12.18 |
| Spark CSV 의 의존성 (0) | 2015.12.16 |
| Spark on HBase 관련 코드들 (0) | 2015.12.10 |