Programming/Java

Spark on HBase 관련 코드들

라우드니스 2015. 12. 10. 14:14

https://github.com/tkyoo/SparkOnHBase


Apache Spark를 통해서 HBase에 접근했던 코드들 


* Spark에서 Apache Phoenix를 통해 HBase에 접근하는 코드 (Pheonix 폴더)


* Spark에서 자체 Hadoop API만을 이용하여 HBase에 접근하는 코드 (Spark 폴더)


* Cloudera의 SparkOnHBase 가 정식으로 추가돼 HBase 2.0 때 코드에 들어가 있는 hbase-spark 모듈의 HBaseContext 객체를 이용하여 HBase 접근. (Spark/HBaseContext 폴더).  Spark / SparkSQL 사용





반응형