Programming/Java
Spark on HBase 관련 코드들
라우드니스
2015. 12. 10. 14:14
https://github.com/tkyoo/SparkOnHBase
Apache Spark를 통해서 HBase에 접근했던 코드들
* Spark에서 Apache Phoenix를 통해 HBase에 접근하는 코드 (Pheonix 폴더)
* Spark에서 자체 Hadoop API만을 이용하여 HBase에 접근하는 코드 (Spark 폴더)
* Cloudera의 SparkOnHBase 가 정식으로 추가돼 HBase 2.0 때 코드에 들어가 있는 hbase-spark 모듈의 HBaseContext 객체를 이용하여 HBase 접근. (Spark/HBaseContext 폴더). Spark / SparkSQL 사용
반응형