Cassandra 와 Spark

Cassandra 테이블을 스파크 데이터와 join 하고 싶을때 

https://github.com/datastax/spark-cassandra-connector/blob/master/doc/14_data_frames.md

datastax , 쉽게 생각하면 카산드라 벤더에서 만든 스파크 드라이버를 이용 

val createDDL = """CREATE TEMPORARY VIEW/TABLE words
     USING org.apache.spark.sql.cassandra
     OPTIONS (
     table "words",
     keyspace "test",
     cluster "Test Cluster",
     pushdown "true")"""
spark.sql(createDDL) // Creates Catalog Entry registering an existing Cassandra Table

View 또는 TABLE로 맵핑해서 SparkSQL로 사용