【问题标题】:Where are the API docs for org.apache.spark.sql.cassandra for Spark 1.3.x?Spark 1.3.x 的 org.apache.spark.sql.cassandra 的 API 文档在哪里?
【发布时间】:2015-06-08 21:23:14
【问题描述】:

我正在编写一个 Spark 作业,该作业使用 Spark-Cassandra 连接器从 spark 连接到 Cassandra,然后使用 Spark SQL 在 Spark/Cassandra 上运行查询。我想知道在哪里可以找到这方面的 API 文档?看这里的api

https://spark.apache.org/docs/1.3.0/api/scala/index.html#org.apache.spark.package

看起来这个包甚至没有退出(确实,我现在正在使用它)。

这是我能找到的唯一一个引用从 SparkSQL 访问 Cassandra 的链接

https://github.com/datastax/spark-cassandra-connector/blob/master/doc/2_loading.md#accessing-cassandra-with-sparksql-since-11

【问题讨论】:

    标签: cassandra apache-spark apache-spark-sql


    【解决方案1】:

    新模块位于 Spark Cassandra 连接器中,而不是 apache Spark 项目中。

    新的 DataSource 代码在新的 Dataframes 部分中进行了描述,其中包含 SparkSQL 和编程访问的语法。

    https://github.com/datastax/spark-cassandra-connector/blob/master/doc/14_data_frames.md

    您要查找的代码本身是

    https://github.com/datastax/spark-cassandra-connector/tree/master/spark-cassandra-connector/src/main/scala/org/apache/spark/sql/cassandra

    【讨论】:

      【解决方案2】:
      猜你喜欢
      • 2010-10-14
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2011-02-27
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多