【发布时间】:2017-12-29 20:09:08
【问题描述】:
我正在尝试使用 Google shell 中的 Spark Job 从 Bigtable 读取/写入数据。
我已经使用谷歌云提供的API进行bigtable连接-https://cloud.google.com/bigtable/docs/samples-java-hello
我正在寻找的是使用 spark 内部函数连接到 bigtable,但我不确定 Bigtable 实例的 IP 地址/公共 DNS。
在 AWS 我使用了这个功能:- getEMRMasterPublicDNS
不确定谷歌云是否提供类似的东西。
请提出任何解决方法。
提前致谢。
谢谢,
【问题讨论】:
标签: apache-spark hbase apache-spark-sql spark-streaming google-cloud-bigtable