【问题标题】:How to load data to HDFS (local HDInsight) programmatically?如何以编程方式将数据加载到 HDFS(本地 HDInsight)?
【发布时间】:2013-07-08 10:50:21
【问题描述】:

有没有办法使用 c# 以编程方式将数据加载到我的本地 HDFS 集群中?

我找到了有关使用 SDK 使用 C# 代码将数据加载到 Azure 的教程,但它需要 Blob 存储并且不适用于本地集群。有什么解决方法吗?

我知道可以使用 Javascript 控制台或通过 Hadoop 命令行加载数据,但我特别希望通过代码实现这一点。

我浏览了一些论坛,发现 Hive 连接现在需要您拥有一个 azure 存储帐户,无论您是否使用 HDInsight Azure 服务。将数据加载到 HDFS 也是这种情况吗?

任何指针都会有所帮助。

谢谢!

【问题讨论】:

    标签: c# hadoop hdfs azure-hdinsight


    【解决方案1】:

    是的,这是可能的。随 HDInsight 一起提供了一个 C 库,用于 HDFS 文件系统操作。有关详细信息,请参阅此 link,有关工作示例,请参阅此 post

    希望这会有所帮助。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2019-05-30
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多