【问题标题】:does the back-end storage support HDFS when using The Apache Ignite?使用 The Apache Ignite 时后端存储是否支持 HDFS?
【发布时间】:2021-04-07 14:18:06
【问题描述】:

在 Overview 站点 (https://ignite.apache.org/docs/latest/extensions-and-integrations/ignite-for-spark/overview) 上,当您使用 Apache Ignite 时,后端存储是 HDFS。 我在这个链接上看不到如何使用 HDFS ---> https://ignite.apache.org/docs/latest/persistence/external-storage

【问题讨论】:

  • 我在这两个页面上都没有看到任何与 HDFS 相关的内容。
  • 看图。这张图片说明了 HDFS 什么?在概览网站上 (ignite.apache.org/docs/latest/extensions-and-integrations/…)
  • 我猜想 Ignite 前段时间可能与 HDFS 有关,但我不记得曾经有可能将本机持久性文件存储在 HDFS 中。

标签: ignite


【解决方案1】:

Ignite 没有为其 HDFS 的 CacheStore 接口提供开箱即用的实现。你可以自己实现,也可以通过其他方式保持 Ignite 和 HDFS 同步:https://www.gridgain.com/docs/latest/integrations/datalake-accelerator/getting-started

【讨论】:

  • GridGain Data Lake Accelerator是GridGain的企业版,也就是说Apache Ignite或者GCE实现了Persistence,要么使用Native Persistence,要么使用CacheStore接口自己做,对吧?
  • 没错,但作为磁盘层的 Ignite Persistence 比任何基于 CacheStore 的集成具有更多优势:ignite.apache.org/arch/native-persistence.html
猜你喜欢
  • 2018-07-04
  • 1970-01-01
  • 2023-02-06
  • 2023-03-19
  • 2018-03-18
  • 1970-01-01
  • 2019-11-02
  • 1970-01-01
  • 2021-08-12
相关资源
最近更新 更多