最近一个项目,关于大数据的改造项目,底层选择Impala还是sparkSQL呢?

最后选择Impala.这样就开启了我的Impala学习之旅。我大部分负责Imapa接口开发工作。

我是控制不住的想整个都了解和学习。所有还在impala控制台各种测试和学习。差不多一两天就熟悉了基本的命令。

开发之前需要做很多准备工作。首先得造一个500w的测试数据啊。

在impala中造数据肯定是不方便的,所有在oracle中造数据。写存储过程跑sql。在oracle中造好了数据,就要导入到IMPALA中。

这下用接触到Sqoop导入工具,学习真的是永远学习不玩啊。

。。。接下来就是折腾导数据过程。。。写接口。。。各种测试。。。

不想写了,下篇博客写些impala基本操作命令吧。主要是工作中常用的。有时间贴一个小demo出来。方便大家上手。

 

相关文章:

  • 2021-10-11
  • 2021-09-05
  • 2021-09-14
  • 2022-12-23
  • 2021-06-22
  • 2022-12-23
  • 2021-12-07
  • 2021-11-14
猜你喜欢
  • 2021-07-09
  • 2021-05-21
  • 2021-12-30
  • 2021-12-24
  • 2021-12-21
  • 2021-08-26
  • 2021-06-25
相关资源
相似解决方案