hive的优化、调优

hive的优化、调优

hive的优化、调优

 hive的优化、调优

hive的优化、调优

hive的优化、调优

hive的优化、调优

hive的优化、调优

hive的优化、调优

hive的优化、调优

hive的优化、调优

hive的优化、调优

总之:

1、使用本地模式(设置为local模式)

2、提高并行度(SQL语句)

3、查询的时候,用where+分区(加上分区限制)

4、排序的时候,使用sort+limit限制输出

5、避免使用笛卡尔积,用join  on(在where中加有效的链接条件)

6、大表小表联合的时候,将小表写在前

7、尽量在map端做预聚合

8、设置限制map和reduce的数量 

相关文章:

  • 2021-10-12
  • 2021-12-29
  • 2021-07-06
  • 2022-12-23
  • 2022-01-27
猜你喜欢
  • 2022-12-23
  • 2021-12-19
  • 2021-09-15
  • 2021-06-16
  • 2021-12-19
  • 2021-09-01
相关资源
相似解决方案