当前位置: 首页 > 网络应用技术

“蜂巢性能调整实际战斗”摘录

时间:2023-03-07 19:17:24 网络应用技术

  优化情况

  避免过度优化

  代码优化原理

  HIVE计划相关规格

  基本上已经结束了

  MapReduce原理和参数配置

  地图的聚合和Hive配置Hive配置和工作输出MAPREDUCE操作和Hive配置

  仍需要在工作中仔细检查执行计划,以比较书籍并更改文章,以了解执行计划MR JOIN和Group by Code。

  过滤模式

  聚合

  常见的骨料

  可以计算中间结果的聚合模式,即无法计算中间结果的聚合模式

  连接模式

  ResourceManager Web UI工作经常使用

  兽人

  镶木

  数据存档

  10.1监视Hive数据库的状态

  10.2监视当前群集状态

  10.3定位性能瓶颈

  减少数据倾斜

  缓慢的洗牌

  10.3.6群集资源的限制10.4数据倾斜

  在蜂巢中,晶粒尺寸可以分为桌子,隔板,桶,柱和田地

  原始:https://juejin.cn/post/70966870941792286