Impala运维规范

Impala运维规范

目录

​​Impala运维规范 1​​

​​1.账号使用规范 2​​

​​2.连接规范 2​​

​​3.巡检规范 2​​

​​3.1内存使用 2​​

​​3.2cpu使用率 3​​

​​3.3磁盘io负载 3​​

​​3.4网络io负载 4​​

​​4监控范围 4​​

​​4.1各 Impala Daemons 中的总 Total Used Memory 4​​

​​4.2各 Impala Daemons 中的总 Resident Set Size 5​​

​​4.3活动的前端 API 连接 6​​

​​4.4各 Impala Daemons 中的总任务 7​​

​​5.impala资源池使用规范 7​​

1.账号使用规范

禁止其他用户使用任务调度用户登录生产测试每个用户要具体划分到当前项目，或者对应人禁止用户登录当前非指定的其他账号生产排查问题需要运维指定特定用户

2.连接规范

Impala推荐使用配置代理连接impalad集群，连接方式有impala-shell，jdbc或者odbc连接。

3.巡检规范

周检：运维巡检指标可以分为每周一次小范围的周检，作为当前集群健康状况检查，以及排查集群隐患。月检：每月一次周检作为集群是否要进一步扩容。查看webui：​​class="data-table" data-id="tea9ccc6-C2In3aMZ" data-width="" style="outline: none; border-collapse: collapse; width: 100%;">

序号

指标

1

Total Used Memory

2

Resident Set Size

3

活动的前端 API 连接

4

中的总任务

注意：详细见下图

4.1各 Impala Daemons 中的总 Total Used Memory

注意：该参数反应当前任务占用内存情况

4.2各 Impala Daemons 中的总 Resident Set Size

注意：该参数反映当前预留内存使用情况

4.3活动的前端 API 连接

注意：反映当前连接情况

4.4各 Impala Daemons 中的总任务

5.impala资源池使用规范

1常规用户查询使用root.default，并且限制自主分析用户所有sql任务预估总内存不超过120G，而且同时运行sql任务数量不超过40个。

2其他用户查询暂不限制。

版权声明：本文内容由网络用户投稿，版权归原作者所有，本站不拥有其著作权，亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容，请联系我们jiasou666@gmail.com 处理，核实后本网站将在24小时内删除侵权内容。