大数据服务器扩容流程

网友投稿 337 2022-11-25

大数据服务器扩容流程

一:优先级:流程申请

1.服务器下来后,申请其服务器权限2.编写服务器扩容方案(平台方),方案要在生产环境升级前进行评审。3.服务器相关白名单申请(kafka,mysql,redis,RDS等)需要ping通并在确认是否申请白名单4.项目经理提交预生产流程,结束后5.项目经理提交生产流程6.流程到大数据运维手里,进行操作

二:初始化

服务器权限下来后进行初始化1./etc/hosts配置检查,检查所有机器hosts是否添加(所有离线数仓和数据沙箱服务器)2..sshd服务root下启动3.所有机器跟scm服务器做免密操作,ssh确认是否能连4.ansible在tools节点上安装,并配置ansible-hosts,自动化同步工具,要进行测试。5.jdk1.8安装并配置相应的环境变量,测试6.yum源配置cm6.3

三:服务裁剪

请按集群安装手册操作1.禁用 Linux的TUNED服务2.禁用THP3.关闭系统防火墙4.rng-tools工具安装并配置

四:角色安装与分配

1.在钉钉相关群里发布运维公告2.按集群扩容文档进行角色安装与分配3.haproxy修改impala和hive角色配置文件4.修改相关组件配置5.滚动式(单台单服务)重启安装的服务与角色

6.ldap用户打通,新增机器都要添加ldap用户和用户组

7.做相关日志的软连接

8.做好hdfs自动平衡

五:扩容结束

1.测试相关服务是否可用2.查看相关日志是否有报错3.业务方核实服务是否可用4.钉钉相关群里汇报集群扩容结束

六:wiki登记

1.登记并修改服务器地址和相关角色2.登记并修改集群配置3.登记集群运维事件记录

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:Spring Security登陆流程讲解
下一篇:kudu规范使用
相关文章

 发表评论

暂时没有评论,来抢沙发吧~