运维机构工作总结(山西省分行运维工作经验总结)
运维机构工作总结(山西省分行运维工作经验总结)
2024-11-21 11:27:06  作者:限量的快乐  网址:https://m.xinb2b.cn/life/kkz387249.html

系统故障,对于 DBA或是运维人员来说,都是心中永远的痛。而避免故障的原则却是有章可循,现列如下,与各兄弟行共勉:

1、变更操作需先在同样的环境测试过,并要可回滚

我行科技条线员工时常调侃:佛说:每次创伤、都是一次成熟,这便是运维人员的真实写照。变更出现不明原因故障后,就心里哼唱:“如果时光可以倒流......”虽说从某种意义上讲、运维是一门经验的学科、是一门试错的学科。对于那些陌生而没有做过的东西、总是会给你不期而遇的痛击,所以在此提醒大家请务必保护现场,让变更有回头的机会。


2、对破坏性的操作谨慎小心、慎之又慎

何谓破坏性的操作?比如:对 Oracle 而言:truncate table_name、delete table_name、drop table_name,这些语句执行起来轻松简单也惬意极了、但记住!即便数据可被回滚、代价也是非常大!

对 Linux 而言:rm -r 所有当前及其子目录的所有数据都将被删除。经历过这种故障的人、大多会给 rm 上个别名。

alias rm='rm -i'

同理,cp 和 mv 也可以有同样的选项:

alias cp='cp -i'

alias mv='mv -i'


3、设置好命令提示

在所有操作之前、请务必理清你所在的是主库、备库?当前目录?哪个 schema?session?时间?这些看似简单的东西,但却是最最重要的步骤,细节决定成败。

比如:对 Oracle 来讲:

[plain] view plaincopy

idle> set sqlprompt 'RAC-node1-primary@10g>>'

RAC-node1-primary@10g>>

当然、你也可以在 glogin.sql 里面设置。

对于 Linux 而言、bash 环境的提醒可设置 PS1 来知道当前目录、登陆用户名和主机信息等;

对 PS1 更多理解、请见:man PS1

4、定期备份并验证备份的有效性

人非圣贤、岂能无过?机器总有计划内或计划外崩溃的一天。怎么办?备份!!!相信大家备份肯定会做,但是备份的作用是在紧急情况下的及时恢复,所以备份的有效性就显得尤为重要。

备份的学问很大、按照不同的维度可以分:冷备和热备;实时和非实时;物理和逻辑。OLTP 7*24 在线业务、DB 就需要有实时热备。这样就可以了吗?

如果开发人员的一个不带任何条件的 delete 误删所有数据,此时你除了实时、还需要有非实时的备份、把 DB 从逻辑错误中恢复出来。

总有那么几次、备份无法保证 100% 恢复,简单的验证方法就是找个空库恢复出来。运维工作不仅要求我们有备份的能力,还要有遇到故障,让备份在短时间内继续恢复的能力。


5、对生产环境永保敬畏之心

会计人员在从业之前、都有个职业操守的训练。同理、我们认为这也应该是运维人员进入行业首先需要具备的素养。举例:

于 Oracle而言、你可以跑一个 RDA巡检 DB的健康状况;

于 Linux 而言、是否有 password aging、隔离外网等。

6、交接和休假最容易出故障、变更请谨慎

接手别人的工作要一而再、再而三的确认变更方案。请教人并不见得就是能力不行的表现;

休假前最好各种可以做好的事情,最好能够准备一份文档,指明在什么情况下怎么做和联系哪些人;

在别人放假的时候接手工作,“能拖则拖”,实在需要执行:必须不厌其烦的跟原运维者确认各个操作细节。

7、搭建报警、及时获取出错信息;搭建性能监控、预测趋势

运维人员赖于生存的工具就是报警和监控。

报警可以让你及时知道系统出现了什么异常、以便及时跟进、把故障扼杀于摇篮;

监控可以让你了解系统的历史性能信息、以历为鉴、可以知兴替嘛、早做优化。

报警和优化是衣宽带水的好兄弟、相铺相成、互相促进。

8、自动切换需谨慎

比如:Oracle 存储级的HA方案:Data Guard,主库提交了一笔订单,结果发生了 switchover,这笔订单没有同步到备库,那么商户损失了一个销售单、对客户、对公司都是损失。

9、变更操作不是一个简单的动作,一定要全流程考虑

做一个变更的时候,可以提前一两周发送邮件并电话手机通知相关涉及变更配合操作人员;并在测试机上写好脚本,召集大家 review 操作步骤和脚本;测试完成以后拷贝到生产环境;录对应机器,“打开,关闭,打开,关闭”该脚本;跟相关人员再次确认执行的操作、顺序、时间点,可能的影响和回滚是否都准备好了;

行前还要退出这个机器,然后再登录进去,“打开,关闭”脚本;

后才在后台运行脚本,同时在另外一个窗口登录着,随时ps和查看结果输出。

10、面对新系统架构、新脚本等新兴事物,请谨记简单即是美

这虽说这有点禅的意境、但和 GNU/Linux 的思想不谋而合。

实际生产运维过程中,我们总面临各种诱惑:新的系统架构,新的更智能的命令和工具,最新的硬件平台,功能更全的HA软件,与之对应是高效、快捷,听起来非常诱人,你可以在线下安装,测试,怎么做都行。但是如果想要在生产环境下使用起来、请三思!!

能够使用系统内置命令的话,就不用考虑其他要专门下载安装的软件了,因为使用内置命令不仅安全、而且可以规避后期防病毒、漏扫等工作纷至沓来。

脚本本身就能完成的功能,就没有必要专门找一个功能丰富的软件来做Linux本身自带的字符界面比那些复杂的图形界面要简洁方便


运维工作是一项任重而道远的工作,接起运维意味着深深地重担压在肩头,只有我们时刻保持警惕之心,长悬达摩克利斯之剑,才能保证少出故障。

供稿|山西省分行信息科技部

  • 酸豆角简单做法(制作酸豆角的步骤)
  • 2024-11-22制作酸豆角的步骤首先要一个泡菜坛子或者是能密封的玻璃器皿,洗干净保证无油干燥新鲜的豆角撕去老筋洗干净,晾干表面的水分准备一个大的干净的盆,把晾好的豆角放进去,然后放盐(如果能买到腌制专用的盐就更好了),照着500g豇。
  • 7速和21速区别哪个实用(关于速7我说几句)
  • 2024-11-22关于速7我说几句关于《速度与激情7》的评论太多了,有正面力挺的,有负面吐槽的我看了此片的感觉,就是单从影片中撞了240多辆汽车来看,感觉对于票价而言,值了太多专业影评人都要磨刀霍霍地对此片“大干一场”时,我作为非专业。
  • 国服马可一打五的(国一马可跟刺痛SOLO)
  • 2024-11-22国一马可跟刺痛SOLO马可波罗这个英雄,绝对算是KPL的常青树,无论版本如何变更,马可波罗都是KPL的热门英雄在射手里面,马可的机制非常独特,完全不怕刺客和肉坦,所以自保能力很强提到KPL的国服马可,很多玩家都会想到刺痛,。
  • 皓镧传第十四集内容介绍(皓镧传什么时候更新播出时间)
  • 2024-11-22皓镧传什么时候更新播出时间[海峡网]电视剧《皓镧传》在爱奇艺视频独家播出,于2019年1月19日开始周二至周六每晚20点更新两集,会员提前看8集,所以《皓镧传》在爱奇艺视频可以进行观看皓镧传剧情介绍《皓镧传》播出之前就已经公开。
  • 目前最新的草莓品种(你需要的草莓品种都在这里)
  • 2024-11-22你需要的草莓品种都在这里我国草莓栽培面积10余万公顷,年产草莓200余万吨,栽培面积和产量均居世界第1位,其中85%为设施栽培主栽品种以欧美和日本的早熟品种为主,欧美品种如卡姆罗莎、甜查理,日本品种丰香、枥乙女、章姬、红颜我。
  • 神兵兽天晶(神兵玄奇虎魄不及天晶)
  • 2024-11-22神兵玄奇虎魄不及天晶“虎魄重光,天地称皇,谁可匹敌,唯独天晶”,这是港漫《神兵玄奇》前期流传最广的一句话,意思是神兵虎魄一旦出世,便会称霸世间,凌驾于所有神兵之上,而唯一能抗衡虎魄的神兵就是天晶,这句话一语双关,既突出了。
  • 肺ct报告单内容简单是好还是不好(手里拿着肺CT报告却看不懂)
  • 2024-11-22手里拿着肺CT报告却看不懂你是不是有遇到过这种问题?去医院做了肺部CT检查以后,看着手里的检查报告,一脸茫然,只知道检查出来有问题,但是又不知道到底是啥情况,因为就诊患者比较多,很多医生也不会详细的做解释,这就造成很多朋友自己。
  • 怎么分辨猫骨 白菜价买大猫骨
  • 2024-11-22怎么分辨猫骨 白菜价买大猫骨最近有位玩友发来一条串,问麦尚:这是真的吗?“这是啥?”第一眼真没认出来,还以为是便利店里卖的那种彩色玉米……麦尚诚心实意问了几句,玩友这才神神秘秘的告诉我,卖给他这串的商家,告诉他说,他手里这串,是。
  • 解说米勒为什么给小虎道歉(准备好被骂的心态)
  • 2024-11-22准备好被骂的心态凭着《Hell'sKitchen地狱厨房》实境节目打开知名度的英国主厨GordonRamsay,相信大家都对他萤幕前火爆的脾气、毒舌的评语印象深刻,也让外界赋予他「地狱厨神」的称号不少观众粉丝也会看完。
  • 邱岳峰有几个子女(你知道邱岳峰是做什么的吗)
  • 2024-11-22你知道邱岳峰是做什么的吗以前我们在看进口的外国影片的时候,让我们记忆最为深刻的是上海电影译制片厂那些著名的配音演员我们比较熟知的:毕克、尚华、邱岳峰、苏秀、杨文元、富润生、戴学庐、李梓、于鼎、胡庆汉……当然,长春电影译制片厂。
  • 祛湿汤用什么材料煲汤好祛湿(春季祛湿喝什么汤好)
  • 2024-11-22春季祛湿喝什么汤好导语:春风吹来,忽冷忽热,在这样的多风的日子里,饮食应以化气去湿温补为主,春季喝什么汤最养生呢?春季祛湿喝什么汤好呢?春季祛湿煲汤大全春天养生汤荷叶薏米煲瘦肉汤回南天再次“杀回”,潮湿困闷的天气让人心。