第91章 故障不断
初步的原因就是服务组件崩溃了,一个异常的报文导致,程序没有兼容处理,容灾响应太慢,容灾也是部分成功,因为预留的服务器不多,没有能瞬时全部切换成功。
张明杰当然没有时间理这些,先让朱权在上面顶着吧,他现在首先还要忙着修改这个首页换交互图的问题,以及在组织分析潜在问题修复。
因为根据项目进展,梳理下来,还有更多的事情要去做,换了首页,其他的相关的交互风格也要修改,这样才能保证全网是一致,开发才能基于此版本向上迭代版本。
周五准备要上线了,销售那边又来一个需求,要支持海外的邮箱注册,德语,西班牙语支持,因为当时设计的都是在国内都是基于手机号注册的。
支持邮箱注册的功能在后面的版本才会有,因为现在在平台的客户说白了,都是中国人,只是有些海外的华人罢了。
最终只好选择这个几个需求,和上次的故障问题,一起迭代上线。
现在是焦头烂额,张明杰和项目组成员忙成一片,外部各种总监在盯着进度,和发布时间点,因为要提前准备广告投放,张明杰就忙着和他们每天开会。
他本来就不想去,无奈刘菁菁,每次都叫上他。张明杰很郁闷,咱们是搞研发的,至于销售怎么定销售策略,套餐包类型,销售价格。
我们不要去操那个心 ,还是安心的把软件版本的质量做好。
但是不知道为刘菁菁,那么热衷这个,每次开会都是两小时,张明杰只能在会议上神游,顺便休息下。
过了一周,当然也没有周末的概念了,都在公司加班,林美云来约张明杰去爬山,没有时间去成。
她就和测试部的项溪枫,江语梦她们去爬山了。
张明杰都开始羡慕秦园,测试部的妹子们还是很和谐啊,对这些项目啊,绩效评价啊,人家是看的挺开的,也难怪林美云和她们都能玩到一起去。
然后朋友圈到处是的各种鹭江旅游景点的美图,张明杰就随手给她点了各种的赞。
周一的时候,苏晨天打电话,过来特意交代,今天有个游戏公司在搞直播,资源一定要做好保障,张明杰就交代了邱亮,排个人在那里,把用户的资源信息全部拉出来,在大屏幕上投放着看。
张明杰正在厕所蹲坑的时候,又收到电话,用户登录不进去平台。
赶紧提了裤子就跑去运维监控室,以为游戏公司自身出了故障,后面发现没有故障,是后面的想进直播间的人,用户大概率的登录直播间进去。
后面查出是注册服务器满了,但是监控平台信息不准,没有报警内存满了,实际当然是内存泄漏了,因为单台支持的用户数还没有达到上限值。
恢复之后,又是一堆各种的解释,各种微信消息,办公通讯而来,索性直接跑去楼顶天台透透气了,心中大喊一声,苍天啊,饶过我吧,两周两个大故障,谁受的了。
发呆了五分钟,手机来电,运维邱亮打来的,没有接,然后接着再次响起铃声,说我们的直播官网打不开,访问不了。
赶紧又跑下去,心里纳闷,连这多少年都没有问题的官网,也能崩溃,让用户访问不了吗。
等到运维监控室的时候,问题已经查清楚了,是公司买的云服务厂商,那台服务器挂了,目前云服务厂商正在恢复,措手无措,因为我们自己也没有备份官网的机制,就一个页面,谁还搞多点部署啊。
接着又是一通电话,等云服务厂商恢复的时候,已经半小时之后了,他们也承诺了,出具故障报告,按合同要赔偿多少多少钱。
这些都是商务的事情,不是张明杰需要考虑的,他现在想的是怎么把服务搞稳定,还没有多少在线用户直播呢,就这样挂了?
人的运气有时候,就是这样,你不知道何时会遇到什么,总是充满着神秘,也许人活着畅想的理由吧。
接下来的几天,平台很安静,没有任何的故障,甚至用户数达到最大到十万了,还很稳定,一点故障也没有,张明杰慢慢放心,也就是那几个问题了,处理完就好了。
本周五晚上就不上线了,改成周六吧,因为连续奋战,大家都很累了,张明杰想项目组在周五都不加班,早早的回去放松一下,周六晚上来升级好了,所有的上线版本都准备好了
测试部秦园,跟他保证,这次修改的交互图上线肯定没有问题,但客户是否反响的好,就决定不了。
下午三点的时候,在微信上约了林美云,晚上去小鱿鱼餐厅,吃鱼。
毕竟吃了一周公司食堂和外卖,快把人吃晕掉了。
林美云说那她请客吧,难得有空出来吃个饭。
离下班还有三个小时,真的很煎熬,想到那个美味的鱼片,张明杰的口水都要流出来,打开电脑的wifi,开启手机的流量共享,上网看看微博,新闻吧。
因为公司对所有上网行为都是有监控的,这点还是难不倒张明杰的,一个wIFI连接器搞定的事。
五点半的时候,就看见项目组监控群里一个红色消息,线上直播中断!用户进不去观看了,张明杰只感觉头脑一阵眩晕,第一个念头是,完了,故障又来了。
第二个念头,得了,今晚吃盒饭吧。
这次找问题很慢,因为线上的监控图,线上用户还是有在缓慢增长的,但是售后和视频客服都在反馈有用户上不去。
我们自己掏出手机,去直播间观看,也都是正常的。
中国电信,移动线路问题?换了几个不同运营商的手机,也都正常,一片繁忙排查问题。
林美云微信发来消息,说你能准时下班过去吗?我现在去看看直播,好像进不去了,是我手机的问题吗?
明杰赶紧向楼上跑去,看到林美云就喊,把你手机给我,看看能否进的去直播间,一试果然进不去。
哇,林美云你挽救了革命,挽救了革命!
手机App上退出账号,再换成自己的账号,准备在试一次。
结果一看,我的个晕,这App怎么写的是直播服务的Ip地址,不是直播服务器的域名,难道是这台直播服务器有问题。
打电话给开发人员查这台服务器是否有异常,自己更换其他的直播服务器Ip都正常,这台不行,显然这台服务器有问题。