中午收到反馈平台所有账号全部无法登录,运维就是苦逼,饭都没吃就跑来处理紧急故障,先自己测试了下确实无法登录进系统,登录服务器检查,发现mysql数据库挂掉了,定位到了原因就赶紧重启mysql吧,结果启动失败,
一直报端口地址被占用,ps aux netstat查看都没有mysql进程,使用lsof -i :3306终于看到了还存在一个连接,kill掉pid,然后再启动成功
处理好后一看手机微信里早有告警,哎,犯了个运维大错,手机应该时刻保持在手可以收到通信,在处理问题时应该先看下自己的告警信息,痛定思痛
本以为到这里没事了,后面运营说数据量不对,先是配合开发查找了半天,后面定位到应该是那个表无法定入的问题,查看数据库error.log,果然有报错
2017-05-04 14:38:10 42012 [ERROR] Got error 127 when reading table './apixxxxxx'

CHECK TABLE xxxx;    检查表
  REPAIR TABLE xxxx;   修复表

再次检测下,ok,修复完毕

写这篇博客就是需要反思记录下,遇到问题千万不能紧张慌乱,日常一定要做好监控,并保持通信,首先查看监控可以确保第一时间找到问题,免得了东找西看浪费宝贵的恢复时间

最新文章

  1. appStore上传苹果应用程序软件发布流程
  2. 添加 All Exceptions 断点后, 每次运行都会在 main.m 中断的一种解决方法
  3. springmvc接收JSON类型的数据
  4. poj3041 二分图最小顶点覆盖
  5. 不容易系列之二[HDU2042]
  6. Java知识点:琐碎知识点(3)
  7. Lamda和Linq语法对比详细
  8. 杭电oj1326 Box of Bricks
  9. python--内建函数(1)
  10. IntelliJ Idea中一个编译报错引发的
  11. exjs上传图片异常:com.jspsmart.upload.SmartUploadException: File can't be saved (1120).
  12. Nginx调用远程php-fpm
  13. Linux常用命令速查-用户管理
  14. js 回调函数理解
  15. Linux 使用 github 常用命令
  16. 在vscode中,自定义代码片段,例vue组件的模板
  17. BZOJ 1011--[HNOI2008]遥远的行星(乱搞)
  18. ASPX代码加固小结
  19. HDU1518 Square(DFS) 2016-07-24 15:08 49人阅读 评论(0) 收藏
  20. maven 远程仓库、私服及镜像配置

热门文章

  1. LeetCode第14题:最长公共前缀
  2. [转载]Java程序员掌握的10大项知识体系--精通太难说出口
  3. 【Android-stdio-appdemo搭建记录】
  4. JSONCPP介绍
  5. Hadoop eclipse plugin
  6. 求组合数 C(n,m)
  7. Java Script 第二章.
  8. Git Reference
  9. ResourceBundle 读取properties文件中文乱码
  10. jQuery Plugin Poshy Tip 使用 统一提示信息