一、现象说明
线上服务、脚本、应用突然无法连接mysql,抛出上面这条报错。很多人第一反应直接执行flush-hosts解封,解封之后没过多久又复现。flush-hosts只是临时急救手段,不是根治方案,这也是这个坑最容易踩的地方。
简单一句话概括:mysql内部有一个主机缓存(host cache),会统计每个客户端ip的连接异常次数;当同一个ip连续多次握手/认证失败,超过max_connect_errors阈值,mysql就会把这个ip加入黑名单,拒绝后续所有连接请求,也就是我们看到的1129报错。
注意:这里统计的是连接中断、握手失败,不是sql执行报错。只要tcp握手到mysql服务端,但是完整连接流程没有正常完成,计数器就会累加;只要成功建立一次正常连接,这个ip的错误计数会清零。
二、为什么会出现这个报错?(根因分类)
1. 应用侧代码问题(生产环境最高发)
- 没有使用连接池,循环里疯狂新建连接,连接创建失败后不断重试,短时间刷爆错误计数
- 连接配置错误:账号、密码、端口、数据库名写错,代码异常捕获后无限重试
- 客户端驱动版本不兼容:mysql8.0认证插件caching_sha2_password,老驱动不支持,握手直接失败
- 程序崩溃、进程被杀,连接握手中途中断,被判定为连接错误
2. 网络层面问题(内网环境很常见)
- 网络抖动、丢包、防火墙/安全组会话超时,tcp连接中途断开
- dns解析异常:mysql开启反向dns解析,客户端ip反向解析超时、解析失败,会持续增加连接错误计数
- 中间代理、负载均衡、隧道不稳定,连接握手阶段被截断
3. 安全与扫描类
- 暴力 破解、自动化扫描脚本持续尝试密码,触发防护机制
- 内部监控、弱口令扫描工具误触发
4. mysql配置本身的特性
max_connect_errors默认值偏小(不同版本默认10/100),容错空间很低- 默认开启
skip-name-resolve=off,开启反向dns解析,很容易因为dns问题堆积错误计数
误区纠正:很多人以为max_connect_errors是密码错误次数限制,不完全准确。所有连接握手阶段的异常都会累加这个计数,不只是密码错误。
三、临时解封方案(紧急恢复业务)
三种等价方式,任选其一,需要有mysql管理员权限:
方式1:shell命令行(报错提示里的原生命令)
mysqladmin -u root -p flush-hosts
方式2:mysql客户端内执行sql
flush hosts;
方式3:mysql8.0推荐,清空host_cache表
truncate table performance_schema.host_cache;
适用场景:部分云rds、容器环境,flush hosts权限受限,可以用这条语句清空主机缓存,达到同样解封效果。
执行完之后,被封禁ip立刻恢复连接。但是!如果引发报错的根源没有修复,很快会再次被封。
四、排查根因:找到到底是谁在疯狂报错
解封只是救火,重点是定位源头:
步骤1:查看当前max_connect_errors值
show variables like 'max_connect_errors';
步骤2:查看mysql错误日志,定位失败类型
打开error.log,重点搜索关键词:
access denied:账号密码错误、权限不对aborted connection、got an error reading communication packets:网络/客户端握手异常caching_sha2_password:驱动认证插件不兼容
步骤3:查看host_cache详情(mysql8.0)
select * from performance_schema.host_cache;
重点看字段:count_host_blocked_errors、count_nameinfo_transient_errors,可以直观看到这个ip是什么类型的连接错误。
步骤4:核对应用日志
看应用抛出连接异常的堆栈,确认:
- 是不是循环重试、无限重试逻辑
- 驱动版本、连接串参数是否正确
- 是否缺少连接池配置(python、java、go项目高频踩坑)
五、根治方案(按优先级操作)
方案1:修复应用代码(最高优先级)
- 启用数据库连接池,复用连接,禁止循环短连接频繁创建销毁
- 连接失败时,增加退避重试(指数退避),禁止死循环无间隔重试
- 统一升级数据库驱动,适配mysql认证插件
- 配置文件统一管理连接参数,避免测试环境配置混入生产
方案2:关闭反向dns解析,从源头减少dns类连接错误
修改my.cnf / my.ini,加入:
[mysqld] skip-name-resolve = on
开启之后,mysql不再对客户端ip做反向域名解析,大幅减少dns超时带来的连接错误计数;
注意:开启后,mysql账号授权只能使用ip,不能使用域名/主机名,例如 grant all on db.* to user@ip;,不能写user@hostname。
方案3:合理调高max_connect_errors(容错,不建议无限放大)
[mysqld] max_connect_errors = 10000
在线动态修改(临时生效,重启失效):
set global max_connect_errors = 10000;
不建议直接设置成超大值比如99999999,会削弱mysql原生防暴力 破解的防护能力;内网稳定环境可以适度放大,公网mysql谨慎调高。
方案4:网络侧优化
- 稳定内网环境,排查交换机、防火墙、代理的连接超时策略
- 监控网络丢包、重传,避免握手包被截断
六、避坑清单
- 不要把
flush-hosts写到定时任务里循环执行,这是掩耳盗铃,攻击/异常连接会持续打数据库 skip-name-resolve开启后,原有域名授权的账号会无法登录,修改前核对账号授权- 区分两个参数:
max_connect_errors(连接错误计数封禁ip)和max_connections(最大并发连接数),完全不是一回事 - 云数据库rds一般不允许直接修改my.cnf,需要在控制台参数组调整
max_connect_errors、skip-name-resolve
七、总结
1129这个报错本质是mysql内置的一个轻量防护机制:连接握手异常计数超限 → 拉黑ip。
运维应急:flush-hosts快速恢复业务;
开发根治:优先修复应用连接逻辑、使用连接池、处理异常重试;
长期优化:内网环境开启skip-name-resolve,根据业务合理调整max_connect_errors阈值,同时监控error.log及时发现异常扫描和程序bug。
到此这篇关于mysql报错:host is blocked because of many connection errors的完整排查指南的文章就介绍到这了,更多相关mysql报错1129解决内容请搜索代码网以前的文章或继续浏览下面的相关文章希望大家以后多多支持代码网!
发表评论