134512

本文写于 2023 年 9 月 23 日,原发布时间为 10 月 24 日。文中连接信息已脱敏。

这份文档之所以要起134512这个名字,是因为 2023 年 9 月 22 日 13:45:12,软工集市发生一起重大事故。我知道后立刻进行排查,通过检查后端和数据库的日志,在MySQL 的 general log中发现了在13:45:12出现了怪异的删除语句,就是把帖子全部删除的语句,对应同一时刻,后端的日志中发现连续出现了多条删除帖子的请求。数据库日志 后端日志 一开始我们还以为数据库被攻击了,但是通过对比上面两个日志,最有可能是正常操作导致触发代码本身的问题。然后检查了一下对应代码: image-20230923095437627 实际上看到这段代码基本上确定就是代码本身出现了问题。代码很短,也很粗糙,缺少必要的判断。后来有同学模拟了一下用这个函数去删除本身就不存在的帖子,确定了确实会导致全部的帖子被删。至于这个代码是谁编写的也没必要去追责了,因为软工集市可以说是我们小组出于热情和为软工服务的贡献精神搞的,而且大家也是摸着石头过河,很难在一开始就考虑得很清楚。当天我在 A321 跟旁边的研究生说了发生的事故,然后有一个师兄问我什么时候能修复。我说我也不确定,如果师兄能加入我们肯定能更快修复。然后一个师姐问我们有工资吗,我也如实回答,我们没有工资,做这个是出于纯粹的热情。当然,做这个还是有一点好处的,就是可以拿到志愿时。 回到正题,我们现在有两个任务:一是恢复数据,二是修复漏洞。 image-20230922210709826

恢复数据

使用binlog日志恢复MySQL数据库删除数据的方法 - 知乎 (zhihu.com) [mysqlbinlog 恢复指定表_mob649e816347dd的技术博客_51CTO博客](https://blog.51cto.com/u_16175495/7202342#:~:text=如何使用mysqlbinlog恢复指定表? 1 找到删除表数据的时间点或者binlog文件位置。 可以通过以下两种方式来确定: 如果知道删除表数据的时间点,可以通过查看binlog文件的内容来找到对应的位置。 可以使用 mysqlbinlog 命令来查看binlog文件的内容:,表的操作记录: mysqlbinlog –start-position%3D12345 –database%3Dmydb –table%3Dmytable %2Fpath%2Fto%2Fbinlog.000001 1. ) image-20230923101353672 image-20230923101657590 image-20230923101722660 image-20230923102328507 可以定位到进行帖子删除是在binlog.000003的Pos217032开始的,不过还不能确定就是它。 image-20230923104420643 恢复命令(示例):

1
2
3
4
5
6
7
8
9
10
11
12
13
# 1. 先按时间窗导出 binlog,确认要恢复的区间
mysqlbinlog --start-datetime='2023-09-22 13:40:00' \
--stop-datetime='2023-09-22 13:50:00' \
binlog.000003 --database=ssemarket --table=posts > posts.sql

# 2. 用 binlog2sql 解析成回滚 SQL;连接信息通过本地配置或环境变量传入
python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -u<user> -p<password> \
-d ssemarket -t posts --start-file='binlog.000003' \
--start-datetime='2023-09-22 13:45:00' \
--stop-datetime='2023-09-22 13:46:00' -B > rollback.sql

# 3. 核对回滚 SQL 后执行;执行前先备份当前库
mysql -u<user> -p<password> ssemarket < rollback.sql

发现自带的 shell 里没有 mysqlbinlog,决定拷贝到 Windows,曲线救数据库! image-20230923115758748 发现binlog的时间非常怪异,居然和 general log 的时间对应不上。好吧,并不是,是我神志不清了。