1、问题发现
??近期,生产上订单系统出现了一笔问题交易:
- 一笔订单调用支付系统进行支付,支付系统返回处理中
- 订单系统异步查询支付结果,被告知订单不存在导致订单失败。
- 最终支付系统支付成功,订单系统启动异常处理机制撤销该支付。
2、背景描述
??调用链为业务系统->订单系统下单->支付系统支付。 ??订单系统和支付系统都有幂等的要求,且幂等主键为上游请求系统、请求流水号、请求日期(截取自请求时间)。当查询时传入的请求三要素与下单/支付传入的请求三要素不同时则无法查询到订单。
3、问题追踪
- 经数据查询,发现订单系统数据库中记录的支付请求时间为2021/10/18 00:00:00 而支付系统数据库中记录的上游请求时间为2021/10/17 23:59:59。最终导致两个系统的请求日期不一致,订单系统无法查询到支付结果。
- 初步猜测在发起支付时下送的支付请求时间为业务系统请求时间,而插入表时新建了一个当前时间导致时间差;或者在插入表的时候重新取了数据库时间now();
- 经排查发现订单系统送给支付系统的时间与落库的支付请求时间为同一个字段。
- 猜测是mysql数据库搞的鬼。
- 查询资料得知mysql更新到5.6.4 之后 , 新增了factional seconds的特性 , 可以记录时间的毫秒值,超过500就会四舍五入,而系统中采用的mysql版本是5.7。
- 测试环境验证,问题复现。
4、问题解决
??在生成请求时间后对其进行格式化,去除毫秒级别数据,问题解决。
5、问题反思
??在查阅资料的时候看到一句话,作为反思:
|