中金财富证券IOA客户端策略同步故障及修复

"中金财富证券有限公司的IOA客户端遇到了策略无法同步的问题，该问题涉及到零信任策略的更新和客户端的响应。问题主要是由于网络中断导致数据库主从切换不畅，进而影响到策略同步和网关功能。经过一系列的修复措施，问题已得到解决，并提出对类似问题的预防策略。" 在此次事件中，中金财富证券有限公司的0507IOA客户端遇到了策略无法同步的故障。具体表现为：1) 删除邮件服务mail.ciccwm.com后，客户端仍能访问；2) 在Web界面上取消用户zhenyuyan的“办公”组权限后，该用户仍可访问相关资源；3) 客户端手动更新策略显示成功，但时间信息不正确。这些问题对用户功能使用无直接影响，但新策略的下发受到影响，无法正常更新。 问题的根本原因在于网络中断，导致131.7服务器上的数据库主从切换失败，Nginx的转发设置未指向新的主节点，从而使得网关无法同步数据。网络中断发生在05月05日的13:48至14:58之间，期间数据库主从不一致，etcd与集群失去联系。 为修复此问题，采取了以下措施： 1) 由于数据库主从切换后，一台从节点未与集群保持一致，需要删除其数据并重新同步。 2) Elasticsearch (ES) 集群中有一个节点不在集群内，需要重新初始化。 3) Nginx的转发配置信息未更新为主节点的新地址，需要重启IOAgent和Nginx进程来修正。 4) 网关节点的pg_sync进程因上述原因未同步数据，需重启该进程。 IOA研发团队的李明通过远程操作已经完成了问题修复，现在策略可以顺利下发。为了防止类似问题再次发生，提出了以下预防措施： 1) 由于网络异常导致的ES和DB主从问题已修复，预期不会再次发生。 2) 对于Nginx转发配置未更新的问题，将进一步测试以确认是否为应用缺陷。如果是，将在后续版本中进行优化升级。 此次事件突显了网络稳定性、数据库冗余备份以及服务监控的重要性，对于金融机构来说，确保系统的稳定性和策略的及时更新是至关重要的，以保障业务的正常运行和客户数据的安全。