交易风控：海量数据存储与离线处理在小微金融中的应用

在2018年的云栖大会·上海峰会上，阿里云存储服务专家吴华剑分享了题为《交易风控小微金融业务跨平台数据共享与处理数据的海量存储与多种离线计算处理》的主题报告。该报告聚焦于第三方支付业务中的关键问题，特别是如何处理数据的海量存储和高效离线计算。 首先，报告讨论了第三方支付业务中的风控场景，强调了Serverless计算引擎，如FunctionCompute的重要性。通过这种模式，可以实现计算引擎的互通，简化运维，并提高效率。FunctionCompute支持的异构数据处理能力有助于整合来自不同来源的日志（LOG+OSS）、交易记录和风险控制数据，确保数据的一致性和准确性。 风控存储与访问是报告的核心部分，提出了一种结合FunctionCompute和TableStore的解决方案。TableStore作为高并发、低延迟的NoSQL数据库，能够支持交易风控数据的高效存储和查询。同时，OSS（对象存储）作为阿里云的基础存储服务，提供了无限文件数目、EB级的存储容量以及11个9的高可靠性保障，包括同城3AZ容灾、跨区域复制和异地容灾等功能，使得数据存储和灾备管理更为强大。 报告还提到了阿里云的日志服务，如LogHub，它能无缝集成到OSS中，支持标准、低频和归档等多种类型的日志存储，具备生命周期管理、数据扩展和高可用性特性。日志采集分析是风控业务查询的重要组成部分，通过Select条件下推技术，进一步提升了查询性能。 此外，OSS凭借其易用性、海量存储能力、高可靠性、强安全性和低成本，成为了数据湖存储的理想选择。它不仅与阿里云的计算服务深度集成，如SparkSQL、Hadoop、Max Compute等，还支持Hive、Presto等大数据处理工具，实现了数据的高效处理和分析。整体上，这样的融合架构降低了TCO（总拥有成本），确保了数据处理的弹性扩展和按需付费，同时具备容灾能力和高级别的安全保护。 总结来说，这份报告详细探讨了如何利用阿里云的大数据和人工智能技术，通过跨平台数据共享、OSS和FunctionCompute等工具，实现第三方支付业务的交易风控数据的高效存储、处理和分析，为金融机构提供了一个可靠的风控解决方案。