林仕鼎：百度移动云架构设计思考与关键技术

百度移动云首席架构师林仕鼎在CSDN-TUP举办的“大数据系列研讨会之‘从12306谈起’”演讲中，分享了他在架构设计方面的深入思考。林仕鼎作为百度移动•云事业部的关键人物，他的工作涉及海量数据存储与处理、高性能计算以及通用在线业务架构等多个关键领域，这些技术为百度的核心业务如搜索、广告和社区提供了强大支持。 演讲中，他首先从存储模型出发，讨论了不同的数据结构，如File、Object和Table，以及它们各自的访问模式，包括实时读写、批量写和实时读、流式读以及Scan/RangeQuery。他还强调了数据的特性，如数据的可变性、大小和数据布局，并区分了“实时性”、新鲜度和一致性三个概念。在存储设计上，他提到了B+树模型（适用于实时和随机访问）、Log-based结构（适合批量和顺序操作），并提出通过弱化需求、发掘局部性和组合模型来解决存储模型中的矛盾。 接着，林仕鼎聚焦于分布式系统的设计，阐述了其目标，即扩展性和容错性。他介绍了分区(Partition)和复制(Replication)这两种常见的方法，指出静态哈希分配的局限在于无法动态调整，而一致性哈希虽然可以灵活地应对数据分布变化，但可能会导致某些节点负载不均衡。他还提到在分布式系统的挑战中，如何设计高效的数据迁移协议以及进行有效的调试。 在处理分布式问题时，林仕鼎强调了分区的静态和动态映射策略，如拆分和合并操作，以及如何通过复制来保证数据的可用性。他还简要提及了读写操作的并发控制，如读写切换、合并和过滤，以及如何根据数据访问模式选择合适的存储模型（顺序性能好且容量大的S，还是随机性能好但容量小的R）。 林仕鼎的演讲深入浅出地探讨了在实际云计算环境中，如何通过细致的架构设计，平衡数据存储、访问效率、可扩展性和可靠性，为复杂的大数据应用提供坚实的基础设施支撑。这场演讲不仅展示了林仕鼎的专业素养，也为IT从业者提供了宝贵的经验和思考角度。