架构师(2019年1月)
- 报告编号:158542
- 报告名称:架构师(2019年1月)
- 报告来源:互联网用户上传
- 关键词:重点报告
- 报告页数:67 页
- 预览页数:10
- 报告格式:pdf
- 上传时间:2024-09-08
- 简介摘要: (原创分析) 针对全球6大数据中心,日均10亿日志场景下的高可用实践,FreeWheel采用了一套以Kafka、Hadoop和HBase为核心的Lambda处理架构。随着数据量的增长和业务变化,该架构面临可扩展性、高可用性、开发和测试效率等挑战。为应对这些挑战,FreeWheel决定将数据处理平台和数据处理系统部署到AWS云环境,并权衡使用AWS原生服务与自行维护基础设施的利弊。在AWS上,FreeWheel仍采用Kafka MirrorMaker同步数据,并基于Kafka和HBase处理数据,同时利用Presto提供数据的实时或批量查询。FreeWheel在AWS上的实践关注基础设施、服务器、数据、应用程序和系统服务五个层面的高可用性设计,包括利用AWS的自动负载均衡和路由服务、ZooKeeper的Failover协调服务以及确保应用程序无状态,以实现快速恢复和高可用性。在应对全球数据中心的高可用需求时,FreeWheel通过优化基础设施、数据冗余、应用程序无状态化和服务容错机制,确保系统在面对故障时能够迅速恢复并提供服务。
本报告共 67 页, 提供前 10 页预览. 无水印的全部内容, 请购买后下载查看, 谢谢您!
点赞