Offerslook从传统架构到大数据架构的实践之路
分享简介
Offerslook的业务架构经过多次演变,在业务的发展过程中请求量从百万级迅速发展到十亿级。在技术爆炸日新月异的时代,业务不断增长的过程中我们面临了很多挑战。这次主要围绕用户数量、请求量翻增所带来的技术问题、架构迭代和技术优化成本等来分享offerslook的技术发展经历。
分享提纲
1.高并发http动态请求的及时响应 2.实时计算与离线计算的选型 3.颠覆性的海量数据归因查询
4.优化与技术选型带来的效益
分享收益
目标:
了解offerslook技术架构迭代历程,技术选型至此的原因和相应的考虑。
成功点:
高并发、海量数据情况下,围绕数据湖的思想构建基础服务,铺路AI/BI业务场景的应用。
启示:
了解基于HDFS/S3等文件系统构建海量唯一ID归因查询系统的设计方法
了解优化带来的效益和对应的思考。
