张振,现就职于 Airbnb 中国基础构架组(China Infrastructure)高级软件工程师,负责 Airbnb 中国产品相关的基础构架和后端服务。此前分别是 Airbnb 数据基础构架(Data Infrastructure)组和领英(LinkedIn)分布式数据平台组的软件工程师,同时也是 Apache 顶级开源项目 Helix 的初创成员和 PMC 之一。在加入 LinkedIn 和 Airbnb 之前在加州大学尔湾分校获得博士学位。
大数据的价值已经得到广泛的关注和重视,在 Airbnb 平台上,用户的行为和行为相关的日志数据是产品决策和优化用户体验的重要基础。随着业务的快速增长,传统的基于批处理模式和无格式的日志处理已经逐渐不能满足应用需求。因此,Airbnb 数据基础构架组开发了新一代的日志数据存储和查询平台,着重于保证日志数据的质量,解决数据的实时性,提高查询的灵活性,方便多维度统计分析,和提供异常检测。演讲主要分享 Airbnb 核心日志平台的系统构架,以及主要系统模块的设计和实现。