专题演讲嘉宾 :龙玺

Airbnb 工程经理

现就职于 Airbnb,任中国基础架构(China Infrastructure)组工程经理。负责与 Airbnb 中国产品相关的基础架构和后端服务,并兼管中国区反欺诈(Anti-fraud)业务。此前历任美国亚马逊网站应用平台(Website Application Platform)部门软件工程师,Kindle 部门软件开发经理和 Airbnb 数据基础架构(Data Infrastructure)组软件工程师。主要负责大数据基础架构和机器学习基础架构,拥有多项国际专利。在加入亚马逊和 Airbnb 之前,分别于清华大学和美国哥伦比亚大学取得学士和博士学位。

演讲:AirTrain:Airbnb 的通用数据产品平台

时间:04月17日 14:55
地点:309A
所属专题:硅谷大数据技术专题

随着业务的快速增长,Airbnb 正经历着一场对数据使用模式的根本性转变。早期 Airbnb 对数据的使用主要集中在离线数据分析和使用上。 近几年来,越来越多的具有强烈数据依赖特征的在线应用开始逐步上线。这些应用所依赖的数据也逐步从离线批处理向实时的流数据转移。在这样的大背景下,Airbnb 数据基础架构(Data Infrastructure)团队自主开发了基于 Kafka,Spark 和 HBase 的通用数据提取(derivation),聚集(aggregation)和存储(storage)平台——AirTrain。本演讲将从机器学习应用和非机器学习应用两个不同的角度对 Airtrain 的架构进行系统介绍,并且着重讨论一些在开发过程中的需求和设计思路。

本专题下其他演讲

关注主办方(InfoQ)

InfoQ Qcon

交通指南