24
Analytics Team 2014

数据分析组14 15

Embed Size (px)

Citation preview

Page 1: 数据分析组14 15

Analytics Team 2014

Page 2: 数据分析组14 15

团队和成员介绍• 数据分析团队隶属于 Leap.as云计算团队,负责数据分析,数据挖掘,智能推荐系统的开发和运维。• 团队现有主要成员:韦先敢,谭杨,蔡伟伟,卜赫

Page 3: 数据分析组14 15

韦先敢• 又名韦少• 85后• 负责离线数据分析架构设计,运维,具体业务实现, 1.x UserTask系统维护• 特长,各种运动,唱歌,架构设计

Page 4: 数据分析组14 15

谭杨• 90后• 负责实时数据分析框架设计和实现,具体业务实现• 特长,跳舞,新技术调研

Page 5: 数据分析组14 15

蔡伟伟• 85后• 目前负责离线数据分析重要模块方案设计,实现• 特长,新技术调研,架构设计

Page 6: 数据分析组14 15

卜赫• 85后• 负责需求分析,打杂,卖萌

Page 7: 数据分析组14 15

2014 回顾• 2014-01 Leap.as 数据分析团队成立,与此同时进行验证性开发,开发了 Snake的第一个原型版本,满足了交叉推广效果分析的需求实现。

Page 8: 数据分析组14 15

2014 回顾• 2014-03 团队开始对基础存储进行选型,确定开发基于 ElasticSearch的 Cassnadra二级索引项目 Casses,在进行了基准测试后正式使用。

Page 9: 数据分析组14 15

2014 回顾• 2014-04 团队完善并实现了 Snake的第一个发布版本,实现了基于 SQL语义的实时分析快速开发框架。

Page 10: 数据分析组14 15

2014 回顾• 2014-05 团队参考多个数据分析平台,结合自身的资源和优势,开始开发 App Analytics

2.0版本。确定基础架构和项目需求。

Page 11: 数据分析组14 15

2014 回顾• 2014-07 App Analytics 2.0版本上线,实现了竞品的 60%功能,完成了包括离线和实时计算部分的基础数据分析。

Page 12: 数据分析组14 15

2014 回顾• 2014-09 App Analytics 2.1版本上线,迁移到

Vert.x平台,并对项目结构进行了重构和拆分,实现了基于 Casses的类 SQL的聚合和分组引擎,增加 PageView,Event等高级功能。

Page 13: 数据分析组14 15

2014 回顾• 2014-10 App Analytics 2.2版本上线,对离线计算部分进行了优化,提高了计算的准确性和实效性,提供了对因机器故障或人为因素造成的数据错误和遗漏进行补采、补算的重要增强,支持对更大粒度 (周、月 )的数据分析。重构了 Snake的 Sever部分,发布了第一个带有 Snake UI的版本,极大的方便了实时分析的开发和运维。

Page 14: 数据分析组14 15

2014 回顾• 2014-11 App Analytics 2.2.1版本上线,重构

Snake项目的引擎( Core)部分,提高了计算性能。提供了事件漏斗, Ad分析, API用量分析等高级功能。

Page 15: 数据分析组14 15

2014 回顾• 2014-12 App Analytics 2.2.2版本开发,重构了 ETL部分,提供了 Event统计和限制功能。

Page 16: 数据分析组14 15

2014 回顾• 目前正在开发非常灵活、跨系统的 Segment定义和计算功能,监控系统的选型和搭建,持久化 View的开发和测试。

Page 17: 数据分析组14 15

2014 回顾• 我们经历过线上丢数据的灾难

Page 18: 数据分析组14 15

2014 回顾• 我们经历过人员调整的痛楚

Page 19: 数据分析组14 15

2014 回顾• 我们经历过定位线上问题时的紧张和忐忑

Page 20: 数据分析组14 15

2014 回顾• 我们经历过压力大、时间紧的上线挑战

Page 21: 数据分析组14 15

2014 回顾• 我们也一起在 TB中忘情豪饮,无所不谈

Page 22: 数据分析组14 15

2014 回顾• 我们更体味了和团队一起成长的温馨和喜悦

Page 23: 数据分析组14 15

2015

• 我们会进一步完善 App Analytics这个产品• 后续会陆续推出:• 针对游戏分析的 Game Analytics产品• 针对核心用户分析的 User Recommend产品,帮助用户了解用户,理解用户,创造价值。

Page 24: 数据分析组14 15

特别感谢(不分先后)• 郑济群• 马山虎• 周和生• 黄赐印• 秦鹏• 周岑• 徐洪福• 孙进