个人简介：淘宝技术专家，2010年加入淘宝，一直从事Hadoop相关的的数据开发和挖掘工作，见证和支持了基于云梯的数据开发平台的发展。现在是淘宝技术部，数据挖掘与计算团队的Leader，负责Spark计算平台和淘宝数据推荐产品和业务
演讲简介：随着数据挖掘业务的发展，基于传统的Hadoop下的MapReduce，速度和灵活度，已经不能满足日益复杂的挖掘算法的需求，面临多次迭代的机器学习算法，Mahout显得力不从心。如何让Hadoop这头大象插上翅膀，飞驰起来，将大数据的价值发挥到淋漓尽致？基于Yarn模式的Spark，可以两者兼顾。本议题将介绍淘宝在Spark On Yarn方面的研究，以及如何用MLBase机器学习库和图算法等子模块，打造一个高性能的挖掘平台。