专家篇【网易杭州研究院大数据技术负责人金晓军:Hadoop in Netease】
China Hadoop Summit 2017 北京站超低价门票预售中!如您有意向参会、参与议题分享或商务合作,请拨打电话:4006-386-486。期待小伙伴的积极参与~
金晓军 网易杭州研究院大数据技术负责人
2010年毕业于天津大学软件工程专业。2010-2016就职于阿里巴巴搜索广告中心和阿里云,高级技术专家。主要负责galaxy流计算系统的设计与开发。2017年加入网易杭州研究研究院,担任大数据技术负责人,负责网易hadoop平台,及其它底层系统的设计,开发运维等工作。专注领域:流计算,分布式存储,分布式调度。
- Hadoop in Netease
网易公司历经了20年的发展,各业务线沉淀了丰富的数据。大数据平台在满足各业务线数据存储,计算的任务,同时承担着整合集团数据,为客户提供全方位的大数据服务。在满足业务需求的过程中,对hadoop各组件进行了定制优化(如分时调度,权限控制,元数据管理,spark多租户,spark高可用,流计算相关)。同时,围绕大数据底层技术平台也孵化出了猛犸大数据开发台,网易有数敏捷数据分析平台等产品。本次演讲主要分享网易如何利用Hadoop平台支持云音乐,考拉,金融,严选等业务,同时也会分享一下,结合网易的业务场景,在hadoop平台构建和使用过程中的优化和经验,最后会介绍一下,网易在hadoop平台持续投入的技术路线规划。
- 本文版权由CHINA HADOOP大数据资讯网与演讲者共同拥有,转载请保留原文来源链接及公众号信息,违者必究。
- China HADOOP Summit 2017 北京站将于3月24日25日在北京市召开,现向业界召集演讲。有兴趣的朋友请联系我们。