168大数据

标题: Spark & Alluxio在网易严选架构演进中的实践和探索 [打印本页]

作者: 168主编 时间: 2019-8-20 14:57
标题: Spark & Alluxio在网易严选架构演进中的实践和探索
本文来自于 2019年7月27日网易严选 & Alluxio 联合举办的 Meetup。本文分享作者左琴，2013年硕士毕业于浙江大学控制系，先后在网易、阿里巴巴等公司，从事分布式存储系统的开发，性能优化，大数据基础设施建设等方面的工作。目前在网易严选带领数据工程团队，负责数据智能决策平台建设，Spark优化和计算存储分离等方面的工作。

本文分享网易严选使用 Apache livy 、K8S 等构建 Spark 服务相关的工作，以及严选在优化 Spark 计算引擎、存储格式等方面的优化探索，严选大数据架构的演进方面的工作。Alluxio 在网易严选大数据生态中同样扮演着重要的角色，Alluxio 的特性能有效的帮助网易严选解决在spark优化，计算存储分离，计算混合部署等架构演进中遇到的困难。

————————————————
版权声明：本文为CSDN博主「Hadoop技术博文」的原创文章，遵循CC 4.0 by-sa版权协议，转载请附上原文出处链接及本声明。
原文链接：https://blog.csdn.net/b6ecl1k7BS8O/article/details/99360168

欢迎光临 168大数据 (http://www.bi168.cn/)