Alluxio在携程大数据平台中的实践
分享嘉宾郭建华，携程大数据平台研发工程师,2016年硕士毕业于上海大学后,一直在携程的大数据平台部门从事离线平台的维护与研发工作,对存储框架HDFS、Alluxio,计算框架Spark SQL和Hive有一定的了解。
本文的主要内容包括离线和实时在携程大数据中都占据重要地位，为了解决资源竞争带来的问题，携程将部分实时作业单独建立集群，同时带来了新的问题，跨集群读写数据。同时，部分作业需要准时实时的离线查询，这给当前的框架带来挑战。本次分享介绍了如何引入Alluxio来解决这些问题进行了探讨，并分享碰到的一些问题和踩过的坑。
时间:2018-10-31 13:20 来源: 转发量:次
声明：本站部分作品是由网友自主投稿和发布、编辑整理上传，对此类作品本站仅提供交流平台，转载的目的在于传递更多信息及用于网络分享，并不代表本站赞同其观点和对其真实性负责，不为其版权负责。如果您发现网站上有侵犯您的知识产权的作品，请与我们取得联系，我们会及时修改或删除。
相关文章：
相关推荐：
网友评论：
最新文章
热门文章
