Apache Spark大数据计算性能调优之部署最佳实践.pdf

下载文档 降价啦

88
0
约1.79万字
约 30页
2018-03-10 发布于重庆
举报
版权申诉
保障服务

Apache Spark大数据计算性能调优之部署最佳实践.pdf

1、本文档共30页，可阅读全部内容。
2、有哪些信誉好的足球投注网站（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。
3、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击这里二次下载。
4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。

Apache Spark大数据计算性能调优之部署最佳实践

Apache Spark大数据计算性能分析与优化程浩 (hao.cheng@) 内容概要 • 关于我自己 • Spark概要简介 • Spark SQL基准测试 • 性能比较分析和启发 • 进行中的优化工作预告关于我自己程浩，任职于Intel亚太研发中心，大数据技术团队，Spark研发经理，Spark （活跃）开发者 Spark概要简介 • 关于我自己 • Spark概要简介 • Spark SQL基准测试 • 性能比较分析和启发 • 进行中的优化工作预告 4 Spark软件栈用户Spark App Job Server Visualization … SQL / DF / ML / Structured Streaming Mllib Spark GraphX (Machine Streaming (graphs) Catalyst Learning) Core RDD API Bare Metal Google Cloud (YARN / CONTAINER / Kubernates … AWS Platform STANDALONE) Parquet ORC CSV Hive Tables HBase Cassandra Redis … 5 Spark生态圈组件使用比例 /blog/2016/09/27/spark-survey-2016-released.html 6 Spark SQL性能基准测试 • 关于我自己 • Spark概要简介 • Spark SQL基准测试 • 性能比较分析和启发 • 进行中的优化工作预告 7 性能优化一般步骤基准瓶颈优化验证测试分析方案方案