美文网首页Spark
Spark—9、性能优化—美团的性能优化指南

Spark—9、性能优化—美团的性能优化指南

作者: 长青之木 | 来源:发表于2020-07-19 21:51 被阅读0次

美团的优化指南

1.开发调优&资源参数调优 2.数据倾斜调优

Spark性能优化指南——基础篇

主要讲解了基于RDD算子的优化方法:尽量避免shuffle算子,要使用高性能的算子等。

Spark性能优化指南——高级篇

主要讲解了shuffle和join两类导致数据倾斜的性能优化方法,文末介绍了spark shuffle 的流程。

相关文章

  • 美团关于大数据技术的文章

    Spark性能优化指南——基础篇Spark性能优化指南——高级篇Spark在美团的实践Kafka文件存储机制那些事...

  • Awesome Extra

    性能优化 性能优化模式 常见性能优化策略的总结 Spark 性能优化指南——基础篇 Spark 性能优化指南——高...

  • Spark—9、性能优化—美团的性能优化指南

    美团的优化指南 Spark性能优化指南——基础篇[https://tech.meituan.com/2016/04...

  • spark性能调优

    [Spark性能优化指南——基础篇][Spark性能优化指南——高级篇]

  • 目录

    Spark之参数介绍 Spark之性能优化2.1. 官方性能优化指南2.2. Spark性能优化指南——基础篇2....

  • Spark 性能优化方案

    Spark 性能优化方案(转自李智慧的Spark性能优化方案): Spark性能测试工具 •Spark性能测试基准...

  • Spark性能调优

    《Spark性能优化:开发调优篇》《Spark性能优化:资源调优篇》《Spark性能优化:数据倾斜调优》《Spar...

  • Spark性能优化:数据倾斜调优(转)

    《Spark性能优化:开发调优篇》《Spark性能优化:资源调优篇》《Spark性能优化:数据倾斜调优》《Spar...

  • Spark性能优化:开发调优篇(转)

    《Spark性能优化:开发调优篇》《Spark性能优化:资源调优篇》《Spark性能优化:数据倾斜调优》《Spar...

  • Spark性能优化:资源调优篇(转)

    《Spark性能优化:开发调优篇》《Spark性能优化:资源调优篇》《Spark性能优化:数据倾斜调优》《Spar...

网友评论

    本文标题:Spark—9、性能优化—美团的性能优化指南

    本文链接:https://www.haomeiwen.com/subject/xsurkktx.html