Databricks Spark 知识库

• 最佳实践
  • 避免使用 GroupByKey
  • 不要将大型 RDD 的所有元素拷贝到请求驱动者
• 常规故障处理
  • Job aborted due to stage failure: Task not serializable
  • 缺失依赖
  • 执行 start-all.sh 错误 - Connection refused
  • Spark 组件之间的网络连接问题
• 性能 & 优化
  • 一个 RDD 有多少个分区
  • 数据本地性
• Spark Streaming
  • ERROR OneForOneStrategy

Copyright

本文翻译自: http://databricks.gitbooks.io/databricks-spark-knowledge-base/ 著作权归原作者所有。

License

此内容使用的授权许可请查看这里。