- 1、本文档共33页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
Apache Spark
社区协作指南
连城
Spark Meetup Beijing, Aug 9, 2014
我遇到一个问题
我遇到一个问题
好的 :-)
请尽量
● 优先在user邮件列表上提问
○ 更多人关注,可以及时得到丰富翔实的答案
○ 更易于积累,供自己和他人日后检索
○ 篇幅不受限的富文本支持,可以清晰详尽地描述问题
○ 英语 ?不是问题 (惧怕英语才是问题)
请尽量不要
● 在微博、微信、微X上提问
○ 篇幅受限,足够制造问题,不够解决问题
○ 不利于积累和日后检索
请尽量
● 详细、完整地描述你的问题
○ 集群环境(操作系统、硬件配置、软件配置)
○ 数据规模、数据格式
○ 重现步骤
○ 此前的初步诊断过程和诊断结论
● Good cases
○ MLlib: Akka frame size
○ Spark SQL: IllegalAccessError on AWS
请不要
● 提“一句话问题”
○ “你好,跑一百万feature的LR,OOM了怎么办 ?”
○ “Hi,碰到一个异常,这是stacktrace……”
○ “跑一个普通规模的job ,为什么这么慢?”
○ “100节点的集群,计算结果不对,怎么回事?”
○ ……
对于难以复现的问题……
● 如大集群、大数据量下的scalability问题
○ 协助测试出现问题的边界条件
■ 数据量
■ 节点数
■ 内存使用量
■ 运行时间
■ ……
○ 感激不尽!
我发现 了一个bug
我发现 了一个bug
多谢 :-)
请
● 在JIRA上新建issue
● 尽量详细地描述bug的
○ 重现步骤
○ 症状(异常、stacktrace)
○ 可能的原因
○ 可能的解决方案
○ 可能相关的其他issue、PR
我打算提一个Pull Request
我打算提一个Pull Request
Cool!
我打算提一个Pull Request
Contributing to Spark
GitHub workflow
一个PR的前世今生
● JIRA issue
○ 用于描述问题本身
○ 帮助人们理解问题
○ 帮助大家讨论可能的解决方案
一个PR的前世今生
● JIRA issue
○ 用于描述问题本身
○ 帮助人们理解问题
○ 帮助大家讨论可能的解决方案
● Good
○ SPARK-2129
一个PR的前世今生
● JIRA issue
○ 用于描述问题本身
○ 帮助人们理解问题
○ 帮助大家讨论可能的解决方案
● Good
○ SPARK-2129
● Bad
○ “Title only issue”
一个PR的前世今生
● Commit log
○ 记录PR的演进历史
○ 有助于日后排查regression bug
○ 言之有物、言简意赅
一个PR的前世今生
● Commit log
○ 记录PR的演进历史
○ 有助于日后
您可能关注的文档
- 第8章企业与产业.pdf
- 第四部分:云计算业界动态1.pdf
- 2011-2012年度中国移动游戏产业报告.pdf
- 南水北调中线干线陶岔至黄河南工程保险知识讲解及交流.pdf
- 中国汽车产业整体情况概述.pdf
- 《打破坚冰的深度访谈》.pdf
- 大学生就业形象设计.pdf
- 何崚-天猫五化战略下的电商架构.pdf
- 财务管理 第七章 股利政策(东北财经大学).pdf
- 五金制品有限公司质量手册——公司架构图及质量管理体系模式.pdf
- 六年级语文下册课件《他们那时候多有趣啊》.pptx
- 六年级语文下册课件《表里的生物》.pptx
- 六年级语文下册课件《习作:写作品梗概》.pptx
- 六年级语文下册课件《交流平台 初试身手 习作例文》.pptx
- 第六课 掌握演绎推理方法 课件-高考政治一轮复习统编版选择性必修三逻辑与思维.pptx
- 六年级语文下册课件《藏戏》.pptx
- 6.4 现代生物技术 课件 2024-2025学年冀少版生物八年级下册.pptx
- 年终总结和工作规划写作金句50例.docx
- 对2023年山东等级考历史试卷19题若干问题的思考.pptx
- 第一课 走进思维世界课件-高考政治一轮复习统编版选择性必修三逻辑与思维.pptx
文档评论(0)