您好,欢迎来到[编程问答]网站首页   源码下载   电子书籍   软件下载   专题
当前位置:首页 >> 编程问答 >> 云计算 >> Spark在reduce算子中的疑问,这种情况算是Bug吗?

Spark在reduce算子中的疑问,这种情况算是Bug吗?

来源:网络整理     时间:2018/1/22 2:27:45     关键词:

关于网友提出的“ Spark在reduce算子中的疑问,这种情况算是Bug吗?”问题疑问,本网通过在网上对“ Spark在reduce算子中的疑问,这种情况算是Bug吗?”有关的相关答案进行了整理,供用户进行参考,详细问题解答如下:

问题: Spark在reduce算子中的疑问,这种情况算是Bug吗?

解决方案1:

你看看wordCount的demo,也是x+y。我猜在单个partition内元素的聚合,和stage下partition的聚合,都是用同样的算子进行计算。所以x+y就合理了。

  • 超时时间已到。超时时间已到,但是尚未从池中获取连接。出现这种情况可能是因为所有池连接均在使用,并且达到了最大池大小。


以上介绍了“ Spark在reduce算子中的疑问,这种情况算是Bug吗?”的问题解答,希望对有需要的网友有所帮助。
本文网址链接:http://www.codes51.com/itwd/4532006.html

相关图片

相关文章