嗨~能简单解释下，为什么需要打补丁才能开启 DRA 么？ #787
-
|
嗨~能简单解释下，为什么需要打补丁才能开启 DRA 么？Spark3 Patch. |
Beta Was this translation helpful? Give feedback.
Answered by
AngersZhuuuu
Oct 18, 2022
Replies: 1 comment 1 reply
-
|
在动态分配 和未开启external shuffle service的的场景下， 如果map task 所在的机器lost 是需要重跑map task的，我们开启了RSS 的时候是关闭了ESS的，所以需要做一些spark 端的修改去支持RSS的场景， 避免不必要的计算 |
Beta Was this translation helpful? Give feedback.
1 reply
-
|
谢谢回复 |
Beta Was this translation helpful? Give feedback.
Answer selected by
fuhaiq
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment
在动态分配 和未开启external shuffle service的的场景下， 如果map task 所在的机器lost 是需要重跑map task的，我们开启了RSS 的时候是关闭了ESS的，所以需要做一些spark 端的修改去支持RSS的场景， 避免不必要的计算
，