alexapollo
V2EX  ›  Spark

Spark/Scala 的细节讨论:在 map task 里的 map 会得到如何的处理?

  •  
  •   alexapollo · Sep 14, 2016 · 5619 views
    This topic created in 3577 days ago, the information mentioned may be changed or developed.

    按观察看,是都不会生成新的 map task 的,纯粹的本地执行,但哪儿有对应的说明呢?

    1 replies    2016-09-14 22:36:27 +08:00
    alexapollo
        1
    alexapollo  
    OP
       Sep 14, 2016
    按理说是 RDD 实现是特殊的,其他实现都是本地化的,但没有看到有写的很清楚的文章
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   978 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 36ms · UTC 22:19 · PVG 06:19 · LAX 15:19 · JFK 18:19
    ♥ Do have faith in what you're doing.