Spark ви позволява да кеширате междинни резултати в паметта. Кеширането може драматично да подобри производителността, ако имате структури от данни, които се използват често, като таблица за търсене или матрица от резултати в алгоритъм за машинно обучение. Кеширането също може да създаде проблеми, тъй като често изисква огромни парчета памет

person Sachin Lala    schedule 22.08.2018    source източник