Driver
spark.driver.cores
driver端分配的核数，默认为1，thriftserver是启动thriftserver服务的机器，资源充足的话可以尽量给多。
spark.driver.memory
driver端分配的内存数，默认为1g，同上。
spark...
柯广
1个月前 (01-26) 1792℃ 0评论
0喜欢
Spark内核概述
Spark内核泛指Spark的核心运行机制，包括Spark核心组件的运行机制、Spark任务调度机制、Spark内存管理机制、Spark核心功能的运行原理等，熟练掌握Spark内核原理。
一、Spark核心组件回顾
Driver
Spark驱动器节点，用于执行...
柯广
2个月前 (01-14) 2283℃ 0评论
3喜欢
