我猜想是 sc 一直没有 sc.stop()所致。
但是这样一直占着资源也不是个办法啊? 不知道怎样处理会好一点
对了, 我这个是 Standalone 的集群搭建方式
但是这样一直占着资源也不是个办法啊? 不知道怎样处理会好一点
对了, 我这个是 Standalone 的集群搭建方式
1
RangerWolf OP 囧~~~ 发帖完成之后,自己搞定了~
原来 sc 不能直接从 Spark Master WebUI 上面 kill , 只能在 notebook 之中自己 stop 目前正在看看 scala 怎么判断 sc 是不是被 stop 的状态。。。 |