添加链接
link管理
链接快照平台
  • 输入网页链接,自动生成快照
  • 标签化管理网页链接
相关文章推荐
多情的仙人球  ·  Spark(一) | Learner·  6 天前    · 
开朗的茄子  ·  Spark - RCC User Guide·  2 天前    · 
兴奋的草稿纸  ·  如何从spark scala ...·  23 小时前    · 
发呆的春卷  ·  spark ...·  23 小时前    · 
销魂的瀑布  ·  Routing in ASP.NET ...·  1 月前    · 
体贴的板凳  ·  常见问题解答 - Kluft床垫·  1 月前    · 
绅士的创口贴  ·  VMware NSX-T Data ...·  1 年前    · 
Using Scala v2.12.8 and Zinc v1.3.0-M4+46-edbe573e Running on Java JDK v11.0.9.1 (/home//jdk-11.0.9.1+1) -> Supports debugging user code, Java Debug Interface (JDI) is available. Maintained by the Scala Center (Jorge Vicente Cantero, Martin Duhem)

启动bloop 服务
% bloop server
Attempting a connection to the server…
Resolving ch.epfl.scala:bloop-frontend_2.12:1.4.6…
Starting bloop server at 127.0.0.1:8212…

3 下载spark 代码,并进行编译(依赖sbt)

compile (先编译)
package (打包)

4 在VSCode中debug spark代码

创建一个java debug 的文件 launch.json
添加以下内容:
{
“type”: “java”,
“name”: “Launch with Arguments Prompt”,
“request”: “launch”,
“mainClass”: “org.apache.spark.launcher.Main”,
“args”: “org.apache.spark.deploy.master.Master –host XXXXXXXX –port 7077 –webui-port 8080”
}

在代码 org.apache.spark.launcher.Main 类中设置断点,紧接着就可以在 java debug 中选择 “Launch with Arguments Prompt”

Privacy & Cookies: This site uses cookies. By continuing to use this website, you agree to their use.
To find out more, including how to control cookies, see here: Cookie Policy