windows – 在运行spark-shell之前编辑spark-env.sh的正确方法是
发布时间:2020-12-14 05:47:24 所属栏目:Windows 来源:网络整理
导读:我在我的本地 Windows机器上运行spark.我能够成功启动spark shell. 我想编辑驻留在conf /文件夹中的spark-env.sh文件.将值添加到spark-env.sh文件的正确方法是什么. E.g如果我想为SPARK_EXECUTOR_MEMORY变量添加值怎么做? 我对可用的不同答案感到困惑 1. SP
我在我的本地
Windows机器上运行spark.我能够成功启动spark shell.
我想编辑驻留在conf /文件夹中的spark-env.sh文件.将值添加到spark-env.sh文件的正确方法是什么. E.g如果我想为SPARK_EXECUTOR_MEMORY变量添加值怎么做? 解决方法
spark-env.sh是一个用于Unix的常规bash脚本,因此在Windows安装中它永远不会被拾取.
在Windows上,您需要在conf目录中有一个spark-env.cmd文件,而是使用以下语法: set SPARK_EXECUTOR_MEMORY=2G 在Unix上,该文件将被称为spark-env.sh,您需要使用export预先发送每个属性(例如:export SPARK_EXECUTOR_MEMORY = 2G) (编辑:李大同) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |
相关内容
- .net – 如何处理开发人员对Windows服务器的访问?
- winforms – 删除Windows窗体中的标准图标
- windows azure中的子域映射
- windows – 禁用提示“单击继续以永久访问此文件夹”(例如,
- 将wcecompat编译为dll
- directx – DirectSound是Windows的最佳音频抽象层吗?
- windows-server-2008 – 我还需要其他类似的角色才能安装ke
- 窗口 – 是否可以在批处理文件中的回线中放置新的行字符?
- windows-server-2008 – 用于托管的EC2与VPS [已关闭]
- Windows上的TensorFlow:ImportError:没有名为’_pywrap_t
推荐文章
站长推荐
- windows-runtime – IOutputStream.FlushAsync的
- 如何在Windows登录提示出现之前运行批处理脚本?
- win10家庭版安装docker
- 远程桌面服务 – Microsoft远程桌面服务 – Andr
- Windows 8应用程序(html和Javascript):从图片库
- 是否有类似于Windows Server的Docker Containers
- wpf – WindowsFormsHost控件上的ContextMenu
- 文本文件 – 如何使用Microsoft Dynamics AX编写
- windows-phone-8 – LongListSelector第一个和最
- windows – 使用批处理从文件中读取带空格的行
热点阅读