SKIL/配置/Spark解释器

Spark解释器

可以配置笔记本和Zeppelin Spark 解释器,以使用Spark来获得更多的处理能力。如果本地Spark实例的计算能力不足,这将非常有用。你可以通过右上角的用户名下拉菜单访问解释器设置,如下图所示。

image.gif

访问解释器

搜索Spark解释器并单击“编辑”按钮

image.gif

编辑Spark解释器设置

你可以按“+”按钮添加额外的键/值对。你可以在这里找到其他可配置的spark属性。

image.gif

添加额外的键/值对

示例
大多数DL4J、DataVec和ND4j库都位于SKIL_HOME/lib和 SKIL_HOME/native文件夹中(其中SKIL_HOME通常为/opt/skil)。要在Spark中以导出模式运行分布式训练,需要以下Spark解释器配置:

image.gif

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。