【Pyspark】在jupyter中运行pyspark，且为yarn-client模式_jupyer pyspark on yarn-CSDN博客

网友收藏2024-01-24 07:18

链接地址：https://blog.csdn.net/yuxeaotao/article/details/124977207
链接标题：【Pyspark】在jupyter中运行pyspark，且为yarn-client模式_jupyer pyspark on yarn-CSDN博客
所属网站：blog.csdn.net
被收藏次数：8355

文章浏览阅读916次。1. 预备操作已经有的环境包括：spark 2.4.5 集群 anaconda 虚拟环境python3.7 (由于集群spark环境为2.4.5，python版本必须<3.8) 配置好$SPARK_HOME、$JAVA_HOME 环境变量2. 本次操作命令行操作：# 查看并进入相应虚拟环境conda info --envsconda deactivateconda activate caret# 进入相应虚拟环境后，安装包conda search pyspark _jupyer pyspark on yarn

本文地址：https://tebull.com/detail/543548.html

标签：jupyer pyspark on yarn