资讯专栏INFORMATION COLUMN

如何在pycharm中配置Spark

Bmob / 1974人阅读

摘要:因为作业要用到这个和就着手开始配置,但是搜了一圈还是发现了不少雷。如右上角所示,选择。设置环境,创建和配置路径如图所示,都可以在安装路径下找到选择你的右上角添加和的路径这两个文件都在中的文件夹下,自己找一下保存,

因为作业要用到这个SPARK和python, 就着手开始配置,但是搜了一圈还是发现了不少雷。就把我自己的解决办法发上来:

打开pycharm,导入已有的或者新建工程。
2.创建新的run configurition。


如右上角所示,选择edit configurition。

设置环境,创建PYTHONPATH和SPARK_HOME
配置路径如图所示,都可以在Spark安装路径下找到:


4.选择 File->setting->你的project->project structure

右上角Add content root添加:py4j-some-version.zip和pyspark.zip的路径(这两个文件都在Spark中的python文件夹下,自己找一下)
5.保存,ok

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/44337.html

相关文章

  • 使用PyCharm配置Spark的Python开发环境(基础)

    摘要:在本地搭建好后,除了使用提交程序外,我们可以使用这个在本地进行开发调试提升我们的开发效率。配置过程也十分简单,在上搜索到的。同时,加入插件后也可以使用开发程序,配置步骤一致。安装步骤安装配置打开,创建一个。 在本地搭建好Spark 1.6.0后,除了使用spark-submit提交Python程序外,我们可以使用PyCharm这个IDE在本地进行开发调试,提升我们的开发效率。配置过程也...

    madthumb 评论0 收藏0
  • Python学习笔记:Web后端开发一览

    摘要:试想,在多线程服务器中,多个线程同时处理不同客户端发送的不同请求时,每个线程看到的对象必然不同。多线程服务器会创建一个线程池,再从线程池中选择一个线程用于处理接收到的请求。 框架 Django flask flask是一个轻量的web开发应用示例开发一个小应用 from flask import Flask app = Flask(__name__) @app.route(/) d...

    DrizzleX 评论0 收藏0
  • 如何开发一个 PyCharm 插件

    摘要:今天我们说说怎么搭建环境自己写一个插件。插件工程目录结构一个典型的插件目录结构就像下图。如果成功那么在工程目录就会生成一个同名的文件。 PyCharm 是很多 Python 开发者优先选择的 IDE,功能强大,跨平台,提供免费社区版,非常良心。如果你想自己给PyCharm添加一些功能怎么办呢?有两个办法: 通过提需求实现,到 JetBrains 的 github 去提issue或者自...

    LdhAndroid 评论0 收藏0
  • Python 工具——Anaconda+Pycharm 的安装过程

    摘要:不会影响原来已安装的。如何安装官网下载在官网下载起来可能比较慢而导致无法下载成功,我已经把和下载好保存在百度云中,可以给我评论留言我会给分享链接。 适用对象:编程完全小白,准备安装 Python 进行学习本文特点:十分具体详细,细致到了每一步安装过程的截图,看了此篇,你完全不用看其他教程,给出了软件的百度云以及自己找到的可用的 Pycharm 的激活方式,可以直接安好,并开始写出自己的...

    beanlam 评论0 收藏0
  • Pycharm配置autopep8教程,让Python代码更符合pep8规范

    摘要:一何为官方文档中文翻译转二中配置本身是有风格检测的,当你敲得代码中不符合规范时,会有下划波浪线提示。如下图所示最后博客链接翔参考机器学习入门安装 一、何为pep8? PEP 8官方文档 -- Style Guide for Python Code PEP8中文翻译(转) 二、Pycharm中配置pep8 Pycharm本身是有pep8风格检测的,当你敲得代码中不符合规范时,会有下划...

    tuantuan 评论0 收藏0

发表评论

0条评论

最新活动
阅读需要支付1元查看
<