Eclipse配置Spark Python开发环境

配置参考 http://www.slideshare.net/prossblad/install-eclipse-for-sparkpython-49100874

Ubuntu 14.04

Eclipse Mars 4.5.0

Spark 1.4.1

Python 2.7.6

在Eclipse中安装PyDev插件

Help-->Install New Software-->输入网址 https://dl.bintray.com/fabioz/pydev/latest/-->选中PyDev，完成安装

设置PyDev

Window-->Preferences-->PyDev-->Python Interpreters，点击自动配置

在Library中添加Spark安装目录下的Python文件，以及该文件目录下的lib/py4j文件

在Environment中添加SPARK_HOME和SPARK_CONF_DIR变量，参考资料里说最好写完整路径

时间： 2024-10-13 00:59:36

Eclipse配置Spark Python开发环境的相关文章

Windows下基于eclipse的Spark应用开发环境搭建

原创文章,转载请注明: 转载自www.cnblogs.com/tovin/p/3822985.html 一.软件下载 maven下载安装 :http://10.100.209.243/share/soft/apache-maven-3.2.1-bin.zip       jdk下载安装:          http://10.100.209.243/share/soft/jdk-7u60-windows-i586.exe(32位)         http://10.100.209.243/sh

Eclipse + PyDev 搭建 Python 开发环境

使用 Eclipse 安装搭建编程语言的开发环境 在安装 Eclipse 之前,我们需要先安装 JDK ,JDK 下载地址为: http://www.oracle.com/technetwork/java/javase/downloads/index.htmlhttp://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 打开下载地址之后 找到 Windows x64 版本的 JDK 进行下载

在Eclipse中搭建Python开发环境

在Eclipse中搭建Python开发环境 来自: http://hi.baidu.com/hqwfreefly/blog/item/2543181d0afd9604314e150e.html 前言 笔者最近迷上了Python,但是一直没有找到满意的IDE.虽然使用Vim编辑器+命令行的方式比较酷,然而一个优秀的IDE确实能让开发速度提升不少.于是笔者想到Eclipse——一个神一样的利器.经过一番曲折,终究修成正果.整理成文,希望对热爱的Python的童鞋有所帮助. 正文 首先我们需要明白一点

Eclipse配置Go语言开发环境（GoEclipse）

Eclipse安装Go语言插件GoEclipse GoEclipse插件地址:http://goclipse.googlecode.com/svn/trunk/goclipse-update-site/ 接下来,配置插件 Eclipse配置Go语言开发环境(GoEclipse),布布扣,bubuko.com

在Windows上使用Eclipse配置Hadoop MapReduce开发环境

在Windows上使用Eclipse配置Hadoop MapReduce开发环境 1. 系统环境及所需文件 windows 8.1 64bit Eclipse (Version: Luna Release 4.4.0) hadoop-eclipse-plugin-2.7.0.jar hadoop.dll & winutils.exe 2. 修改Master节点的hdfs-site.xml 添加如下内容 <property> <name>dfs.permissions<

Windows下Eclipse+PyDev安装Python开发环境

1.简介 Eclipse是一款基于Java的可扩展开发平台.其官方下载中包括J2EE方向版本.Java方向版本.C/C++方向版本.移动应用方向版本等诸多版本.除此之外,Eclipse还可以通过安装插件的方式进行诸如Python.Android.PHP等语言的开发. 本文将要介绍的就是使用Eclipse与PyDev插件,安装Python开发环境的方法,其中写本文的一个主要原因就是几天前在一台电脑上安装PyDev插件时遇到了一个之前没有遇到过的状况. 2.环境 OS:Windows XP 32bi

eclipse中添加python开发环境

由于自己一直使用的是eclipse这个IDE,在写spark,java等都是用它,主要是用它比较顺手,也并不是觉得它有什么特别好的之处.下面主要介绍一下,在window系统下,eclipse中搭建python的开发环境. 1.首先安装python 下载网站:https://www.python.org/downloads/ 并设置环境变量,测试安装是否成功,如下: 2.在eclipse中安装pydev. 在eclipse中,安装pydev时,可能存在window--->preferences的左

使用Eclipse+PyDev搭建python开发环境

一.安装前准备 首先我们需要安装jdk,因为Eclipse这个软件需要依赖这个东东.下载地址: jdk-8u-64位下载 接下来需要下载Eclipse安装包 Eclipse下载地址:Eclipse下载地址 二.安装jdk Java JDK 8 在 Windows 8.1下的安装以及环境变量的配置: 双击安装程序即可安装: Win8.1下JDK7环境变量的配置: 依次单击计算机,选择属性,选择高级系统设置, 选择环境变量. 新建3个环境变量(PATH,CLASSPATH, JAVA_HOME),若

eclipse中集成python开发环境

Eclipse简介 Eclipse是java开发最常用的IDE,功能强大,可以在MAC和Windos上运行,学习简单. pydev简介 一个功能强大的 Eclipse插件,用户可以完全利用 Eclipse 来进行 Python 应用程序的开发和调试.它提供了一些很好的功能,如:语法错误提示.源代码编辑助手.Quick Outline.Globals Browser.Hierarchy View.运行和调试等等.拥有诸多强大的功能,同时也非常易于使用. 详细步骤 1.安装python环境 下载地址