win10下安装pyspark

1.如何在windows下安装配置pyspark notebook

试一下命令行启动，确保ipython从anaconda启动

第二步：安装spark（需要提前安装JDK）

到官网下载spark安装包

我下的是这个版本：

解压缩之后，不要忘记添加环境变量

配置如下系统变量

接着需要在命令行键入（spark安装目录下：如D:/spark） > sbt package 进行编译

这一步很重要 拷贝 E:/spark/python/pyspark 到 D:/anaconda/Lib/site-packages 目录下

第三步：修改spark/conf下的spark-env文件（不知道是否必要）

加入如下三行

export PYSPARK_PYTHON=/D:/anaconda

export PYSPARK_DRIVER_PYTHON=/D:/anaconda

export PYSPARK_SUBMIT_ARGS='--master local[*]'

第四步：启动pyspark

发现已启动成功，一般网页会自动打开

第五步：测试sc

成功！

2.怎么在wins10环境下安装pycharme

1，新建一个项目

File --> New Project。

2，新建一个文件

右键单击刚建好的helloWord项目，选择New --> Python File

3，输入文件名

输入文件名，没什么好说的

4，进入编写界面

PyCharm的默认编辑界面很怪，会自动生成一行 __author__ = “作者” 的头。而比较常用的文件头，如：#coding=utf-8 等，反倒没有自动生成。

输入code:

print "Hello word!"

5，设置控制台

运行之前，我们发现快捷菜单上的【运行】和【调试】都是灰色的，不可触发状态。是因为，我们需要先配置一下控制台。

点击运行旁边的黑色倒三角，进入【Run/Debug Configurations】配置界面。（或者点击Run --> Edit Configurations 也一样）

在【Run/Debug Configurations】配置界面里，

点击绿色的加号，新建一个配置项，并选择Python。（因为hello word 就是个python程序）

在右边的配置界面里：

Name 一栏里写个名字，比如Hello

点击Scrip选项，找到刚才我们写的hello_word.py

点击ok， 自动返回到编辑界面，这时候【运行】【调试】按钮全部变绿！

6，运行

点击绿色的运行按钮，观看输出的结果：

OK,PyCharm的首秀，圆满结束！

3.win10怎样安装pytorch

先到python的官方网站下载软件，打开官网后，选择downlad项目，然后选择需要下载的大版本，2.7还是3.4。

选择完版本后，进入后一个页面，在这个页面可以选择操作系统及对应的版本，win下注意分64位和32位版本，不要下错了。

32位的程序大约为17.5M，建议非官网下载的还是要比对下MD5以防万一，在上一个页面就有MD5值。核对完成后双击安装，首先是询问是为所有用户还是为当前用户安装，用缺省的就行。

下一步后是选择安装目录，这个看个人喜好了，不过还是要记一下目录，因为缺省的代码也会放在这个目录下。

下面继续缺省配置选择就开始安装了，python在安装过程中要执行一些角本，因些需要至少有system的权限才可以安装。

安装完成，但在win10在任务栏和桌面上都未生成图标，使用起来麻烦些，在开始窗口打开所有应，按字母找到python程序项，右键选择固定在任务栏或屏幕。

4.win10怎样安装pytorch

先到python的官方网站下载软件，打开官网后，选择downlad项目，然后选择需要下载的大版本，2.7还是3.4。

选择完版本后，进入后一个页面，在这个页面可以选择操作系统及对应的版本，win下注意分64位和32位版本，不要下错了。32位的程序大约为17.5M，建议非官网下载的还是要比对下MD5以防万一，在上一个页面就有MD5值。

核对完成后双击安装，首先是询问是为所有用户还是为当前用户安装，用缺省的就行。下一步后是选择安装目录，这个看个人喜好了，不过还是要记一下目录，因为缺省的代码也会放在这个目录下。

下面继续缺省配置选择就开始安装了，python在安装过程中要执行一些角本，因些需要至少有system的权限才可以安装。安装完成，但在win10在任务栏和桌面上都未生成图标，使用起来麻烦些，在开始窗口打开所有应，按字母找到python程序项，右键选择固定在任务栏或屏幕。

5.ipython怎么安装pyspark

1. 下载安装Python 下载： python-3.3.3.amd64.msi （在Python.org下载就好了） 安装： 直接双击安装

2. 下载安装Setuptools 下载ez_setup.py 到某一个目录（如： D:\tools\ez_setup.py）， 安装： 进入D:\tools\， 运行： c:\Python33\python.exe d:\tools\ez_setup.py 在这个过程中， 系统会连接网络下载所需要的安装包并完成安装. 这样就可以使用easy_install了。

3. 下载安装pip 下载ez_setup.py 到某一个目录（如： e:\tools\get-pip.py）， 安装： 进入d:\tools\， 运行： c:\Python33\python.exe get-pip.py 在这个过程中， 系统会连接网络下载所需要的安装包并完成安装

4. 设置环境变量 把c:\Python33 和c:\Python33\Scripts 都添加到环境变量中. 如 c:>set PATH=%PATH%;c:\Python33;c:\Python33\Scripts 作完前面四步， 就可以在Windows下面开始使用Python了.

6.如何在深度技术Win10企业版系统下运行py文件

1、用【u深度u盘启动盘制作工具】制作u盘启动盘，插入电脑usb接口，设置好开机启动项进入u深度主菜单界面，选择“【02】u深度win8pe标准版（新机器）”并回车，

2、在u深度pe装机工具中，点击“浏览”按钮选择win10系统镜像安装在c盘中，点击确定即可。

3、程序提醒执行还原操作，勾选“完成后重启”复选框，然后点击确定，

4、接着是程序还原过程，还原成功后会重启计算机，然后进行程序安装过程，请耐心等待。

5、程序安装结束就可以进行电脑常规设置了，设置完便进入win10系统桌面，等待部署结束就可以使用了。

7.Windows 10 怎样安装 PyQt5?

安装windows 10系统的步骤：

1、首先，制作一个【u启动u盘启动盘】，根据开机画面的提示，重启电脑按开机按开机快捷键设置u盘启动，然后进入u启动主菜单界面，选择运行win8pe并按回车键进入；

2、然后在u启动pe装机工具中，我们在下拉菜单中选择win10系统镜像文件，选择c盘作为系统盘把win10镜像安装在c盘中，点击确定；

3、这是系统会弹出程序将执行还原操作的提示框，点击确定；

4、接着就是系统还原的过程了，还原成功之后系统会重启计算机，然后进行程序安装；

5、win10系统安装完成之后就可以进行系统的相关设置了，设置完成之后win10就可以正常使用了

8.win10安装了python怎么安装django

下载过后，解压。

安装Django时我们要用到CMD。在cmd命令窗口下用cd 命令进入到Django解压目录下，找到setup.py文件。

利用python setup.py install来安装Django。等待安装完成。

安装完成后，要检查有无错误。

运行python，导入Django,import Django然后Django.VERSION 查看有无成功安装。如有成功安装则会显示其版本。

步骤阅读

7

我们要使用Django，需要在cmd命令下到达D:\Python34\Lib\site-packages\Django-1.7.1-py3.4.egg\django\bin，来执行Django-admin来创建web框架。

9.如何在windows安装部署spark 求大神们的告知

在Windows上安装与配置Spark

本节介绍在Windows系统上安装Spark的过程。在Windows环境下需要安装Cygwin模拟Linux的命令行环境来安装Spark。

(1)安装JDK

相对于Linux、Windows的JDK安装更加自动化，用户可以下载安装Oracle JDK或者OpenJDK。只安装JRE是不够的，用户应该下载整个JDK。

安装过程十分简单，运行二进制可执行文件即可，程序会自动配置环境变量。

(2)安装Cygwin

Cygwin是在Windows平台下模拟Linux环境的一个非常有用的工具，只有通过它才可以在Windows环境下安装Hadoop和Spark。具体安装步骤如下。

1）运行安装程序，选择install from internet。

2）选择网络最好的下载源进行下载。

3）进入Select Packages界面，然后进入Net，选择openssl及openssh。因为之后还是会用到ssh无密钥登录的。

另外应该安装“Editors Category”下面的“vim”。这样就可以在Cygwin上方便地修改配置文件。

最后需要配置环境变量，依次选择“我的电脑”→“属性”→“高级系统设置”→“环境变量”命令，更新环境变量中的path设置，在其后添加Cygwin的bin目录和Cygwin的usr\bin两个目录。

(3)安装sshd并配置免密码登录

1）双击桌面上的Cygwin图标，启动Cygwin，执行ssh-host-config -y命令，出现如图2-3所示的界面。

2）执行后，提示输入密码，否则会退出该配置，此时输入密码和确认密码，按回车键。最后出现Host configuration finished.Have fun！表示安装成功。

3）输入net start sshd，启动服务。或者在系统的服务中找到并启动Cygwin sshd服务。

注意，如果是Windows 8操作系统，启动Cygwin时，需要以管理员身份运行（右击图标，选择以管理员身份运行），否则会因为权限问题，提示“发生系统错误5”。

(4)配置SSH免密码登录

1）执行ssh-keygen命令生成密钥文件

2）执行此命令后，在你的Cygwin\home\用户名路径下面会生成.ssh文件夹，可以通过命令ls -a /home/用户名 查看，通过ssh -version命令查看版本。

3）执行完ssh-keygen命令后，再执行下面命令，生成authorized_keys文件。

cd ~/.ssh/ cp id_dsa.pub authorized_keys

这样就配置好了sshd服务。

(5)配置Hadoop

修改和配置相关文件与Linux的配置一致，读者可以参照上文Linux中的配置方式，这里不再赘述。

(6)配置Spark

修改和配置相关文件与Linux的配置一致，读者可以参照上文Linux中的配置方式，这里不再赘述。

(7)运行Spark

1)Spark的启动与关闭

①在Spark根目录启动Spark。

./sbin/start-all.sh

②关闭Spark。

./sbin/stop-all.sh

2)Hadoop的启动与关闭

①在Hadoop根目录启动Hadoop。

./sbin/start-all.sh

②关闭Hadoop。

./sbin/stop-all.sh

3）检测是否安装成功

正常状态下会出现如下内容。

-bash-4.1# jps 23526 Jps 2127 Master 7396 NameNode 7594 SecondaryNameNode 7681 ResourceManager 1053 DataNode 31935 NodeManager 1405 Worker

如缺少进程请到logs文件夹下查看相应日志，针对具体问题进行解决。

转载请注明出处windows之家 » win10下安装pyspark