如何安装hadoopwin10

1.如何在windows下安装hadoop

1、安装Cygwin下载cygwin的setup.exe,双击运行: 选择从Internet安装:设置安装目录: 设置安装包目录: 设置“Internet Connection”的方式,选择“Direct Connection”: 选择一个下载站点:“下一步”之后,可能会弹出下图的“Setup Alert”对话框,直接“确定”即可在“Select Packages”对话框中,必须保证“Net Category”下的“OpenSSL”被安装: 如果还打算在eclipse 上编译Hadoop,则还必须安装“Base Category”下的“sed”: “Devel Category”下的subversion 建议安装: 下载并安装: 当下载完后,会自动进入到“setup”的对话框: 在上图所示的对话框中,选中“Create icon on Desktop”,以方便直接从桌面上启动Cygwin,然后点击“完成”按钮。

至此,Cgywin 已经安装完成。2、配置环境变量 需要配置的环境变量包括PATH 和JAVA_HOME:将JDK 的bin 目录、Cygwin 的bin 目录以及Cygwin 的usr\bin(sbin)目录都添加到PATH 环境变量中;JAVA_HOME 指向JRE 安装目录。

3、windows系统上运行hadoop集群,伪分布式模式安装步骤: ①启动cygwin,解压hadoop安装包。通过cygdrive(位于Cygwin根目录中)可以直接映射到windows下的各个逻辑磁盘分区。

例如hadoop安装包放在分区D:\下,则解压的命令为$ tar -zxvf /cygdrive/d/hadoop-0.20.2.tar.gz,解压后可使用ls命令查看,如下图:默认的解压目录为用户根目录,即D:\cygwin\home\lsq(用户帐户)。 ②编辑conf/hadoop-env.sh文件,将JAVA_HOME变量设置为java的安装目录。

例如java安装在目录C:\Program Files\java\jdk1.6.0_13,如果路径没空格,直接配置即可。存在空格,需将Program Files缩写成Progra_1,如下图: ③依次编辑conf目录下的core-site.xml、mapred-site.xml和hdfs-site.xml文件,如下图:④安装配置SSH 点击桌面上的Cygwin图标,启动Cygwin,执行ssh-host-config命令,然后按下图上的选择输入: 当提示Do you want to use a different name?输入yes,这步是配置安装的sshd服务,以哪个用户登录,默认是cyg_server这个用户,这里就不事先新建cyg_server这个用户,用当前本机的超管本地用户:chenx,后续根据提示,2次输入这个账户的密码 出现Host configuration finished. Have fun! 一般安装顺利完成。

如下图: 输入命令$ net start sshd,启动SSH,如下图: 注:sshd服务安装完之后,不会默认启动,如果启动报登录失败,不能启动,可在服务属性-Log On窗口手工修改,在前述的过程之中,cygwin不会校验密码是否正确,应该只是校验了2次的输入是否一致,然后再手工启动。不知道为什么,sshd服务如果选择local system的登录方式,后续会有问题,所以sshd服务最好设置成当前的登录用户。

⑤配置ssh登录 执行ssh-keygen命令生成密钥文件输入如下命令: cd ~/.ssh ls -l cat id_rsa.pub >> authorized_keys完成上述操作后,执行exit命令先退出Cygwin窗口,如果不执行这一步操作,下面的操作可能会遇到错误。接下来,重新运行Cygwin,执行ssh localhost命令,在第一次执行ssh localhost时,会有“are you sure you want to continue connection?”提示,输入yes,然后回车即可。

当出现下图提示,即顺利完成该步: ⑥hadoop运行 格式化namenode 打开cygwin窗口,输入如下命令: cd hadoop-0.20.2 mkdir logs bin/hadoop namenode –format 启动Hadoop 在Cygwin 中,进入hadoop 的bin 目录, 运行./start-all.sh 启动hadoop; 可以执行./hadoop fs -ls /命令,查看hadoop 的根目录; 可以执行jps 查看相关进程; 如下图:(如果显示和下图类似,一般hadoop安装/启动成功)。

2.windows怎么安装hadoop

在windows下安装Eclipse Hadoop插件主要安装编译Eclipse-hadoop插件即可。

1、配置环境变量:把下载好的hadoop-2.5.2解压到D盘的根目录下,然后计算机==》属性==》高级系统设置==》环境变量

2、把hadoop-eclipse-plugin-2.6.0.jar放到eclipse==》plugins目录下面,重启Eclipse,打开Window==》Preferences,能够看到Hadoop Map/Reduce就是插件安装成功,下面指定Hadoop的安装目录即第一步设定的HADOOP_HOME。

3、新建Map/Reduce Project工程

4、输入工程名称,然后点击Finish按钮

可以看到如下图所示,可以看到有新建的工程还有自动生成的DFS Locations,此时点击DFS Locations什么都不会看到,因为还没有配置其相应的HDFS:

5、显示Hadoop的Map/Reduce Locations视图,配置Hadoop Locations

Window==》Show View==》Other,找到Map/Reduce Tools下的Map/Reduce Locations,并点击ok。

设置下面几个参数:

3.windows怎么安装hadoop

1、下载安装JDK,以及Eclipse2、新建JAVAProject3、去cloudera网站下载hadoop的CDH3u6版本。

将起解压到win7的某个目录4、选中OperateHDFS,右击,选择“property”,弹出右侧的窗口;选择“JavaBuildPath”——“Libraries”——AddExternalJars5、到上面的画面后,下面就是选择开发hadoop程序时,用到的一些jar包将lib文件夹下的所有的jar包,添加进去;将红框内的jar包,安装进去。6、创建配置文件夹7、将core-site.xml,hdfs-site.xml,mapred-site.xml放入到此文件夹中。

8、右键->属性进行如下操作,添加刚刚创建conf文件夹配置搞定!写代码的过程中要写入的namenode和jobtracker地址(修改为你自己的)在你的代码中,加入如下代码就可以了Configurationconf=newConfiguration();conf.set("fs.default.name","192.1.1.2:9000");conf.set("mapred.job.tracker","192.1.1.2:9001");。

4.windows怎么安装hadoop

在windows下安装Eclipse Hadoop插件主要安装编译Eclipse-hadoop插件即可。

1、配置环境变量:把下载好的hadoop-2.5.2解压到D盘的根目录下,然后计算机==》属性==》高级系统设置==》环境变量2、把hadoop-eclipse-plugin-2.6.0.jar放到eclipse==》plugins目录下面,重启Eclipse,打开Window==》Preferences,能够看到Hadoop Map/Reduce就是插件安装成功,下面指定Hadoop的安装目录即第一步设定的HADOOP_HOME。3、新建Map/Reduce Project工程4、输入工程名称,然后点击Finish按钮可以看到如下图所示,可以看到有新建的工程还有自动生成的DFS Locations,此时点击DFS Locations什么都不会看到,因为还没有配置其相应的HDFS:5、显示Hadoop的Map/Reduce Locations视图,配置Hadoop Locations Window==》Show View==》Other,找到Map/Reduce Tools下的Map/Reduce Locations,并点击ok。

设置下面几个参数:。

5.如何在windows下安装hadoop

1、安装Cygwin下载cygwin的setup.exe,双击运行: 选择从Internet安装:设置安装目录: 设置安装包目录: 设置“Internet Connection”的方式,选择“Direct Connection”: 选择一个下载站点:“下一步”之后,可能会弹出下图的“Setup Alert”对话框,直接“确定”即可在“Select Packages”对话框中,必须保证“Net Category”下的“OpenSSL”被安装: 如果还打算在eclipse 上编译Hadoop,则还必须安装“Base Category”下的“sed”: “Devel Category”下的subversion 建议安装: 下载并安装: 当下载完后,会自动进入到“setup”的对话框: 在上图所示的对话框中,选中“Create icon on Desktop”,以方便直接从桌面上启动Cygwin,然后点击“完成”按钮。

至此,Cgywin 已经安装完成。2、配置环境变量 需要配置的环境变量包括PATH 和JAVA_HOME:将JDK 的bin 目录、Cygwin 的bin 目录以及Cygwin 的usr\bin(sbin)目录都添加到PATH 环境变量中;JAVA_HOME 指向JRE 安装目录。

3、windows系统上运行hadoop集群,伪分布式模式安装步骤: ①启动cygwin,解压hadoop安装包。通过cygdrive(位于Cygwin根目录中)可以直接映射到windows下的各个逻辑磁盘分区。

例如hadoop安装包放在分区D:\下,则解压的命令为$ tar -zxvf /cygdrive/d/hadoop-0.20.2.tar.gz,解压后可使用ls命令查看,如下图:默认的解压目录为用户根目录,即D:\cygwin\home\lsq(用户帐户)。 ②编辑conf/hadoop-env.sh文件,将JAVA_HOME变量设置为java的安装目录。

例如java安装在目录C:\Program Files\java\jdk1.6.0_13,如果路径没空格,直接配置即可。存在空格,需将Program Files缩写成Progra_1,如下图: ③依次编辑conf目录下的core-site.xml、mapred-site.xml和hdfs-site.xml文件,如下图:④安装配置SSH 点击桌面上的Cygwin图标,启动Cygwin,执行ssh-host-config命令,然后按下图上的选择输入: 当提示Do you want to use a different name?输入yes,这步是配置安装的sshd服务,以哪个用户登录,默认是cyg_server这个用户,这里就不事先新建cyg_server这个用户,用当前本机的超管本地用户:chenx,后续根据提示,2次输入这个账户的密码 出现Host configuration finished. Have fun! 一般安装顺利完成。

如下图: 输入命令$ net start sshd,启动SSH,如下图: 注:sshd服务安装完之后,不会默认启动,如果启动报登录失败,不能启动,可在服务属性-Log On窗口手工修改,在前述的过程之中,cygwin不会校验密码是否正确,应该只是校验了2次的输入是否一致,然后再手工启动。不知道为什么,sshd服务如果选择local system的登录方式,后续会有问题,所以sshd服务最好设置成当前的登录用户。

⑤配置ssh登录 执行ssh-keygen命令生成密钥文件输入如下命令: cd ~/.ssh ls -l cat id_rsa.pub >> authorized_keys完成上述操作后,执行exit命令先退出Cygwin窗口,如果不执行这一步操作,下面的操作可能会遇到错误。接下来,重新运行Cygwin,执行ssh localhost命令,在第一次执行ssh localhost时,会有“are you sure you want to continue connection?”提示,输入yes,然后回车即可。

当出现下图提示,即顺利完成该步: ⑥hadoop运行 格式化namenode 打开cygwin窗口,输入如下命令: cd hadoop-0.20.2 mkdir logs bin/hadoop namenode –format 启动Hadoop 在Cygwin 中,进入hadoop 的bin 目录, 运行./start-all.sh 启动hadoop; 可以执行./hadoop fs -ls /命令,查看hadoop 的根目录; 可以执行jps 查看相关进程; 如下图:(如果显示和下图类似,一般hadoop安装/启动成功)。

如何安装hadoopwin10

转载请注明出处windows之家 » 如何安装hadoopwin10

win10

win10怎么输入密码开机

阅读(129)

本文主要为您介绍win10怎么输入密码开机,内容包括请问win10怎么设置开机输入密码后不用按回车键就能进去桌面搜,win10怎么输入密码直接登录,win10怎么填开机密码。普通的密码,是需要按下回车才能进入,pin码是另外一种开机密码,是不需要按回车

win10

微信电脑win10能么

阅读(97)

本文主要为您介绍微信电脑win10能么,内容包括win10微信怎么开视频,win10电脑登录微信以后视频通话摄像头不能用,电脑版微信视频在Win10哪里。微信只可以录制最长10秒的视频,所以一般最大不会超过800K。由于限制了视频大小,所以朋友圈分享视频

win10

win10恢复出厂设置很多问题

阅读(145)

本文主要为您介绍win10恢复出厂设置很多问题,内容包括win10初始化电脑时出现问题,win10系统恢复出厂设置后出现问题,win10恢复出厂设置后各种问题,求救很急。请问原来不这样吧?如果是,出事前您在电脑上干了什么,下载什么了,什么东西有异常,如果

win10

win10恢复默认显示比例

阅读(168)

本文主要为您介绍win10恢复默认显示比例,内容包括电脑win10软件显示比例如何调整,刚装完win10系统就成这样了显示器比例怎么调节,win10打开文件夹设置显示比例。调整电脑win10 软件显示比例的具体操作步骤如下:我们需要准备的材料有:电脑win1

win10

win10电脑重启不了系统

阅读(137)

本文主要为您介绍win10电脑重启不了系统,内容包括为什么开机进不了系统win10开机无法进入系统,win10无法开机,且自动修复失败应该怎么办,win10开机进不去系统。Win10开机黑屏进不了桌面开机进入系统时长按电源键关机,重复3次左右;2、这样开机

win10

win10家庭版怎么安装Nodejs

阅读(156)

本文主要为您介绍win10家庭版怎么安装Nodejs,内容包括如何在Windows10中搭建Node.js环境,怎么在win10系统下配置nodejs和npm和less,win10安装了nodejs怎么使用。win系统下nodejs安装及环境配置第一步:下载安装文件下载nodejs,官网:我这里下载

win10

win10系统开始设置变为英文

阅读(0)

本文主要为您介绍win10系统开始设置变为英文,内容包括win10设置英文键盘后开始菜单也变成英文了怎么办,win10,开始菜单变成英文的了怎么办,win10设置英文键盘后开始菜单也变成英文了怎么办。方法如下: 点击Win10桌面右下角的输入法图标,在点

win10

win10字体显示宋体

阅读(172)

本文主要为您介绍win10字体显示宋体,内容包括如何把win10的显示字体改为宋体,Windows10菜单栏字体怎样设置为宋体,Win10系统默认字体如何修改为宋体。Win 10 字体改为宋体方法:新建一个文本文档txt,将如下代码复制进去:Windows Registry Edito

win10

win10怎样设置低音声卡

阅读(104)

本文主要为您介绍win10怎样设置低音声卡,内容包括Win10怎样设置音箱重低音,win10怎么调节麦克风的高低音,win10系统怎么调重低音。想弄声音,必须先找到控制面板,说起来不熟悉,win10的控制面板一下子还真不知道在哪,看下图:右击桌面空白的地方,选

win10

win10取消电脑更新提示更新

阅读(96)

本文主要为您介绍win10取消电脑更新提示更新,内容包括电脑win10怎么取消系统更新提示,如何去掉win10电脑更新提示,window10怎么关闭系统提示更新。右键点击左下角微软按钮,找到“运行” 也可用键盘的win+R 打开运行在运行处输入 “services.

win10

win10搜索怎么加快

阅读(87)

本文主要为您介绍win10搜索怎么加快,内容包括Win10怎么使用优化索引加快搜索文件速度,Win10怎么做使用优化索引以加快搜索文件,win10搜索文件变得很慢怎么办。相比于Win7/Win8,Win10对于固体硬盘等新硬件的支持更加完善,不过在日常使用中,仍

win10

win10系统如何收藏网页

阅读(103)

本文主要为您介绍win10系统如何收藏网页,内容包括win10系统网页怎么收藏,win10系统怎么将浏览器收藏夹,win10Edge浏览器怎么收藏网页到收藏夹并显示出来。点击任务栏的edge浏览器图标,如下图所示启动后,点击edge浏览器右上方的三个点,如下图所

win10

win10开机后显示磁贴

阅读(119)

本文主要为您介绍win10开机后显示磁贴,内容包括win10已固定的磁贴怎么处理,win10桌面显示已固定磁贴怎么才能恢复,win10怎么设置桌面直接显示磁贴。首先,在win10系统桌面,单击打开“开始”菜单。点击“所有程序”如下图。在其中,我以windows10

win10

纯净版Win10怎样安装

阅读(139)

本文主要为您介绍纯净版Win10怎样安装,内容包括怎样安装纯净版win10,纯净win10系统怎么安装,怎么安装win10纯净版。安装win10:用【u启动U盘启动盘制作工具】制作一个启动盘,然后将制作好的U盘启动盘插入电脑usb接口,重启电脑按开机按开机快捷

win10

win10家庭版怎么安装Nodejs

阅读(156)

本文主要为您介绍win10家庭版怎么安装Nodejs,内容包括如何在Windows10中搭建Node.js环境,怎么在win10系统下配置nodejs和npm和less,win10安装了nodejs怎么使用。win系统下nodejs安装及环境配置第一步:下载安装文件下载nodejs,官网:我这里下载

win10

win10安装鬼泣5怎么玩不了

阅读(142)

本文主要为您介绍win10安装鬼泣5怎么玩不了,内容包括《鬼泣5》用WIN10为何玩不了,鬼泣5WIN10玩不了,win10玩不了鬼泣5。1. WIN10下显卡驱动还很不成熟,而升级WIN10后又是强制自动更新显卡驱动,本来在旧系统下运行得好好的游戏(不止鬼泣5这一个

win10

mac安装win10不能使用触控

阅读(123)

本文主要为您介绍mac安装win10不能使用触控,内容包括苹果电脑安装win10之后触控板怎么不能用了,苹果电脑重装win10系统后触控板和键盘无法正常使用怎么解决搜狗,苹果电脑安装win10后触摸板不能用怎么办。故障原因可能没有安装BootCamp提供

win10

win10安装过程中分区整数

阅读(194)

本文主要为您介绍win10安装过程中分区整数,内容包括win10系统下如何分整数分区,win10系统下如何分整数分区,win10分区整数。怎么进行磁盘分区,可以参考以下步骤:步骤1. 在“此电脑”上右键点击,选择“管理”,然后在“计算机管理”窗口的左侧列

win10

win10不能进行光盘安装

阅读(142)

本文主要为您介绍win10不能进行光盘安装,内容包括WIN10不让安装光盘上的程序,光驱安装w10无法安装,WIN10不让安装光盘上的程序。需要开启管理员的权限:本操作是在win10系统下的,其实和win7/win8下差不多的,理论上是一样的。在电脑的桌面上找到

win10

win10安装软件出现若要找到

阅读(184)

本文主要为您介绍win10安装软件出现若要找到,内容包括win10在安装软件的时候提示找不到指定文件怎么解决,Win10最新版提示无法安装应用该找怎么办,安装win10,显示WINDOWS无法完成安装,若要在此计算机上安装。同时在键盘上按下“WIN”键+“R

win10

技嘉h55主板安装win10

阅读(141)

本文主要为您介绍技嘉h55主板安装win10,内容包括h55主板芯片组能不能安装win10,技嘉主板怎么安装win10,技嘉主板组装电脑怎么安装win10。首先用力按一下电源开机,此时按delete,重复不停按这个按键。

win10

win10安装win7双系统失败启动界面

阅读(153)

本文主要为您介绍win10安装win7双系统失败启动界面,内容包括win10下安装win7双系统失败,求教,在win10下装win7双系统win7装完以后无法启动出现,win10在装win7双系统时失败出现如图,咋办。win10下安装win7双系统步骤: 准备工具: u启动盘 2、wi