您现在的位置: > 行业杂谈 > 基于香港vps中Hadoop的Windows环境搭建
基于香港vps中Hadoop的Windows环境搭建
针对高性能的香港vps,在其上做一些Hadoop的编程实验,就必须在服务器上搭建Hadoop相关实验环境。一般来讲,在深入学习一个系统的技术时,必须进行准备工作,比如搭建运行环境,运行相关代码等。对于Hadoop,它是一个分布式系统,多个守护进程组成Hadoop 的运行环境。本人曾写过基于Linux环境下的Hadoop系统的搭建,但是很多人表示不熟悉Linux系统,现在写一篇基于Windows环境下的Hadoop的搭建。
(1)软件准备:
Java基础开发包:建议1.6版本以上
Java编译工具Ant:1.6.0版本以上
功能强大的集成开发环境Eclipse:Galileo或者Helios版本
安装Cygwin用来模拟Linux环境:建议最新版本
(2)JDK的安装:
下载JDK安装包直接双击该安装包安装JDK安装的D:\hadoop\Java文件夹中,并且配置环境变量JAVA_HOME、CLASSPATH、PATH.
配置JAVA_HOME:右键单击依次选择"属性"->"高级系统设置"->"环境变量",选择新建环境变量,单击"新建",在变量名中输入:JAVA_HOME,变量值中输入:D:\hadoop\Java\jdk相应版本,单击确定。
配置CLASSPATH:另建一个系统变量,变量名为CLASSPATH,变量值为:
.;% JAVA_HOME%/lib/dt.jar;%JAVA_HOME%/lib/tools.jar;
配置PATH:PATh变量已经存在,单击编辑即可,在变量值中添加如下内容:%JAVA_HOME%/bin;%JAVA_HOME%/jre/bin
经过以上配置,JDK已经成功安装,在dos窗口中输入命令"ant-version"检查是否安装成功。
(3)Ant的安装
下载apache-ant.zip安装包,直接将其解压到D:\hadoop文件夹中,添加新的环境变量ANT_HOME,设置其值为apache-ant,同时在PATH后面添加如下内容:
;%ANT_HOME%\bin
经过以上配置,Ant已经安装完毕,在dos窗口中输入命令"ant-version"检查是否安装成功。
(4)Cygwin的安装
双击安装Cygwin安装包下面的setup.exe,单击"下一步",在"Net"一栏中选择OpenSSH相关软件包,单击"下一步",直到安装完成Cygwin。
安装并启动OpenSSH,Hadoop启动/停止脚本需要通过SSH发送命令启动相关的守护进程,为此需要安装sshd服务。安装sshd的方法是:以管理的的身份运行Cygwin的命令行终端,输入以下命令:
Ssh - host - config;
继续安装中,直到提示安装成功。
安装完毕后,输入一下命令启动sshd服务。
Net start sshd
(5)Eclipse的安装
Eclipse官网提供的Eclipse版本均是免安装版,直接讲下载的压缩包解压的D:\hadoop\下即可使用。
(6)获取Hadoop源代码并运行
当前比较流行的Hadoop源代码由两个:Apache Hadoop和Cloudera Distributed Hadoop(CDH)。请读者根据自己的实际情况,自行下载并运行。
本次讲解就到这里,相信小编已经给大家对于基于Windows环境下的Hadoop相关实验环境做了一些正确合理的普及,大家现在应该理解Hadoop实验环境是如何部署的了,喜欢动手的朋友可以安装上述步骤自行安装一遍,进行Hadoop系统研究(上述操作本人都亲自试验过)。
希望大家踊跃的购买我们公司的香港服务器,更好的进行hadoop相关的研究和实战。
如果还有什么不明确或者不懂的地方,欢迎来到新世界主机咨询了解,详情请咨询QQ: ,TEL: 。我们必将竭诚为您服务。
本文地址:
http://xgvps.com/xingyezatan/434.htm
版权所有*转载时必须以链接形式注明作者和原始出处
Copyright © 2001-2020 香港vps 网址:http://xgvps.com/
香港vps、香港服务器、香港vps主机、香港vps哪里好、就到香港新世界vps主机。
信息来源于网络以及网友投稿,如侵犯了您的权益,请及时通知本站。