windowshadoop配置，windows下配置hadoop

提示：扫一扫查出行
【扫一扫了解最新限行尾号】
复制提示

求助,在windows下安装hadoop遇到的一个问题

1、不建议先在window/cygwin上测试，直接用这个环境有很多问题，都是不好理解的。

2、先Telnet看看端口开启了没有如果确认开启了，应该是防火墙的问题，需要开放相关端口。

3、记得刚出win版本的那天，我兴冲冲的下载部署了一整天还是遇到各种问题没能部署成功。至今为止还没见到有哪个公司把hadoop生产环境部署在windows上的。

4、直接通过windows上Eclipse右击main程序的java文件，然后run as application或选择hadoop插件run on hadoop来触发执行MapReduce程序的测试。

Q1: 关于分布式Hadoop在WINDOWS上操作问题

1、第一点就是： windows上执行mapreduce，必须打jar包到所有slave节点才能正确分布式运行mapreduce程序。

2、【答案】：可以，但是最好不要这么做，RedHatLinux或者是Ubuntu才是Hadoop的最佳操作系统。

3、通常都是防火墙设置问题，你需要检查Windows防火墙配置，如果linux也有防火墙，也需要检查配置策略。

4、运行jps没有显示，应该是没有配置好系统的path、java_home和classpath。执行hadoopfs-ls等同于hadoopfs-ls.该命令查看的是hdfs的/user/hadoop目录。而且默认是没有这个目录的。需要自己创建。

5、下操作，可能遇到各种问题），一般需花费几十分钟到几个小时。注意，下载过程会用到git，因此应该事先安装了git。

6、“SBT”，之后intellij会自动识别SBT文件，并下载依赖的外部jar包，整个流程用时非常长，取决于机器的网络环境（不建议在windows 下操作，可能遇到各种问题），一般需花费几十分钟到几个小时。

Q2: 怎么在windows上搭建hadoop环境

1、选择镜象下载地点，可任选其一，一般选择第一个即可。进入下一步后，按图片上的标识操作。必须保证“Net Category”下的“OpenSSL”被安装。

2、这样开发的spark应用程序的时候不需要打包spark开发包和scala的库文件，减少不必要的网络IO和磁盘IO。

3、在安装Hadoop之前，需要进入Linux环境下，连接Linux使用SSH(安全Shell)。按照下面提供的步骤设立Linux环境。创建一个用在开始时，建议创建一个单独的用户Hadoop以从Unix文件系统隔离Hadoop文件系统。

4、步骤：1）将Hadoop-eclipse-Plugin-jar(本文已提供，可自行下载)放到MyEclipse安装目录的dropins文件夹下，重新启动MyEclipse。

5、在这里咱们就来看看第二种方案：如何再Windows下快速安装一个Hadoop环境，并结合Eclipse开发环境研究和调整Hadoop代码。

Q3: 怎样让Hadoop在Windows上运行且支持C++

1、下载安装JDK，以及Eclipse 具体看此链接：http：//blog.csdn.net/weixuehao/article/details/17715793 新建JAVA Project 去cloudera网站下载hadoop的CDH3u6版本。

2、单机多核运行请用openmp，舍得花大气力改代码的话，TBB/std：thread。考虑以后扩展到分布式，请用MPI。只有大量分布式存储的数据，并且计算量不大，hadoop才是正确的选择。hadoop注重分布式存储，核心是存储，计算往存储迁移。

3、另外也和系统，驱动，其他软件等也有联系。当前，是否可以玩一个游戏，首先需要查看游戏运行的配置要求和机器的配置要求做一个对比，查看机器的配置是否符合。如果可以满足游戏的最低运行需求，则可以支持。

Q4: window上的myeclipse怎么配置hadoop

若在windows的Eclipse工程中直接启动mapreduc程序，需要先把hadoop集群的配置目录下的xml都拷贝到src目录下，让程序自动读取集群的地址后去进行分布式运行(您也可以自己写java代码去设置job的configuration属性)。

首先要安装Myeclipse，在Ubuntu下安装Myeclipse和windows环境下安装的方法一样，下载myeclipse-1-offline-installer-linux.run然后双击运行就ok了。

首先要安装jdk。打开MyEclipse，点击工具栏上的window -- preferences选项，如图所示。在打开的页面点击 Java--Installed JREs ，然后点击Add按钮。如图所示。在新的页面选择standard VM，然后点击Next。

Q5: windows下的hadoop程序怎么在集群中运行

要在Hadoop集群运行上运行JNI程序，首先要在单机上调试程序直到可以正确运行JNI程序，之后移植到Hadoop集群就是水到渠成的事情。Hadoop运行程序的方式是通过jar包，所以我们需要将所有的class文件打包成jar包。

启动Hadoop 启动Hadoop集群需要启动HDFS集群和Map/Reduce集群。

$ sudo apt-get install cabextract在Windows上执行Hadoop，配置好java，cygwin，hadoop之后，要怎么做启动cygwin就可以操作hadoop了。

独立模式下调试Hadoop集群的MapReduce程序非常方便，所以一般情况下，该模式在学习或者开发阶段调试使用。

Ambari GUI 的登录用户为 admin/admin。并且指定 Ambari Server 的运行用户为 root。

关于windowshadoop配置和windows下配置hadoop的介绍到此就结束了，不知道你从中找到你需要的信息了吗？如果你还想了解更多这方面的信息，记得收藏关注本站。