
正文
hadoop客户端Windows,hadoop客户端怎么进入
提示:扫一扫查出行【扫一扫了解最新限行尾号】
复制提示
是否可以在Windows上运行Hadoop?
1、【答案】:你最好不要这么做,Red Hat Linux或者是Ubuntu才是Hadoop的最佳操作系统。在Hadoop安装中,Windows通常不会被使用,因为会出现各种各样的问题。因此,Windows绝对不是Hadoop的推荐系统。
2、可以尝试使用wine 来执行windows系统。Linux的学习是一个过程,需要不断的去探索。
3、下载安装JDK,以及Eclipse 具体看此链接:http://blog.csdn.net/weixuehao/article/details/17715793 新建JAVA Project 去cloudera网站下载hadoop的CDH3u6版本。
4、第一点结论就是: windows上执行mapreduce,必须打jar包到所有slave节点才能正确分布式运行mapreduce程序。二 在Linux上的通过以下命令触发MapReduce程序的测试。
5、考虑以后扩展到分布式,请用MPI。只有大量分布式存储的数据,并且计算量不大,hadoop才是正确的选择。hadoop注重分布式存储,核心是存储,计算往存储迁移。hadoop的mapreduce编程方式和你现在的代码很不一样,不是能直接调用的。
6、通常都是防火墙设置问题, 你需要检查Windows防火墙配置, 如果linux也有防火墙,也需要检查配置策略。
相关问答
Q1: 求助,在windows下安装hadoop遇到的一个问题
不建议先在window/cygwin上测试,直接用这个环境有很多问题,都是不好理解的。
先Telnet看看端口开启了没有 如果确认开启了,应该是防火墙的问题,需要开放相关端口。
换了台机器,问题解决,hadoop-0.2-test.jar TestDFSIO 和 hadoop-0.2-examples.jar sort测试通过,期间又遇到了2个问题。
记得刚出win版本的那天,我兴冲冲的下载部署了一整天还是遇到各种问题没能部署成功。至今为止还没见到有哪个公司把hadoop生产环境部署在windows上的。
可能是你写错了吧,你的系统环境变量设置的什么,用echo $java_home,看显示什么内容。
Q2: 是否可以在Windows上运行Hadoop?可以在Windows上运行Hadoop吗?
【答案】:你最好不要这么做,Red Hat Linux或者是Ubuntu才是Hadoop的最佳操作系统。在Hadoop安装中,Windows通常不会被使用,因为会出现各种各样的问题。因此,Windows绝对不是Hadoop的推荐系统。
windows不能执行hadoop吗为什么非要用linux执行hadoop hadoop 0还是20之后有相容windows的版本,然而大部分都是部署在linux上的。记得刚出win版本的那天,我兴冲冲的下载部署了一整天还是遇到各种问题没能部署成功。
前言 Windows下运行Hadoop,通常有两种方式:一种是用VM方式安装一个Linux操作系统,这样基本可以实现全Linux环境的Hadoop运行;另一种是通过Cygwin模拟Linux环境。
配置插件 打开Windows-Open Perspective中的Map/Reduce,在此perspective下进行hadoop程序开发。打开Windows-Show View中的Map/Reduce Locations,如下图右键选择New Hadoop location…新建hadoop连接。
Q3: hadoop有windows版本吗
【答案】: 可以,但是最好不要这么做,RedHatLinux或者是Ubuntu才是Hadoop的最佳操作系统。
【答案】:你最好不要这么做,Red Hat Linux或者是Ubuntu才是Hadoop的最佳操作系统。在Hadoop安装中,Windows通常不会被使用,因为会出现各种各样的问题。因此,Windows绝对不是Hadoop的推荐系统。
windows不能执行hadoop吗为什么非要用linux执行hadoop hadoop 0还是20之后有相容windows的版本,然而大部分都是部署在linux上的。记得刚出win版本的那天,我兴冲冲的下载部署了一整天还是遇到各种问题没能部署成功。
我的操作系统是Windows 7,使用的Cygwin版本是7-1,hadoop版本是0.2。
新建JAVA Project 去cloudera网站下载hadoop的CDH3u6版本。
原因:window本地无法获取hadoop的配置,报错是缺少winutils.exe程序。Hadoop都是运行在Linux系统下的,在windows下eclipse、Idea中运行mapreduce程序和操作hdfs的API等,要首先安装Windows下运行的支持插件。
Q4: 怎么在windows上搭建hadoop环境
1、选择镜象下载地点,可任选其一,一般选择第一个即可。进入下一步后,按图片上的标识操作。 必须保证“Net Category”下的“OpenSSL”被安装。
2、这样开发的spark应用程序的时候不需要打包spark开发包和scala的库文件,减少不必要的网络IO和磁盘IO。
3、在安装Hadoop之前,需要进入Linux环境下,连接Linux使用SSH(安全Shell)。按照下面提供的步骤设立Linux环境。创建一个用 在开始时,建议创建一个单独的用户Hadoop以从Unix文件系统隔离Hadoop文件系统。
4、步骤:1)将Hadoop-eclipse-Plugin-jar(本文已提供,可自行下载)放到MyEclipse安装目录的dropins文件夹下,重新启动MyEclipse。
5、在这里咱们就来看看第二种方案:如何再Windows下快速安装一个Hadoop环境,并结合Eclipse开发环境研究和调整Hadoop代码。
6、在浏览器中输入 http://localhost:50070 ,即可查看相关信息,截图如下 至此,hadoop的环境就已经搭建好了。
关于hadoop客户端Windows和hadoop客户端怎么进入的介绍到此就结束了,不知道你从中找到你需要的信息了吗 ?如果你还想了解更多这方面的信息,记得收藏关注本站。






