文档章节

Hadoop tutorial - - windows开发环境搭建 2015-3-20

jayronwang
 jayronwang
发布于 2015/03/20 14:43
字数 201
阅读 45
收藏 0

http://www.thebigdata.cn/Hadoop/10358.html

http://www.cnblogs.com/shitouer/archive/2012/05/29/2522860.html


tool:

eclipse Luna

hadoop plugin https://github.com/winghc/hadoop2x-eclipse-plugin


安装hadoop服务

http://www.cnblogs.com/kinglau/archive/2013/08/20/3270160.html

hadoop version 遇到错误http://blog.csdn.net/sx5486510/article/details/39395143 直接在cgywin执行以下命令即可

export HADOOP_CLASSPATH=$(cygpath -pw $(hadoop classpath)):$HADOOP_CLASSPATH


http://www.aboutyun.com/thread-8311-1-1.html

http://download.csdn.net/detail/u014310430/8402965 

http://stackoverflow.com/questions/26162578/error-hadoop-on-windows-via-cygwin-could-not-locate-null-bin-winutils-exe

https://issues.apache.org/jira/browse/HADOOP-10133

复制winutils.exe hadoop.dll至hadoop/bin,好东西,还要放到c盘的windows/system32下,并重启计算机才会生效



1 安装hadoop plugin

将hadoop-eclipse-plugin-1.0.4.jar拷贝到eclipse的plugins目录下,重启eclipse即可

2 eclipse设置

Hadoop的安装路径就是hadoop安装包hadoop.tar.gz解压缩后的路径

下载地址 http://www.apache.org/dyn/closer.cgi/hadoop/core/

hadoop 1.0.4下载地址 http://download.csdn.net/detail/jimenghu/5640965





© 著作权归作者所有

共有 人打赏支持
jayronwang
粉丝 12
博文 105
码字总数 20353
作品 0
厦门
windows 安装 spark 及 pycharm 调试 TopN 实例

首先声明本文搭建的环境为:windows8.1 + spark1.6.0 + python2.7 + jdk8,spark on windows 对 windows及python版本不怎么挑,但是对 spark 版本要求极其苛刻,比如 spark1.6.1 就无法运行。...

大数据之路
2012/06/28
0
0
Windows下单机安装Spark开发环境

机器:windows 10 64位。 因Spark支持java、python等语言,所以尝试安装了两种语言环境下的spark开发环境。 1、Java下Spark开发环境搭建 1.1、jdk安装 安装oracle下的jdk,我安装的是jdk 1.7...

涩女郎
2016/09/20
38
0
hadoop window 搭建

hadoop 原理参考:用 Hadoop 进行分布式并行编程 官方中文文档:http://hadoop.apache.org/core/docs/r0.18.2/cn/index.html 1. 首先安装 cygwin ssh 参考 windows ssh 搭建 2. 搭建hadoop ...

walb呀
2017/12/07
0
0
hadoop(02)、使用JAVA API对HDFS进行基本操作

本文源码码云地址:https://gitee.com/MaxBill/hadoop 在上篇《hadoop(01)、windows平台下hadoop环境搭建》中,实践了在windows平台下使用搭建hadoop开发环境,同时搭建完毕在基于命令行的形...

MaxBill
2017/11/16
0
0
cygwin+hadoop环境 hive安装问题

本人初学,在windows上利用cygwin搭建了hadoop(0.20.2版本)开发环境,而且执行了WorkCount,自己也写了一个Map/Reduce执行都没 有问题。之后尝试安装Hive,我用的0.7.1版本,按照网上给的一些...

王二铁
2012/02/17
2.2K
1

没有更多内容

加载失败,请刷新页面

加载更多

20181018 上课截图

![](https://oscimg.oschina.net/oscnet/49f66c08ab8c59a21a3b98889d961672f30.jpg) ![](https://oscimg.oschina.net/oscnet/a61bc2d618b403650dbd4bf68a671fabecb.jpg)......

小丑鱼00
11分钟前
0
0
WinDbg

参考来自:http://www.cnit.net.cn/?id=225 SRV*C:\Symbols*http://msdl.microsoft.com/download/symbols ctrl + d to open dump_file Microsoft (R) Windows Debugger Version 6.12.0002.633......

xueyuse0012
今天
2
0
OSChina 周五乱弹 —— 想不想把92年的萝莉退货

Osc乱弹歌单(2018)请戳(这里) 【今日歌曲】 @罗马的王:分享松澤由美的单曲《地球ぎ》 很久没看圣斗士星矢了 《地球ぎ》- 松澤由美 手机党少年们想听歌,请使劲儿戳(这里) @开源中国首...

小小编辑
今天
14
2
springBoot条件配置

本篇介绍下,如何通过springboot的条件配置,控制Bean的创建 介绍下开发环境 JDK版本1.8 springboot版本是1.5.2 开发工具为 intellij idea(2018.2) 开发环境为 15款MacBook Pro 前言 很多时候,...

贺小五
今天
1
0
javascript source map 的使用

之前发现VS.NET会为压缩的js文添加一个与文件名同名的.map文件,一直没有搞懂他是用来做什么的,直接删除掉运行时浏览器又会报错,后来google了一直才真正搞懂了这个小小的map文件背后的巨大...

粒子数反转
昨天
1
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部