文档章节

Hadoop tutorial - - windows开发环境搭建 2015-3-20

jayronwang
 jayronwang
发布于 2015/03/20 14:43
字数 201
阅读 45
收藏 0

http://www.thebigdata.cn/Hadoop/10358.html

http://www.cnblogs.com/shitouer/archive/2012/05/29/2522860.html


tool:

eclipse Luna

hadoop plugin https://github.com/winghc/hadoop2x-eclipse-plugin


安装hadoop服务

http://www.cnblogs.com/kinglau/archive/2013/08/20/3270160.html

hadoop version 遇到错误http://blog.csdn.net/sx5486510/article/details/39395143 直接在cgywin执行以下命令即可

export HADOOP_CLASSPATH=$(cygpath -pw $(hadoop classpath)):$HADOOP_CLASSPATH


http://www.aboutyun.com/thread-8311-1-1.html

http://download.csdn.net/detail/u014310430/8402965 

http://stackoverflow.com/questions/26162578/error-hadoop-on-windows-via-cygwin-could-not-locate-null-bin-winutils-exe

https://issues.apache.org/jira/browse/HADOOP-10133

复制winutils.exe hadoop.dll至hadoop/bin,好东西,还要放到c盘的windows/system32下,并重启计算机才会生效



1 安装hadoop plugin

将hadoop-eclipse-plugin-1.0.4.jar拷贝到eclipse的plugins目录下,重启eclipse即可

2 eclipse设置

Hadoop的安装路径就是hadoop安装包hadoop.tar.gz解压缩后的路径

下载地址 http://www.apache.org/dyn/closer.cgi/hadoop/core/

hadoop 1.0.4下载地址 http://download.csdn.net/detail/jimenghu/5640965





© 著作权归作者所有

共有 人打赏支持
jayronwang
粉丝 12
博文 105
码字总数 20353
作品 0
厦门
windows 安装 spark 及 pycharm 调试 TopN 实例

首先声明本文搭建的环境为:windows8.1 + spark1.6.0 + python2.7 + jdk8,spark on windows 对 windows及python版本不怎么挑,但是对 spark 版本要求极其苛刻,比如 spark1.6.1 就无法运行。...

大数据之路
2012/06/28
0
0
Windows下单机安装Spark开发环境

机器:windows 10 64位。 因Spark支持java、python等语言,所以尝试安装了两种语言环境下的spark开发环境。 1、Java下Spark开发环境搭建 1.1、jdk安装 安装oracle下的jdk,我安装的是jdk 1.7...

涩女郎
2016/09/20
38
0
hadoop window 搭建

hadoop 原理参考:用 Hadoop 进行分布式并行编程 官方中文文档:http://hadoop.apache.org/core/docs/r0.18.2/cn/index.html 1. 首先安装 cygwin ssh 参考 windows ssh 搭建 2. 搭建hadoop ...

walb呀
2017/12/07
0
0
hadoop(02)、使用JAVA API对HDFS进行基本操作

本文源码码云地址:https://gitee.com/MaxBill/hadoop 在上篇《hadoop(01)、windows平台下hadoop环境搭建》中,实践了在windows平台下使用搭建hadoop开发环境,同时搭建完毕在基于命令行的形...

MaxBill
2017/11/16
0
0
cygwin+hadoop环境 hive安装问题

本人初学,在windows上利用cygwin搭建了hadoop(0.20.2版本)开发环境,而且执行了WorkCount,自己也写了一个Map/Reduce执行都没 有问题。之后尝试安装Hive,我用的0.7.1版本,按照网上给的一些...

王二铁
2012/02/17
2.2K
1

没有更多内容

加载失败,请刷新页面

加载更多

下一页

MySQL 乱七八糟的可重复读隔离级别实现

MySQL 乱七八糟的可重复读隔离级别实现 摘要: 原文可阅读 http://www.iocoder.cn/Fight/MySQL-messy-implementation-of-repeatable-read-isolation-levels 「shimohq」欢迎转载,保留摘要,谢...

DemonsI
46分钟前
2
0
Spring源码阅读——2

在阅读源码之前,先了解下Spring的整体架构: 1、Spring的整体架构 1. Ioc(控制反转) Spring核心模块实现了Ioc的功能,它将类与类之间的依赖从代码中脱离出来,用配置的方式进行依赖关系描...

叶枫啦啦
今天
1
0
jQuery.post() 函数格式详解

jquery的Post方法$.post() $.post是jquery自带的一个方法,使用前需要引入jquery.js 语法:$.post(url,data,callback,type); url(必须):发送请求的地址,String类型 data(可选):发送给后台的...

森火
今天
0
0
referer是什么意思?

看看下面这个回答(打不开网页可以把网址复制到搜索栏): https://zhidao.baidu.com/question/577842068.html

杉下
今天
1
0
使用U盘安装CentOS-解决U盘找不到源

1. 使用UltraISO制作CentOS安装盘 如果需要安装带界面的系统,为保证安装顺利,可选择Everything版本的ISO制作安装盘。 2. 在BIOS中选择使用U盘安装 系统启动后,进入安装选择界面,其中有三...

Houor
今天
1
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部