文档章节

Hadoop tutorial - - windows开发环境搭建 2015-3-20

jayronwang
 jayronwang
发布于 2015/03/20 14:43
字数 201
阅读 45
收藏 0

http://www.thebigdata.cn/Hadoop/10358.html

http://www.cnblogs.com/shitouer/archive/2012/05/29/2522860.html


tool:

eclipse Luna

hadoop plugin https://github.com/winghc/hadoop2x-eclipse-plugin


安装hadoop服务

http://www.cnblogs.com/kinglau/archive/2013/08/20/3270160.html

hadoop version 遇到错误http://blog.csdn.net/sx5486510/article/details/39395143 直接在cgywin执行以下命令即可

export HADOOP_CLASSPATH=$(cygpath -pw $(hadoop classpath)):$HADOOP_CLASSPATH


http://www.aboutyun.com/thread-8311-1-1.html

http://download.csdn.net/detail/u014310430/8402965 

http://stackoverflow.com/questions/26162578/error-hadoop-on-windows-via-cygwin-could-not-locate-null-bin-winutils-exe

https://issues.apache.org/jira/browse/HADOOP-10133

复制winutils.exe hadoop.dll至hadoop/bin,好东西,还要放到c盘的windows/system32下,并重启计算机才会生效



1 安装hadoop plugin

将hadoop-eclipse-plugin-1.0.4.jar拷贝到eclipse的plugins目录下,重启eclipse即可

2 eclipse设置

Hadoop的安装路径就是hadoop安装包hadoop.tar.gz解压缩后的路径

下载地址 http://www.apache.org/dyn/closer.cgi/hadoop/core/

hadoop 1.0.4下载地址 http://download.csdn.net/detail/jimenghu/5640965





© 著作权归作者所有

共有 人打赏支持
jayronwang
粉丝 13
博文 105
码字总数 20353
作品 0
厦门
私信 提问
windows 安装 spark 及 pycharm 调试 TopN 实例

首先声明本文搭建的环境为:windows8.1 + spark1.6.0 + python2.7 + jdk8,spark on windows 对 windows及python版本不怎么挑,但是对 spark 版本要求极其苛刻,比如 spark1.6.1 就无法运行。...

大数据之路
2012/06/28
0
0
Windows下单机安装Spark开发环境

机器:windows 10 64位。 因Spark支持java、python等语言,所以尝试安装了两种语言环境下的spark开发环境。 1、Java下Spark开发环境搭建 1.1、jdk安装 安装oracle下的jdk,我安装的是jdk 1.7...

涩女郎
2016/09/20
38
0
hadoop window 搭建

hadoop 原理参考:用 Hadoop 进行分布式并行编程 官方中文文档:http://hadoop.apache.org/core/docs/r0.18.2/cn/index.html 1. 首先安装 cygwin ssh 参考 windows ssh 搭建 2. 搭建hadoop ...

walb呀
2017/12/07
0
0
hadoop(02)、使用JAVA API对HDFS进行基本操作

本文源码码云地址:https://gitee.com/MaxBill/hadoop 在上篇《hadoop(01)、windows平台下hadoop环境搭建》中,实践了在windows平台下使用搭建hadoop开发环境,同时搭建完毕在基于命令行的形...

MaxBill
2017/11/16
0
0
如何在 Windows 10 中搭建 Node.js 环境?

【编者按】本文作者为 Szabolcs Kurdi,主要通过生动的实例介绍如何在 Windows 10 中搭建 [Node.js][1] 环境。文章系国内 [ITOM][2] 管理平台 [OneAPM][3] 编译呈现。 在本文中,笔者将展示如...

OneAPM蓝海讯通
2016/06/07
20
0

没有更多内容

加载失败,请刷新页面

加载更多

多线程的实现方式

多线程是指 一个程序运行时,产生或使用了不止一个线程。 线程的生命周期是怎么样的,下面这张图我们可以看出些端倪: 这章我们主要讨论多线程实现的方式,基础知识部分我们可以下来再恶补。...

搬砖大侠
16分钟前
0
0
新人千万不要在 Windows 上使用 Ruby on Rails

标题:新人千万不要在 Windows 上使用 Ruby on Rails 副标题:鼓励新人在 Linux 和 Mac 上使用 Ruby on Rails ! 原则:要走寻常路,不要学美特斯邦伟! "在 Windows上 使用 Ruby on Rails "是...

Jason909
24分钟前
0
0
day177-2018-12-14-英语流利阅读-待学习

艾滋病的治愈方法是否触手可及? Daniel 2018-12-14 1.今日导读 几十年来,艾滋病一直是世界上最难对付的“超级绝症”之一,从人类历史上第一次诊断出艾滋病病例的 20 世纪 80 年代早期到 20...

飞鱼说编程
49分钟前
7
0
java 合成两张图片或图片与二维码

java中偶尔会出现需要将一张小图片嵌入大图中或带二维码的海报图片,那么本文就是奔着这个目的来的,直接上腊肉! zxing是生成1D和2D条形或二维码的工具类库,java图形库Graphics2D进行图片的...

貔貅叔
54分钟前
4
0
80后阿里P10,“关老板”如何带着MaxCompute一路升级?

我是个幸运的人。虽然幸运不能被复制,但是眼光和努力可以。 关涛/关老板,80后的阿里P10,阿里巴巴通用计算平台负责人,阿里巴巴计算平台研究员。12年职场人生,微软和阿里的选择。 关涛的花...

阿里云官方博客
今天
3
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部