文档章节

使用sourceCRT访问CentOS7中hdfs文件爆炸的问题

ssssssssssssssss
 ssssssssssssssss
发布于 2017/08/19 21:45
字数 715
阅读 12
收藏 0

hadoop初学者,刚学完理论,然后进入实际操作,然后sourceCRT就爆炸了,

是这样的,使用这段代码创建文件,并写入hello hadoop !后,在crt中输入命令查看文件中的内容,

然后就crt控制台就炸了,但是奇怪的是,再次输入命令,命令是乱码,但是可以正常执行,

然后就开始想办法,先把文件复制到本地目录,看文件里面都有什么内容,cat了一下什么都没有,尴尬,明明应该写进去了啊,然后vim编辑一下,看看能不能查看到里面的内容,发现里面的内容是几个未知字符加hello hadoop!,然后就炸了,前面的东西哪儿来的,然后用ftp把文件down到win上,发现和编辑页面看到的擦汗不多,前面多了几个字符,应该是二进制的内容,然后就开始自己百度,各种改编码格式的方法,但是我的都是utf8啊,没法再改了啊,然后就各种改编码,各种求助,发现都不行,折腾了好久,然后都快要放弃了,用java代码读一下试试,根据字节数组读取,发现和win中读取的一样,前面也是多了未知字符,然后想是不是读取方式问题,然后用readUTF读取,咦,发现是对的,但是hadoop在linux中的读取命令又不是我写的,我这读取问题,自己也不能去改他源代码啊,而且hadoop都是utf8,突然自己不知怎么就想用CentOS7自带终端试一下,一试之下发现,是正常的,哇塞,看到了希望,那么可能就是CRT的问题了,于是去CRT看配置的问题,一看,编码也是utf8啊,尴尬,全局设置瞅一遍,发现可能和仿真终端有关系,试试吧,于是开始从第一个开始往下尝试,试着试着,出现

这种情况,前面多个未知字符,嗯,好歹不是完全爆炸了,在往下试试看,试了五六个发现这是最好的了,然后然后心里开始想这是不是算是最好的了,这软件是不是有问题,但是心里又想和他刚到底,不全部试完就是不死心,于是继续,终于在试到WYSE50的时候,终于正常了,美滋滋,

总结:使用sourceCRT读取CentOS7中通过MyEclipse创建并写入内容的hdfs文件爆炸,如果不是自己编码的问题,那就尝试用自带终端读取看是否正常,正常则修改CRT中的仿真终端,找到适合自己Linux系统的仿真终端

© 著作权归作者所有

共有 人打赏支持
ssssssssssssssss
粉丝 2
博文 4
码字总数 1631
作品 0
私信 提问
大数据学习笔记-(二)启动集群&配置IDE环境

参考网站:http://hadoop.apache.org/docs/r2.6.0/hadoop-project-dist/hadoop-hdfs/HdfsSnapshots.html 1.启动集群,格式化文件系统 bin/hdfs namenode -format 2.启动 sbin/start-dfs.sh ......

langyw98
2017/11/06
0
0
CentOS7安装Hadoop集群

http://www.jianshu.com/p/a69972d8a119 安装Hadoop之前,请先安装好zookeeper集群并启动 参考 CentOS7安装Zookeeper集群 我这里准备了三台服务器,一台主机名为hadoop1(做NameNode),一台主...

两毛五哥哥
2017/12/19
0
0
centos7基础文档一

centos7基础文档一 一.centos7与原有版本的区别 1 文件系统 centos7选择了xfs作为 默认的文件系统。但是之前版本的所有的文件系统仍然支持,如:EXT文件系统之类的,而是对未来爆炸式的增长的...

挚爱linux
2017/05/11
0
0
Hadoop大数据入门到实战(第三节) - HDFS文件系统上(入门)

本小节我们来学习Hadoop的HDFS系统,我们先来体验一下HDFS然后再来了解他的原理。 HDFS初体验 HDFS(分布式文件管理系统),顾名思义,它就是我们用来管理海量文件的一个系统。现在是一个数据...

MasterXiao
05/29
0
0
Hadoop基础之HA的安装与配置

即上篇文章Hadoop基础之HA(高可用)之后,本文将介绍HDFS HA的搭建与配置。参考官方文档:http://hadoop.apache.org/docs/r2.7.4/hadoop-project-dist/hadoop-hdfs/HDFSHighAvailabilityWith...

landy8530
2017/11/25
0
0

没有更多内容

加载失败,请刷新页面

加载更多

小白带你认识netty(三)之NioEventLoop的线程(或者reactor线程)启动(一)

在第一章中,我们看关于NioEventLoopGroup的初始化,我们知道了NioEventLoopGroup对象中有一组EventLoop数组,并且数组中的每个EventLoop对象都对应一个线程FastThreadLocalThread,那么这个...

天空小小
今天
3
0
PHP动态扩展Redis模块

查看已有模块 [root@test-a ~]# /usr/local/php/bin/php -m[PHP Modules]bz2Core...zlib[Zend Modules] 下载包,解压,生成configure文件 [root@test-a ~]# cd /usr/local/src/[ro......

野雪球
今天
3
0
在Ignite中使用线性回归算法

在本系列前面的文章中,简单介绍了一下Ignite的机器学习网格,下面会趁热打铁,结合一些示例,深入介绍Ignite支持的一些机器学习算法。 如果要找合适的数据集,会发现可用的有很多,但是对于...

李玉珏
今天
5
0
Mybatis应用学习——简单使用示例

1. 传统JDBC程序中存在的问题 1. 一个简单的JDBC程序示例: public class JDBCDemo {public static void main(String[] args) {Connection con=null;PreparedStatement statemen...

江左煤郎
今天
4
0
使用JavaScript编写iOS应用业务逻辑

JSAUIKitCocoa使你可以使用JavaScript编写对性能要求不高但可能变动性很大的iOS应用的业务逻辑部分,View组件、需要多线程支持的Model等则直接使用原生对象。 编写方式与React Native相似,但...

neal01
今天
5
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部