文档章节

Hadoop搭建-准备

天呀鲁哇
 天呀鲁哇
发布于 2017/06/16 00:20
字数 552
阅读 16
收藏 0

Ubuntu环境下

1,安装ssh

    apt-cache search openssh-server   | apt-cache search apt是ubuntu的软件库   search是查找是否存在这个软件

    apt-get install openssh-server       | insatll  是安装的命令

    注:正常情况下ssh是都已经安装好的,如果不知道在什么目录下,直接可以执行命令 find / -name ssh,查找安装目录; 默认配置文件在/etc/ssh下的sshd_config

    ssh分为client和server两部分,client是用来链接别的服务器的,server是用来监听端口让别人访问此服务器的;

 

2,通过Source shell协议链接到服务器

     1,ip   在服务器上通过ifconfig 查看;

     2,端口  netstat -nl   | netstat是显示现在网络链接情况的命令  其中 -a是显示全部   -l是显示lister;显示结果分为有源链接和无源链接   有源链接(active internet)是可以通过外部链接的    无源链接(active UNIX domain)是计算机内部通讯的 ;  n是不准显示别名

     注:默认情况下ssh服务器是监听22端口的; 修改sshd_config文件   sudo vi sshd_config  按i进入编辑模式修改port字段,之后按esc进入尾部模式输入 :x 退出vi并且保存文档;然后执行  source sshd_config让配置生效;

          当时用vi的时候如果出现上下左右键异常   可以卸载ubuntu上面vim-common,然后重新安装vim(sudo apt-get remove vim-common     sudo apt-get install vim )

 

3,安装jdk

    安装JDK: 

     apt-caech search openjdk

      apt-get install openjdk-8-jdk

    配置环境变量:

        在linux中和window一样,环境变量是分为用户环境边来给你和系统环境变量;系统环境变量设置在/etc/profile中;   我们以export开头来设置系统环境变量;

        sudo vi /etc/profile   按i进入编辑模式   然后再末尾添加  

                    export JAVA_HOME=/usr/lib/jvm/jdk1.8.0_openjdk-amd64

                    export CLASSPATH=.:$JAVA_HOME/lib:$JAVA_HOME/jre/lib:$CLASSPATH

                    export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH

        其中要注意JAVA_HOME需要根据按照你安装的你安装的位置改变;

        运行   source /etc/profile 来让设置立即生效!   这样就不用重启机器生效了!

    验证:

            java -version

 

 

  

© 著作权归作者所有

天呀鲁哇
粉丝 8
博文 98
码字总数 42007
作品 0
长宁
程序员
私信 提问
Hadoop集群搭建-04安装配置HDFS

Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hadoop集群搭建-01前期准备 HDFS是配合Hadoop使用的分...

虚拟世界的懒猫
07/22
21
0
Hadoop集群搭建-05安装配置YARN

Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hadoop集群搭建-01前期准备 先保证集群5台虚拟机, nn1 nn2 s1 s2 s3 hadoop 是 是 是 ...

虚拟世界的懒猫
07/23
30
0
Hadoop集群搭建-01前期准备

Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hadoop集群搭建-01前期准备 整个搭建hadoop集群的流程...

虚拟世界的懒猫
07/21
51
0
Hadoop集群搭建-03编译安装hadoop

Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hadoop集群搭建-01前期准备 hadoop的编译和安装是直接...

虚拟世界的懒猫
07/22
21
0
hadoop(02)、使用JAVA API对HDFS进行基本操作

本文源码码云地址:https://gitee.com/MaxBill/hadoop 在上篇《hadoop(01)、windows平台下hadoop环境搭建》中,实践了在windows平台下使用搭建hadoop开发环境,同时搭建完毕在基于命令行的形...

MaxBill
2017/11/16
670
0

没有更多内容

加载失败,请刷新页面

加载更多

EDI 电子数据交换全解指南

EDI(Electronic Data Interchange,电子数据交换)技术使得企业与企业(B2B)实现通信自动化,帮助交易伙伴和组织更快更好地完成更多工作,并消除了人工操作带来的错误。从零售商到制造商、物...

EDI知行软件
今天
3
0
CentOS7的LVM动态扩容

# 问题 CentOS7上面的磁盘空间有点紧张,需要扩容。 解决 查询当前磁盘状态 [root@xxx ~]# lsblkNAME MAJ:MIN RM SIZE RO TYPE MOUNTPOINTfd0 2:0 1 4K ...

亚林瓜子
今天
3
0
Kafka 0.8 Producer (0.9以前版本适用)

Kafka旧版本producer由scala编写,0.9以后已经废除 示例代码如下: import kafka.producer.KeyedMessage;import kafka.javaapi.producer.Producer;import kafka.producer.ProducerConfig;......

实时计算
今天
5
0
Giraph源码分析(八)—— 统计每个SuperStep中参与计算的顶点数目

作者|白松 目的:科研中,需要分析在每次迭代过程中参与计算的顶点数目,来进一步优化系统。比如,在SSSP的compute()方法最后一行,都会把当前顶点voteToHalt,即变为InActive状态。所以每次...

数澜科技
今天
6
0
Navicat 快捷键

操作 结果 ctrl+q 打开查询窗口 ctrl+/ 注释sql语句 ctrl+shift +/ 解除注释 ctrl+r 运行查询窗口的sql语句 ctrl+shift+r 只运行选中的sql语句 F6 打开一个mysql命令行窗口 ctrl+l 删除一行 ...

低至一折起
今天
13
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部