加载中
重新配置CDH

注:只在这步发生错误并需要重新安装CDH时执行过以下步骤并且有效。在安装spark、yarn等过程中失败并需要重新安装CDH时卸载较麻烦,可以考虑完全重装。 停止所有 cloudera-scm-agent 服务 和 ...

Spring boot与habse、hive、spark整合demo

Spring boot与habse、hive、spark整合demo 下载地址:https://github.com/lwenhaoCN/hadoop 该demo包含hbase hive spark 测试使用的demo cn.lwenhao.hbase.TestHbaseSql 为测试HBase,包含删...

Spring boot 与 hadoop整合

Spring boot 与 hadoop 整合 获取目录 HadoopTest.java import org.apache.hadoop.fs.FileStatus; import org.springframework.beans.factory.annotation.Autowired; import org.springfram...

centos7安装Hadoop+hbase+hive步骤

centos7安装Hadoop+hbase+hive步骤 一、IP、DNS、主机名 linux 静态IP、DNS、主机名配置 二、Hadoop 1. IP分配 2. 安装jdk8(四台) yum list java* yum install -y java-1.8.0-openjdk-dev...

KVM基础命令

KVM基础命令 virsh list # 查看在运行的虚拟机 virsh dumpxml vm-name # 查看kvm虚拟机配置文件 virsh start vm-name # 启动kvm虚拟机 virsh shutdown vm-name # 正常关机 virs......

03/21 11:33
5
linux 静态IP、DNS、主机名配置

linux 静态IP、DNS、主机名配置 一、IP配置 进入网络配置文件目录 cd /etc/sysconfig/network-scripts/ 列出当前目录下文件名 ll 编辑配置文件 注意:ifcfg-eth0是我电脑的一个网卡标识,可能...

linux 虚拟机安装

一、虚拟化检查 1. 检查cpu是否支持 grep -E 'vmx|svm' /proc/cpuinfo 2. 检查虚拟化是否开启 lsmod |grep kvm 显示内容与截图一致,服务器已经开启了虚拟化的支持,如果没有前2条内容,需要...

Stack trace: ExitCodeException exitCode=10:

Stack trace: ExitCodeException exitCode=10: 问题1: Spark 提交任务报错 使用命令: spark-submit --class cn.lwenhao.HiveApplication --master yarn --deploy-mode cluster SpringBoot...

Required executor memory (1024+384 MB) is above the max threshold (1024 MB) of this cluster!

Required executor memory (1024+384 MB) is above the max threshold (1024 MB) of this cluster! 问题: 运行spark-shell时报错: [root@master88 ~]# spark-shell Setting default log l...

KVM 虚拟机快照

KVM 虚拟机快照 一、查看kvm磁盘格式 kvm虚拟机默认使用raw格式的镜像格式,性能最好,速度最快,它的缺点就是不支持一些新的功能,如支持镜像,zlib磁盘压缩,AES加密等。要使用镜像功能,磁盘...

03/14 16:30
5
DataNode 运行状况

群集中有 753 个 副本不足的块 块。群集中共有 756 个块。百分比 副本不足的块: 9 问题: centos7安装cdh,集群状态: 群集中有 753 个 副本不足的块 块。群集中共有 756 个块。百分比 副本不...

Command aborted because of exception: Command timed-out after 90 seconds

Command aborted because of exception: Command timed-out after 90 seconds 问题: centos7 安装cdh,群集设置时出现以下错误: + '[' finalize-upgrade = mkdir ']' '[' rolling-upgrade...

Centos7 cdh5.14 安装

Centos7 cdh5.14 安装 192.168.1.70 192.168.1.71 192.168.1.72 关闭SELINUX vim /etc/selinux/config 将SELINUX=enforcing改成SELINUX=disabled 关闭防火墙 关闭防火墙(服务器重启后,防火...

03/14 10:24
7
Unexpected error. Unable to verify database connection.

Unexpected error. Unable to verify database connection. 问题: Centos7 上安装cdh群集设置时出现以下错误: 查看log信息中发现: ImportError: libxslt.so.1: cannot open shared object...

Cloudera 建议将 /proc/sys/vm/swappiness 设置为最大值 10

Cloudera 建议将 /proc/sys/vm/swappiness 设置为最大值 10。当前设置为 30。使用 sysctl 命令在运行时更改该设置并编辑 /etc/sysctl.conf,以在重启后保存该设置。您可以继续进行安装,但 ...

03/14 09:53
147
主机运行状况不良。

Centos7 安装sdh集群,显示如下错误: 解决方法: 删除有问题节点下的lib/cloudera-scm-agent/下的cm_guid文件,然后重启 cd /opt/cloudera-manager/cm-5.14.1/lib/cloudera-scm-agent/ rm ...

Environment Advanced Configuration Snippet (Safety Valve)

问题1: Centos7 安装CDH,启动hue时报错: ++ CDH_KMS_HOME=/opt/cloudera/parcels/CDH-5.14.4-1.cdh5.14.4.p0.3/lib/hadoop-kms ++ export CDH_PARQUET_HOME=/opt/cloudera/parcels/CDH-5....

No portmap or rpcbind service is running on this host

echo 'No portmap or rpcbind service is running on this host. Please start portmap or rpcbind service before attempting to start the NFS Gateway role on this host.' 问题: Centos...

03/13 11:31
11
Error: JAVA_HOME is not set and could not be found.

Error: JAVA_HOME is not set and could not be found. 问题: Centos7 安装CDH时报错:Error: JAVA_HOME is not set and could not be found. + local name=log4j.properties '[' '!' -f /o...

-bash: yum-config-manager: 未找到命令

-bash: yum-config-manager: 未找到命令 问题 执行以下命令: [root@cdh2 home]# yum-config-manager --disable mysql80-community -bash: yum-config-manager: 未找到命令 [root@cdh2 home]...

03/07 14:36
127

没有更多内容

加载失败,请刷新页面

返回顶部
顶部