大数据技术 - 神乐爱吃醋的个人空间 - OSCHINA

神乐爱吃醋

搬砖几载有余，不可谓不懒也，倦怠之至，朝闻道，夕死可矣

经验值

开源豆

粉丝

关注

关注私信

专长领域： WEB开发, 服务器端开发, DBA/数据库

开发平台： Java EE, Python, Scala, HTML/CSS, Linux/Unix

连击天

fork: star:

加载中

前面已经成功的搭建了Zookeeper和Hadoop集群，接下来让我们更进一步，实现Spark集群的搭建吧。相比较而言，Spark集群的搭建要简单的许多了，关键是Hadoop已经搭建成功了。此次是基于上次的H...

spark hadoop 分布式文件系统 worker blog https .net 虚拟机 jdk 浏览器 zookeeper

大数据技术

2018/03/16 18:56

5.6K

在启动Hadoop集群时，往往会出现这样或那样的问题，比如节点中DataNode进程启动不了，很是让人头疼，下面说下具体的解决办法（复杂版），简单版见最后：（1）停止关于Hadoop的所有进程（2...

hadoop data datanode clusterid namenode current logs name version

大数据技术

2018/06/26 09:38

5.3K

Hive是一个数据仓库基础工具在Hadoop中用来处理结构化数据，提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行（具体的Hive架构大家自行搜索）。接下来主要讲下Hadoop集群下...

hive derby hadoop home 嵌入式 jdbc gedit zookeeper 虚拟机 mysql warehouse jdk shell apache

大数据技术

2018/06/21 15:35

4.4K

Mapreduce 是一个分布式运算程序的编程框架，核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序，并发运行在一个 hadoop 集群上。MapReduce采用“分而治之”...

hdfs hadoop mapreduce 文件系统 rpc框架分布式存储系统 common 分布式文件系统

大数据技术

2018/06/27 17:47

2.4K

Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方(比如...

flume hdfs logger netcat hadoop type hbase memory profile home jdk html download https 日志系统

大数据技术

2018/06/25 10:41

941

没有更多内容

加载失败，请刷新页面

没有更多内容

神乐爱吃醋

技能雷达

Gitee 贡献

博客数据统计

OSCHINA 社区

在线工具

攻略

公众号

视频号

问题反馈

神乐爱吃醋

十周年

技能雷达

Gitee 贡献

博客数据统计

OSCHINA 社区

在线工具

攻略

公众号

视频号

问题反馈