leejun2005的个人页面 - OSCHINA - 中文开源技术交流社区

大数据之路

不管你干什么，我都建议经常写作，不一定文辞优美，只需包含对自己领域的一些体会。不要低估写作的力量，它能让你从琐事中抽身，透彻思考心中的问题。写给别人看时，你就成为更广阔世界的一部分，同时也是在宣称自己是社会一员，愿意做一些有意义的贡献。

3.1K

经验值

1.6K

开源豆

1.7K

粉丝

关注

关注私信

专长领域： 服务器端开发, 软件开发管理, 运维/系统/网络管理

开发平台： 其它, Java EE, Python, Linux/Unix

连击天

fork: star:

加载中

1、背景前几天新同学入职，一不小心将跳板机上的 crontab 清空了，导致凌晨一大批任务异常，同事问了运维同学也没有备份，这一百多个任务要是恢复起来可不是件容易的事儿。还好我去年某天开...

shell backup bash cron postfix home debug 邮件管理 crontab 系统管理员 linux ubuntu hadoop

linux/unix

2018/04/02 00:51

13W

程序猿经常争论的一个话题是：日常开发到底 Windows 好还是 Linux 好？进而演化出另一个问题：到底选 MacBook 好还是 SurfaceBook 好？选择 Linux 系统或者 mac 笔记本的同学最核心的理由是...

windows docker linux ubuntu bash https sudo listen store x窗口系统操作系统 init xming

windows/office

2018/02/14 01:46

2.8W

1、问题背景昨天下午突然收到运维邮件报警，显示数据平台服务器cpu利用率达到了98.94%，而且最近一段时间一直持续在70%以上，看起来像是硬件资源到瓶颈需要扩容了，但仔细思考就会发现咱们的...

https blog .net vim java linux 系统监控 leejun2005 oschina 0x431 jstack 157910cpu100 loadaverage

java

2018/01/04 22:31

1.7W

子曰：“工欲善其事，必先利其器。” 对程序员来说，工具是第一生产力。

notepad++windows notepad 语法高亮 linux 文本编辑 word https github shell scala 文件路径

windows/office

2017/12/18 04:01

1.4W

0、背景因为 hadoop 环境需要 master 能免密码 ssh localhost，所以我们需要建立与本机 localhost 的互信，方法很简单： 1. ssh-keygen -t rsa #Press enter for each line 2. cat ~/.ssh/...

debug blog https home .net secure linux hadoop php sshd sshlocalhost p2222 keysfile work sbin

linux/unix

2017/09/01 21:03

1.7W

0、背景经常做后端服务开发的同学，或多或少都遇到过 CPU 负载特别高的问题。尤其是在周末或大半夜，突然群里有人反馈线上机器负载特别高，不熟悉定位流程和思路的同学可能登上服务器一通手...

java class housemd github home https btrace sudo wiki vim greys-anatomy scala help 正则表达式

java

2017/08/28 01:38

最近线上 MySQL 接连发生了几起数据异常，都是在凌晨爆发，由于业务场景属于典型的数据仓库型应用，白天压力较小无法复现。甚至有些异常还比较诡异，最后 root cause 分析颇费周折。那实际业...

innodb mysql update html https timeout monitor logger jianshu weixin server 时间范围 jdbc blog

mysql

2017/07/24 02:00

2.3W

港真，Null 貌似在哪里都是个头疼的问题，比如 Java 里让人头疼的 NullPointerException，为了避免猝不及防的空指针异常，千百年来程序猿们不得不在代码里小心翼翼的各种 if 判断，麻烦而又臃...

null mysql weixin https 程序员 java myisam optional varchar notnull timestamp http table j2mzw

mysql

2017/07/11 23:39

9.6K

0、背景上周四接到反馈，集群部分 spark 任务执行很慢，且经常出错，参数改来改去怎么都无法优化其性能和解决频繁随机报错的问题。看了下任务的历史运行情况，平均时间 3h 左右，而且极其不...

spark memory executor https html redis cache shell hive apachespark mapreduce weixin index

spark

2017/07/05 01:15

1.6W

0、背景最近两天数据仓库中一张核心表遭遇了锁的问题，导致数据插入失败，影响挺大，之前一直没注意到这个问题，借此总结一下这块的知识和遇到的坑。 hive 在 0.7 版本之后开始支持并发，线...

hive session support 时间范围 mysql innodb docs community 离线下载 debug blog https

hive

2017/06/09 00:45

2.1W

shell 作为一门系统级别胶水语言，学习成本低，用起来很方便，但是缺点也显而易见：性能问题一直为人锁诟病。所以 shell 也就多用在简单的系统管理等场合，数据处理等等要求比较高的场合一般...

shell bash blog html linux https 管理工具 parallel python bzip2 java 数据处理 ansible enyo

awk/shell

2017/06/08 21:18

5.2K

0、背景用户流量从搜索引擎为入口的增量时代到移动互联网普及人口红利不再的存量时代，这个变化对每个公司的获客成本，运营思路都产生了很大的影响，在流量日益枯竭，获客成本越来越高的时代...

https 大数据聚类机器学习搜索引擎 weixin html index 消息推送 cookie kylin hbase

DM/ML

2017/05/21 18:57

1.8W

1、背景昨天有同学在用 Excel 做数据统计时偶然发现 Excel 会少算一些数据，而且这个坑让这位同学排查了很久才确认不是自己统计程序错误而只是 Excel 简单的汇总出错。最初看到这个问题时，...

html blog clean 字处理软件 https word excel windows php notepad++remove ablebits http

数据分析

2017/02/22 22:40

4.2K

shell 作为一门 linux 下使用广泛的系统语言，语法简单，上手容易，但是想要用好，少犯错误，也不是那么容易的一件事，可谓虽是居家旅行之良药，但也是杀人灭口之利器~ 今天就来聊聊 linux ...

shell blog linux bash https html echo null find java 操作系统 bumblebee case string

awk/shell

2016/11/24 21:22

2.4W

1、新版 MySQL 权限问题：问题：SQL Error (1130): Host '192.168.1.100' is not allowed to connect to this MySQL server 说明所连接的用户帐号没有远程连接的权限，只能在本机(localhos...

mysql blog html .net https articles backup databases root http dba v2ex password article

mysql

2016/05/19 21:18

前几天受阿里通信的同事邀请，分享了一个关于成长的话题。其实我不太热衷于分享此类话题，作为一个技术人，分享那些没有技术干货的内容总感觉有些怪怪的。但最后还是拟下了这个话题 ——《谈...

owner blog growth 性能优化开发工具 alibaba review barretlee http issue refer

职场 · 杂谈

2016/05/16 22:24

3.9K

不少语言或服务开发框架都内置了简单的 Web Server 供我们方便的调试使用。比如有时候我们需要调试单个 PHP 页面而不想搭建一套完整的 PHP 环境，亦或者我们只是临时的共享一下文件而不想搭建...

server image php html python brick-ruby lite npminstall app-node.js perl plack reactor http-server

linux/unix

2016/05/15 22:51

没有更多内容

加载失败，请刷新页面

大数据之路

技能雷达

Gitee 贡献

博客数据统计

OSCHINA 社区

在线工具

攻略

公众号

视频号

问题反馈