leejun2005的个人页面

程序猿经常争论的一个话题是：日常开发到底 Windows 好还是 Linux 好？进而演化出另一个问题：到底选 MacBook 好还是 SurfaceBook 好？选择 Linux 系统或者 mac 笔记本的同学最核心的理由是...

Bash Linux Docker Xming DBus

windows/office

2018/02/14 01:46

6.9K

9

1、问题背景昨天下午突然收到运维邮件报警，显示数据平台服务器cpu利用率达到了98.94%，而且最近一段时间一直持续在70%以上，看起来像是硬件资源到瓶颈需要扩容了，但仔细思考就会发现咱们的...

V-IM

java

2018/01/04 22:31

2.1K

子曰：“工欲善其事，必先利其器。” 对程序员来说，工具是第一生产力。

windows/office

2017/12/18 04:01

2.3K

4

0、背景因为 hadoop 环境需要 master 能免密码 ssh localhost，所以我们需要建立与本机 localhost 的互信，方法很简单： 1. ssh-keygen -t rsa #Press enter for each line 2. cat ~/.ssh/...

Linux Hadoop Here

linux/unix

2017/09/01 21:03

3.1K

0、背景经常做后端服务开发的同学，或多或少都遇到过 CPU 负载特别高的问题。尤其是在周末或大半夜，突然群里有人反馈线上机器负载特别高，不熟悉定位流程和思路的同学可能登上服务器一通手...

Scala HouseMD Java BTrace Vim

java

2017/08/28 01:38

4.4K

最近线上 MySQL 接连发生了几起数据异常，都是在凌晨爆发，由于业务场景属于典型的数据仓库型应用，白天压力较小无法复现。甚至有些异常还比较诡异，最后 root cause 分析颇费周折。那实际业...

MySQL InnoDB

mysql

2017/07/24 02:00

9.5K

9

港真，Null 貌似在哪里都是个头疼的问题，比如 Java 里让人头疼的 NullPointerException，为了避免猝不及防的空指针异常，千百年来程序猿们不得不在代码里小心翼翼的各种 if 判断，麻烦而又臃...

MyISAM Java MySQL Optional

mysql

2017/07/11 23:39

3.7K

0、背景上周四接到反馈，集群部分 spark 任务执行很慢，且经常出错，参数改来改去怎么都无法优化其性能和解决频繁随机报错的问题。看了下任务的历史运行情况，平均时间 3h 左右，而且极其不...

spark

2017/07/05 01:15

5K

4

0、背景最近两天数据仓库中一张核心表遭遇了锁的问题，导致数据插入失败，影响挺大，之前一直没注意到这个问题，借此总结一下这块的知识和遇到的坑。 hive 在 0.7 版本之后开始支持并发，线...

hive

2017/06/09 00:45

3.6K

shell 作为一门系统级别胶水语言，学习成本低，用起来很方便，但是缺点也显而易见：性能问题一直为人锁诟病。所以 shell 也就多用在简单的系统管理等场合，数据处理等等要求比较高的场合一般...

awk/shell

2017/06/08 21:18

1K

0、背景用户流量从搜索引擎为入口的增量时代到移动互联网普及人口红利不再的存量时代，这个变化对每个公司的获客成本，运营思路都产生了很大的影响，在流量日益枯竭，获客成本越来越高的时代...

Apache HBase Apache Storm Apache Kylin Hive lbs

DM/ML

2017/05/21 18:57

8K

1、背景昨天有同学在用 Excel 做数据统计时偶然发现 Excel 会少算一些数据，而且这个坑让这位同学排查了很久才确认不是自己统计程序错误而只是 Excel 简单的汇总出错。最初看到这个问题时，...

数据分析

2017/02/22 22:40

1K

shell 作为一门 linux 下使用广泛的系统语言，语法简单，上手容易，但是想要用好，少犯错误，也不是那么容易的一件事，可谓虽是居家旅行之良药，但也是杀人灭口之利器~ 今天就来聊聊 linux ...

bumblebee Bash Linux

awk/shell

2016/11/24 21:22

11.7K

26

我今天分享的话题是Druid驱动海量数据实时多维分析。 1、需求背景首先我来谈一下海量实时多维分析的需求背景，我们广告系统有DSP睿视系统和AD exchange等，前段时间品友的曹老师分享时提到D...

OLAP多维分析

2016/06/26 16:11

1K

Python 2k、3k 问题已经存在很多年了，不仅是初学者学习，也是老码农版本选择、项目管理中遇到的一个颇为头疼的问题。而咱们今天要介绍的 virtualenv 可以搭建虚拟且独立的多个版本 python 环...

python

2016/06/07 20:40

4.4K

1、背景：为什么要 4K 对齐簇是系统在硬盘上读写文件时的单位，是一个数据块（逻辑概念）。而扇区是硬盘划分的最小单位值，就是簇（数据块）占用的地方（物理概念）。NTFS对于大于2GB的分区...

windows/office

2016/05/23 00:31

1K

1、新版 MySQL 权限问题：问题：SQL Error (1130): Host '192.168.1.100' is not allowed to connect to this MySQL server 说明所连接的用户帐号没有远程连接的权限，只能在本机(localhos...

mysql

2016/05/19 21:18

6.9K

前几天受阿里通信的同事邀请，分享了一个关于成长的话题。其实我不太热衷于分享此类话题，作为一个技术人，分享那些没有技术干货的内容总感觉有些怪怪的。但最后还是拟下了这个话题 ——《谈...

职场 · 杂谈

2016/05/16 22:24

968

不少语言或服务开发框架都内置了简单的 Web Server 供我们方便的调试使用。比如有时候我们需要调试单个 PHP 页面而不想搭建一套完整的 PHP 环境，亦或者我们只是临时的共享一下文件而不想搭建...

linux/unix

2016/05/15 22:51

3.4K