很多不太懂正则的朋友，在遇到需要用正则校验数据时，往往是在网上去找很久，结果找来的还是不很符合要求。所以我最近把开发中常用的一些正则表达式整理了一下，在这里分享一下。给自己留个底...

Load_Data_Command 一、导入数据-加载csv文件数据作为spark 临时表DataSource（不需要提前创建表，方便数据分析） 该命令将csv文件导入到临时表中，命令格式为 load data '文件路径' table [...

今天入职新公司了，感觉还OK，加油干吧。

最近一段时间再学习Python和一些机器学习算法，可能是只接触到了皮毛，并没有感觉很复杂，另外，因为还没有实践的机会，所以理解的深度肯定还不够。争取在工作中找些实践的机会，另外，也可以...

遇到过的问题： 很多的时候，在Presto上对数据库跨库查询，例如Mysql数据库。这个时候Presto的做法是从MySQL数据库端拉取最基本的数据，然后再去做进一步的处理，例如统计等聚合操作。 举个栗...

1.给不同的业务线建立需求群，所有的数据需求都在群里面提。 2.对于特别难搞定的事情，到对应的技术哪去做，有问题随时沟通。 3.定期给工作总结形成方法论。 4.学习新的技术，尝试用新的方法...

(7) SELECT (8) DISTINCT <select_list> (1) FROM <left_table> (3) <join_type> JOIN <right_table> (2) ON <join_condition> (4) WHERE <where_condition> (5) GROUP BY <group_by_list> (...

发现开源中国APP App Store不能下载，提示没有该商品，不知道开源中国的管理员能不能看到，看看是怎么回事儿。不然就只能转战别的平台了。

Presto的是什么？优势是什么呢？从官方文档中我们了解到 Presto是一个分布式SQL查询引擎，用于查询分布在一个或多个不同数据源中的大数据集。 千万不要以为Presto可以解析SQL，那么Presto就是...

1.Mon:报表数据剧增原因复核；确认分销+限时折扣逻辑；618活动需求分析。 2.Tue:7.1峰会同事取数结果异常，逻辑复核；分销+限时折扣上线效果数据；小店自购数据需求；618活动数据逻辑整理。 ...

1.本周的工作很杂，感觉做了很多东西，但产出好像又不多，能看到的产出只有：首焦和类目的报表、月报。 2.另外，还手把手教了新同事一些基本的技能，其实这不应该是我的职责，毕竟不是我带的...

1.某天，你无端想起一个人，她曾让你对明天有所期许，但是却完全没有出现在你的明天里。 也有一个人， 她会在往后的岁月中给你更长久的幸福，虽然她不曾来过你的青春。 2.这是个喧嚣的世界 ...

1.时间管理 分配时间的时候，不要只是取算每分每秒每小时，而要考虑到每一件时间是重要的事情和紧急的事情。 因为我们常常会变成紧急事情的奴隶，而忘了做哪些重要的事情，尤其是那些重要但不...

重要知识点

Hope I can success this time. sometimes feel fu*king tired , always can not grap opps.

hive中解析一般的json是很容易的，get_json_object就可以了。 但如果字段是json数组，比如 [{"bssid":"6C:59:40:21:05:C4","ssid":"MERCURY_05C4"},{"bssid":"AC:9C:E4:04:EE:52","appid":"1...

从A串中提取从"."开始的字符串B,可以使用find函数来对"."的首次出现进行定位,这类似于各种语言中的indexOf功能,find是从左往右查找的,在EXCEL中并没有从右往左查找,类似lastIndexOf的函数. 在...

非分区表的复制 想要复制一张非分区表,可以使用create tale as去解决。 假如我们有一张temp表,为普通的内部表.复制可以采用如下的语句: create table temp1 as select * from temp; 这样就复...

Shell 函数

Shell 流程控制