加载中
《Hadoop大明白》【3】pyspark调用自定义jar

from py4j.java_gateway import java_import java_import(sc._gateway.jvm,"com.xx.hadoop.report.x") func = sc._gateway.jvm.myclass() sql = "select * from mydata" print sql func.myfu...

《Hadoop大明白》【2】pyspark的应用场景

1,python的码农涉猎Hadoop,首选pyspark 2,开发spark应用,需要知道的几个点: 【1】SQL语句:insert into / overwirte 【2】DataFrame的常用API 【3】UDF函数 【4】Kafka组件使用 【5】A...

《Hadoop大明白》【1】Hadoop的核心组件

本书适用于想对大数据平台Hadoop有深入了解的程序员朋友,会帮助你以后在应用开发方面趟平一些坑。 1,Hadoop 是一个系列大数据组件构成的应用平台,可由多个廉价机器搭建集群,提供分布式存...

oozie 调度pyspark

http://www.learn4master.com/big-data/pyspark/run-pyspark-on-oozie 使用Oozie在YARN上安排PySpark程序 考虑一个用Spark Python API编写的简单字数统计应用程序。以下步骤说明如何使用Ooz...

CDH-pyspark应用场景警告和错误

18/11/16 08:33:34 ERROR client.TransportResponseHandler: Still have 4 requests outstanding when connection from /100.66.0.1:52752 is closed18/11/16 08:33:34 ERROR spark.ContextC...

others

2018/08/16 15:28
6
多语言开发的万金油

游走在java/c++,c++/golang,python/scala,js/php,这些变化莫测的开发选择的时候,如何做到头脑清晰? 我的经验是,目中无语言,手里小本本。 1,这些语言我都曾多少实际操作过项目,但能记...

2018/06/17 17:49
18
blockChain - 网络位

0.0.0.0/8 子网掩码有8个1,也就是8位是网络位 二进制:11111111.0000000.0000000.0000000 十进制:255.0.0.0 RFC: 0.0.0.0/8 - Addresses in this block refer to source hosts on "this" ...

2018/05/18 10:09
18
blockChain - compile

go跨平台编译,开关 【1】 //+build !windows package netutil 【2】 //+build windows package netutil

2018/05/18 08:41
8
blockChain - ntp

udp 获取 pool.ntp.org 时间 http://www.ntp.org.cn/index.php NTP(Network Time Protocol,网络时间协议)采用的传输层协议为 UDP,使用的 UDP 端口号为 123。 通常将从权威时钟(如原子时...

2018/05/17 22:50
11
blockChain - upnp & nat-pmp

<upnp> 常见的NAT穿透方法比如UDP打洞,或者STUN协议,但是这些方法都需要另一个已知的部署在公网环境下的服务器。 不需要部署任何公网环境下的服务器,通过路由器支持的UPnP协议来把内网的接...

2018/05/17 22:25
30
blockChain - route

路由表是Windows的TCP/IP协议栈的一个重要的部分。但是,路由表不是Windows操作系统向普通用户显示的东西。如果你要看到这个路由表,你必须要打开一个命令提示符对话框,然后输入“ROUTE PRI...

2018/05/17 22:18
5
量化选股-开放平台

量化选股

2018/04/28 08:35
23
windows 下 cmd cli多标签工具

链接: https://pan.baidu.com/s/184NM-KCBTNeLJRuYuNhqMw 密码: tvky 源码: https://github.com/cmderdev/cmder...

2018/03/15 20:34
24
golang(1)

golang源码 - benchmark

2018/02/05 16:17
3
go-ide-select

IDE

2018/01/31 15:24
9
Visual Studio Tools for AI【一】

关于 microsoft Visual Studio Tools for AI

2017/12/03 22:31
38

没有更多内容

加载失败,请刷新页面

返回顶部
顶部