文档章节

【直播预告】计算中间件Linkis开源技术的应用和实践

宋庆离
 宋庆离
发布于 07/06 10:16
字数 1205
阅读 1W
收藏 0

「深度学习福利」大神带你进阶工程师,立即查看>>>

摘要:一站式开源大数据平台套件WeDataSphere第2期线上 Meetup

7月9日 第2期WeDataSphere线上 Meetup将与大家见面,Linkis项目负责人微众银行大数据平台负责人,以及三位社区committer天翼云大数据平台负责人、艾佳生活架构师、MobTech大数据平台专家将做客直播间,同大家分享计算中间件Linkis 在各家公司的精彩应用案例与生产实践,以及Linkis 1.0.0最新版本的Roadmap和架构设计思路,并带来WeDataSphere大数据平台套件的最新开源进展和相关规划。

欢迎大家一起参与到WeDataSphere开源项目中来,我们欢迎在github、gitee以及社群里任何形式的互动与贡献,期待你的加入!

  1. GitHubhttps://github.com/WeBankFinTech/Linkis
  2. Giteehttps://gitee.com/WeBank/Linkis

欢迎扫码入群交流,直播地址也将在开播前发送到WeDataSphere社区用户群,敬请关注。

 

议程

19:00-19:25  Linkis 1.0.0架构设计思路和WeDataSphere后继开源规划介绍

19:30-19:55  Linkis在中国电信的实践与展望

20:00-20:25  Linkis on K8S

20:30-20:55  借力 Linkis 完善 MobTech 大数据开发平台

20:55-21:10  WeDataSphere社区用户问答    

嘉宾及议题介绍

Linkis 1.0.0架构设计思路和WeDataSphere后继开源规划介绍

邸帅 微众银行大数据平台负责人

Linkis在中国电信的实践与展望

议题介绍:首先将回顾,复杂分布式架构环境下,上层应用和底层计算存储引擎紧耦合直连模式所带来的计算治理问题,及计算中间件Linkis 0.X版本如何应对解决;
然后解析基于对计算治理问题的深挖思考,和广大社区用户使用实践反馈,Linkis 1.0对核心处理流程和模块的梳理优化,及对更丰富强大计算治理功能需求的设计实现思路;
最后展望基于全新的1.0架构,Linkis未来对更全品类计算存储场景的支持覆盖能力建设,及对路由、高可用、HTAP、跨引擎混算等复杂痛点问题的解决思路。

王小刚 中国电信天翼云大数据平台负责人

议题介绍:电信拥有海量的数据宝藏,如何管理好这些宝藏,保证系统和安全性和易用性,并发挥好它的价值,是一个值得挑战的难题。我们选择了开放优秀的Linkis,基于Linkis构建大数据开发与服务平台,做相应配和加强。本次简述电信对Linkis的使用,基于Hadoop3的适配,一些组件的整合,正在做的引擎启动慢优化思路,以及未来展望。希望能跟Linkis一起成长,积极响应国家新基建战略号召,为国家新基建的建设尽一份力量。

Linkis on K8S

张荣 艾佳生活架构师

议题介绍:艾佳生活基于云原生12要素,在linkis基础上发布linkis on k8s,分支dev-0.13.0。Linkis docker镜像作为制品发布,可以省去每个人排包,编译过程基于cgroup隔离可以保证每个linkis微服务不会由于超卖而影响其他linkis微服务,做到cpu,mem,io,disk的隔离。

k8s会自动去监控linkis微服务,然后重启、新建;总之,让linkis每个微服务一直提供服务。k8s提供滚动发布,弹性伸缩,故障迁移,保证linkis高SLA,满足业务7*24使用。

借力 Linkis 完善 MobTech 大数据开发平台

王震 MobTech大数据平台专家工程师

 

议题介绍:数据开发流程繁琐,现有平台各个系统相对独立,加大了大数据任务的开发和维护的成本。如何打造一个一站式数据开发平台,打通现有系统,简化数据开发流程?本次演讲将分享 MobTech 团队如何基于 Scriptis 和 Linkis 搭建数据开发平台,打通大数据任务的开发、发布调度的流程。在使用 Linkis 的过程中 MobTech 团队也成为了社区重要的合作伙伴之一,主导了 0.11.0 版本的发布,这次分享将会介绍 0.11.0 版本添加的主要功能。

宋庆离

宋庆离

粉丝 160
博文 138
码字总数 139464
作品 0
东城
私信 提问
iOS 应用版本更新检查--Harpy

实现 app 版本检查功能。用户打开app之后,进行app的版本更新检查。如果检查到 appstore 上有当前qpp的新版本,则弹出对话框提醒用户下载。可以设置让用户选择下载或者强制用户下载。 [Code4...

匿名
2013/02/18
1.8K
0
跨平台手机应用开发--Gideros

Gideros 可以让你轻松快速创建 iOS 和 Android 应用,提供用户友好的集成开发环境,内建模拟器对应用进行不同屏幕大小、分辨率下的测试,最大的优点是可即时修改代码即时进行测试,无需编译安...

匿名
2013/02/19
2.8K
1
Android3D应用与游戏开发框架--JQGL

JQGL 是一款针对Android设备上3D应用、游戏的开发框架。 核心功能是OpenGL-ES的使用框架,相对于大部分开发者而已,OpenGL是陌生的,没有专门研究无法进行相关的开发。 本框架针对于Android...

Jping
2013/02/21
1.6K
0
工作流管理系统--Pegasus WMS

Pegasus (飞马座)工作流管理系统包括一套技术标准工作流程应用程序中执行帮助许多不同的环境中,包括桌面、校园集群、网格、云。它弥补了科学领域和执行环境通过自 动映射到分布式资源的高层工...

匿名
2013/02/24
5.4K
0
响应式框架--Groundwork

GroundworkCSS 是一个基于 Sass 预处理器的开源项目 ,主要用于快速构建响应式 Web 应用程序。拥有一个灵活的、可嵌套的网格系统,可以创建适应多种浏览设备的布局。 Groundwork 还提供多种 ...

匿名
2013/02/25
2.8W
4

没有更多内容

加载失败,请刷新页面

加载更多

华为大危机!余承东:麒麟芯片告罄,今年或许是高端芯片最后一代

     大数据文摘出品   作者:牛婉杨   美国制裁下,华为麒麟芯片即将告罄。   华为消费者业务CEO余承东称,由于来自美国的持续经济压力,华为下个月将无法生产自己的麒麟芯片组。...

osc_qmxpov5s
16分钟前
0
0
狂神说Java多线程详解(二)

狂神的视频截图作为学习记录:线程同步和线程协作。 本文分享自微信公众号 - Android架构师成长之路(gh_07f996f00d9b)。 如有侵权,请联系 support@oschina.cn 删除。 本文参与“OSC源创计...

datoushiwoma
07/13
0
0
英特尔20GB数据泄漏!包含未发芯片文件,内部密码多为intel123

     大数据文摘出品   来源:Arstechnica   近日,英特尔发生了一起重大的数据泄漏事故,超过20GB的专有数据和源代码被放在了网上。   这20GB的泄漏数据不仅量大,而且包含的内容...

osc_tjee7sjs
17分钟前
9
0
postgresql 主键 id 设置自增

创建自增序列(起始值必须大于 0 ) CREATE SEQUENCE standard_detail_id_seq START 1; 主键 ID 默认设置为 nextval('standard_detail_id_seq'::regclass)...

青苗
17分钟前
0
0
Ubuntu-16.04安装 VS code

安装微软Visual Studio Code 首先需要安装Ubuntu Make。虽然Ubuntu Make存在Ubuntu15.04官方库中,但是需要Ubuntu Make 0.7以上版本才能安装Visual Studio。所以,需要通过官方PPA更新到最新...

贪狼lyb
2019/11/26
0
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部