加载中
阿里云EMR2.0平台:让大数据更简单

摘要:本文整理自阿里云资深技术专家李钰(绝顶)在 阿里云EMR2.0线上发布会 的分享。本篇内容主要分为三个部分: 1.EMR 平台概述 2.EMR2.0 新平台核心能力 3.总结 一、EMR 平台概述 EMR 平台是...

对比开源丨Prometheus 服务多场景存储压测全解析

在 Gartner 发布的《2023 年十大战略技术趋势》[1]报告中,「应用可观测性」再次成为热门趋势。用户需要建立可观测体系来统筹、整合企业数字化所产生的指标数据,并以此为基础进行反馈并制定决...

统一观测丨使用 Prometheus 监控云原生网关,我们该关注哪些指标?

Metrics 指标在可观测体系的应用 可观测体系的概念由来已有,随着分布式微服务迅猛发展,对可观测体系的依赖也越来越深,可观测体系通常包括 Metrics、Tracing、Logging 三类数据,再外加报警...

从资源弹性到数据弹性,乾象如何将云上量化研究效率提升 40%?

机器学习、云计算、云原生等技术的进步给金融行业创新注入了新的动力,以乾象投资 Metabit Trading 为代表的以人工智能为核心的科技型量化投资公司的工作就非常有代表性。他们通过深度融合和...

实时数仓Hologres 新一代弹性计算组实例技术揭秘

随着实时数仓在业务生产系统的普及,资源弹性、资源隔离等保障业务稳定性方面的技术需求开始变得越来越迫切。Hologres在保障业务方面持续优化核心技术竞争力,过去一年中,Hologres创新提出并...

从 JDK 9 到 19,我们帮您提炼了和云原生场景有关的能力列表(上)

在 JDK 9 之前,Java 基本上平均每三年出一个版本。但是自从 2017 年 9 月分推出 JDK9 到现在,Java 开始了疯狂更新的模式,基本上保持了每年两个大版本的节奏。从 2017 年至今,已经发布了 ...

02/20 11:06
18
为什么在容器中 1 号进程挂不上 arthas?

最近在容器环境中,发现在 Java 进程是 1 号进程的情况下,无法使用 arthas。 提示 AttachNotSupportedException: Unable to get pid of LinuxThreads manager thread。具体操作和报错如下:...

通过日志服务实现数据库MySQL 入湖 OSS实践

日志服务数据入湖 日志服务(SLS)是云原生观测分析平台,为Log/Metric/Trace等数据提供大规模、低成本、实时平台化服务。一站式提供数据采集、加工、分析、告警可视化与投递功能。阿里云提供...

MaxCompute 中如何处理异常字符

背景 在处理数据时,当业务数据同步至MaxCompute后,会产生一些含异常字符的脏数据,比如字段中包含了一个不可见字符,在DataWorks中显示不出来,但在BI界面又会显示成其他字符,影响整体观感...

02/14 17:24
11
系统运维 SysOM profiling 在云上环境的应用观测实践

背景 云上环境,ECS客户一般都会布置一些常规监控观察系统指标或者业务指标,虽然通过这些指标能监控到系统或者应用的异常,但是却不能完全了解系统/应用正在做什么导致的指标异常。常见的如...

镜像拉取节省 90% 以上,快手基于 Dragonfly 的超大规模分发实践

01 挑战 快手容器云平台旨在为快手不断增长、不断变化和多样化的业务,提供基于容器化部署的超大规模基础设施服务。为了实现这一目标,快手工程师需要解决弹性、稳定性、效率和无服务器架构等...

基于 Kubernetes 的企业级大数据平台,EMR on ACK 技术初探

云上大数据的 Kubernetes 技术路线 当前,大数据与机器学习领域颇为关注存储与计算分离架构,逐渐向云原生演进。以Spark 为例,云下或自有服务器可以选择 Hadoop 调度支持 Spark,云上的 Sp...

Nacos 配置管理最佳实践

Nacos 简介 Nacos 是一个更易于构建云原生应用的微服务基础平台,核心包含动态服务发现,配置管理,服务管理平台。 配置管理是 Nacos 的核心功能,它提供了运行期不重启应用的情况下动态修改...

RocketMQ 集成生态再升级:轻松构建云上数据管道

阿里云消息队列 RocketMQ 版是阿里云基于 Apache RocketMQ 构建的低延迟、高并发、高可用、高可靠的分布式“消息、事件、流”统一处理平台,面向互联网分布式应用场景提供微服务异步解耦、流...

ZooKeeper 避坑实践: Zxid 溢出导致选主

背景 线上 flink 用户使用 ZooKeeper 做元数据中心以及集群选主,一些版本的 flink 在 ZooKeeper 选主时,会重启 Job,导致一些非预期的业务损失。而 ZooKeeper 在 zxid溢出时,会主动触发一...

阿里云EMR 2.0:重新定义新一代开源大数据平台

摘要:本文整理自阿里云高级产品专家何源(荆杭)在 阿里云EMR2.0线上发布会 的分享。本篇内容主要分为三个部分: 开源大数据的痛点及EMR产品历程 EMR2.0 新特征 总结 一、开源大数据的痛点及E...

02/13 15:53
51
消息服务 + Serverless 函数计算助力企业降本提效

背景介绍 消息队列服务(下文均以 Message Service 命名)作为云计算 PaaS 领域的基础设施之一,其高并发、削峰填谷的特性愈发受到开发者关注。Message Service 对上承接消息生产者服务的请求...

全景剖析阿里云容器网络数据链路(三):Terway ENIIP

前言 近几年,企业基础设施云原生化的趋势越来越强烈,从最开始的 IaaS 化到现在的微服务化,客户的颗粒度精细化和可观测性的需求更加强烈。容器网络为了满足客户更高性能和更高的密度,也一...

CNStack 2.0:云原生的技术中台

在进入千禧年后,随着计算机技术的发展和业务创新的不断涌现,许多大公司内的 IT 计算中心也在酝酿着变革。一方面,各部门相对独立的 IT 管理平台已经难以满足日益增长和不断变化的计算管理需...

没有更多内容

加载失败,请刷新页面

返回顶部
顶部