加载中
大幅降低存储成本,Elasticsearch可搜索快照是如何办到的?

导语 | Elasticsearch 7.10 版本最近发布,该版本有一个重磅特性:Searchable snapshots (可搜索快照功能),可以大幅度地降低存储成本。那么 Searchable snapshots 的使用方式和实现效果是...

cos
2020/12/08 11:18
6.3K
微信支付万亿日志在Hermes中的实践

导语 | 微信支付日志系统利用 Hermes 来实现日志的全文检索功能,自从接入以来,日志量持续增长。目前单日入库日志量已经突破万亿级,单集群日入库规模也已经突破了万亿,存储规模达 PB 级。...

2020/12/04 10:50
7.7K
百亿级实时计算系统性能优化–—Elasticsearch篇

导语 | 随着业务的发展,系统日益复杂,功能愈发强大,用户数量级不断增多,设备cpu、io、带宽、成本逐渐增加,当发展到某个量级时,这些因素会导致系统变得臃肿不堪,服务质量难以保障,系统...

腾讯看点视频推荐索引构建方案

一、背景 在视频推荐场景中,一方面我们需要让新启用的视频尽可能快的触达用户,这一点对于新闻类的内容尤为关键;另一方面我们需要快速识别新物品的好坏,通过分发的流量,以及对应的后验数...

2020/12/01 15:19
2.7K
带宽利用率提升50%,腾讯云联网架构方案解析

导语 | 企业 A 是一家互联网公司,当前在云上计算资源已经接近 10W 核,华东地域专线流量 24G+,资源部署以华东为主、华北、华南、西南等可用区为辅。该企业属于典型的混合云架构,本文主要分...

ngw
2020/12/01 14:47
133
压测利器:TarsBenchmark正确打开方式

导语 | Tars 是由腾讯主导开源,并捐献给Linux基金会的微服务RPC框架。而TarsBenchmark的推出是对Tars生态的进一步完善,它支持的在线压测功能极大降低开发测试人员在线评测服务性能使用门槛...

2020/11/23 18:11
135
跨国合作:Serverless Components 在腾讯云的落地和实践

导语 | Serverless Components 是 Serverless Framework 推出的最新解决⽅案,具有基础设施编排能⼒,开发者通过使⽤ Serverless Components,可以灵活构建、组合和部署 Serverless 应⽤。本...

2020/11/23 18:07
42
前端视角谈物联网三部曲:连接智能、交互智能、数据智能

导语丨作为离用户和物联网设备最近的前端,在物联网三部曲中扮演什么样的角色呢?这两年来腾讯云物联网探索出了“腾讯连连”小程序,提供了一系列开源的开放能力,和更多的物联网开发商和爱好...

2020/11/23 17:42
3.7K
国产开源IoTOS:腾讯物联网操作系统TencentOS Tiny的探索与实践

导语 | 腾讯物联网终端操作系统(TencentOS tiny)是腾讯面向物联网领域自主研发的嵌入式实时操作系统,可助力物联网终端设备及业务快速接入腾讯云物联网平台。本文是对腾讯高级工程师汪礼超...

企业级云原生:TKEStack 腾讯云原生开源实践之路

导语丨TKEStack 是腾讯开源的一款集强壮性和易用性于一身的企业级容器编排引擎,是开放原子开源基金会的孵化项目之一。本文是对 TKEStack 开源项目负责人汝英哲、TKEStack 高级产品经理何鹏飞...

国产开源数据库:腾讯云TBase在分布式HTAP领域的探索与实践

导语 | TBase 是腾讯TEG数据平台团队在开源 PostgreSQL 的基础上研发的企业级分布式 HTAP 数据库系统,可在同一数据库集群中同时为客户提供强一致高并发的分布式在线事务能力以及高性能的数据...

2020/11/23 17:21
376
每一位程序员,都可以贡献开源吗?

导语 | 开源,是近几年技术圈特别火热的一个话题。在开源的背后,涉及到的不仅仅是技术本身,还包括人才、社区、商业,甚至更大范围的影响力。本文是对开放原子基金会TOC副主席谭中意、开源社...

2020/11/23 17:14
44
秒级去重:ClickHouse在腾讯海量游戏营销活动分析中的应用

导语 | 腾讯内部每日都需要对海量的游戏营销活动数据做效果分析,而活动参与人数的去重一直是一项难点。本文将为大家介绍腾讯游戏营销活动分析系统——奕星,在去重服务上的技术思路和迭代方...

存算分离下写性能提升10倍以上,EMR Spark引擎是如何做到的?

引言 随着大数据技术架构的演进,存储与计算分离的架构能更好的满足用户对降低数据存储成本,按需调度计算资源的诉求,正在成为越来越多人的选择。相较 HDFS,数据存储在对象存储上可以节约存...

重构实践:基于腾讯云Elasticsearch搭建QQ邮箱全文检索

导语 | 随着用户邮件数量越来越多,邮件搜索已是邮箱的基本功能。QQ 邮箱于 2008 年推出的自研搜索引擎面临着存储机器逐渐老化,存储机型面临淘汰的境况。因此,需要搭建一套新的全文检索服务...

PB级数据实时分析,ClickHouse到底有多彪悍?

导语 | ClickHouse是俄罗斯开源的OLAP数据库,以彪悍的性能著称。开源5年以来,以性能优异、简单易用的特点,吸引了大量的用户群体。本文是对腾讯云ClickHouse研发负责人彭健老师在云+社区沙...

实现全托管,腾讯云服务网格的架构演进

导语 | 腾讯云服务网格(TCM)作为一个兼容 isito 的服务网格平台,已经在腾讯内外部有诸多落地案例。本文是对腾讯云高级工程师钟华、苗艳强在云+社区沙龙online的分享整理,深度解析服务网格...

2020/10/19 16:03
137
优秀程序员,如何提高架构能力?

导语 | 成为架构师是程序员进阶不可或缺的一条路径,尤其在当今愈加智能化的社会,对每位程序员的架构能力都提出了新的要求。本文是对腾讯云块存储与虚拟化总监马文霜、贝壳找房基础平台总经...

亿级用户,腾讯看点信息流推荐系统的架构挑战

导语 | 看点信息流每天为亿级用户提供海量实时推荐服务,除了大并发/低延迟/高性能等传统架构挑战以外,还有哪些推荐系统特有的架构挑战难题,又是如何解决的?本文是对腾讯看点独立端推荐研...

降本提效,贝壳搜索推荐架构统一之路

导语 | 搜索和推荐是用户获取信息的两种主要方式,在贝壳也是帮助客户找到房子的主要手段,那么二者都有哪些相似和不同之处?是否可以使用同一套架构来实现?统一架构之后又能带来哪些收益呢...

没有更多内容

加载失败,请刷新页面

返回顶部
顶部