文档章节

阿里云日志服务的架构与优势

mcy0425
 mcy0425
发布于 10/12 13:55
字数 963
阅读 11
收藏 0

关于阿里云日志服务使用教程详细内容:阿里云日志服务使用教程

Logtail

帮助您快速收集日志的Agent。其特点如下所示:

基于日志文件、无侵入式的收集日志
只读取文件。
日志文件无侵入。
安全、可靠
支持文件轮转不丢失数据。
支持本地缓存。
网络异常重试。
方便管理
Web端操作。
可视化配置。
完善的自我保护
实时监控进程CPU、内存消耗。
限制使用上限。
前端服务器

采用LVS + Nginx构建的前端机器。其特点如下所示:

HTTP、REST协议
水平扩展
流量上涨时可快速提高处理能力。
支持增加前端机。
高吞吐、低延时
纯异步处理,单个请求异常不会影响其他请求。
内部采用专门针对日志的Lz4压缩,提高单机处理能力,降低网络带宽。
后端服务器

后端是分布式的进程,部署在多个机器上,完成实时对Logstore数据的持久化、索引、查询以及投递至MaxCompute。整体后端服务的特点如下所示:

数据高安全性 :
您写入的每条日志,都会被保存3份。
任意磁盘损坏、机器宕机情况下,数据自动复制修复。
稳定服务:
进程崩溃和机器宕机时,Logstore会自动迁移。
自动负载均衡,确保无单机热点。
严格的Quota限制,防止单个用户行为异常对其他用户产生影响。
水平扩展:
以分区(Shard)为单位进行水平扩展。
用户可以按需动态增加分区来增加吞吐量。
产品优势:
全托管服务

应用性强,5分钟即可接入服务进行使用,Agent支持任意网络下数据采集。
LogHub覆盖Kafka 100%功能,提供完整监控、报警等功能数据,并支持弹性伸缩(可支持PB/Day规模),使用成本为自建50%以下。
LogSearch/Analytics 提供快速查询、仪表盘和报警功能,使用成本为自建 20%以下。
0+接入方式,与云产品 (OSS/E-MapReduce/MaxCompute/Table Store/MNS/CDN/ARMS等)、开源软件(Storm、Spark)无缝对接。
生态丰富

LogHub 支持30+采集端,包括Logstash、Fluent等,无论是嵌入式设备,网页,服务器,程序等都能轻松接入。在消费端,支持与Storm、Spark Streaming、云监控等对接。
LogShipper 支持丰富数据格式(TextFile、SequenceFile、Parquet等),支持自定义Partition,数据可以直接被Presto、Hive、Spark、Hadoop、E-MapReduce、MaxCompute、HybridDB等处理。
LogSearch/Analytics 查询分析语法完整、兼容SQL92、支持JDBC协议与Grafana对接。
实时性强

LogHub:写入即可消费;Logtail(采集Agent)实时采集传输,1秒内到服务端(99.9%情况)。
LogSearch/Analytics:写入即可查询分析,在多个查询条件下1秒可查询10亿级数据,多个聚合条件下1秒可分析1亿级数据。
完整API/SDK

轻松支持自定义管理及二次开发。
所有功能均可通过API/SDK实现,提供多种语言SDK,可轻松管理服务和百万级设备。
查询分析语法简单便捷,兼容SQL92;接口友好、适合与生态软件对接,提供Grafana对接方案。
更多精品课程:

阿里云大学官网——云生态下的创新人才工场

© 著作权归作者所有

共有 人打赏支持
mcy0425
粉丝 7
博文 528
码字总数 197009
作品 0
私信 提问
基于容器技术的阿里云区块链优势和实现方法

以下内容根据演讲PPT及现场分享整理: 在2017年北京云栖大会的“开发者服务专场”上,阿里云高级技术专家余珊带来了《敏捷智连——基于容器技术的区块链业务创新》的精彩分享。分享中,他重点...

1993wang
01/03
0
0
API信息全掌控,方便你的日志管理——阿里云推出API网关打通日志服务

摘要: 近日,阿里云API网关对接了日志服务,可以输出用户在API网关产生的API调用日志,目前支持将 API 接入 API 网关的用户查看日志明细、概况、报表分析、在线查询等。 访问日志(Acccess...

阿里云云栖社区
02/06
0
0
iGeek Camp第四期--北京站

环信作为互联网行业的技术领先者,推出iGeek Camp系列技术活动,旨在以开放的心态,分享深厚的技术积累,推动并打造一个互联网技术创新的平台,iGeek Camp的口号是:交流、分享、融合、创新、协...

Jack
2015/12/16
405
0
【备忘】阿里云云主机安装centos从入门到使用视频

百度网盘下载1-1 ECS&Centos7导学.mp41-2 ECS基础介绍.mp41-3 ECS云服务逻辑架构.mp41-4 阿里云管理控制台使用.mp42-1 ECS云服务构建.mp42-2 阿里云节点BGP和专线概念介绍.mp42-3 ECS如何按照...

javail
11/08
0
0
容器加速业务创新,Serverless Kubernetes之解读

2018云栖大会武汉峰会企业研发云专场,阿里云高级技术专家汤志敏带来“容器加速业务创新,Serverless Kubemetes之解读”的精彩演讲,本文首先介绍了云原生架构的概念,其次详细阐述了标准的Kub...

云迹九州
05/29
0
0

没有更多内容

加载失败,请刷新页面

加载更多

slot分发内容

slot元素作为组件模板之中的内容分发插槽。这个元素自身将被替换。 有 name 特性的 slot 称为具名 slot。 有 slot 特性的内容将分发到名字相匹配的具名 slot。 内容分发就是指混合父组件的内...

Carbenson
7分钟前
0
0
python开发入门

1.执行python文件 # python ./demo.py 2.Python ImportError: No module named 'requests'异常 解决方法: # pip install requests;...

硅谷课堂
8分钟前
0
0
官宣,PyTorch 1.0 稳定版本现已推出

简评:快来一起快乐地学习吧。 随着 PyTorch 生态系统和社区继续为开发人员提供有趣的新项目和教育资源,今天(12 月 7日)在 NeurIPS 会议上发布了 PyTorch 1.0 稳定版。研究人员和工程师现...

极光推送
22分钟前
0
0
对比理解adr,ldr指令

很多人在写简单的裸机代码或分析uboot时,常常遇到adr ldr指令。却分不清这2者的区别,今天就来谈谈adr与ldr指令。 参照韦老师的代码和Makefile写了test_adr.S: .text .globl _start _start...

天王盖地虎626
32分钟前
2
0
将spring boot 项目注册为Linux的服务

springboot 注册为Linux系统服务 springboot 注册为Linux系统服务

miaojiangmin
34分钟前
3
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部