文档章节

阿里云日志服务的架构与优势

mcy0425
 mcy0425
发布于 10/12 13:55
字数 963
阅读 5
收藏 0

关于阿里云日志服务使用教程详细内容:阿里云日志服务使用教程

Logtail

帮助您快速收集日志的Agent。其特点如下所示:

基于日志文件、无侵入式的收集日志
只读取文件。
日志文件无侵入。
安全、可靠
支持文件轮转不丢失数据。
支持本地缓存。
网络异常重试。
方便管理
Web端操作。
可视化配置。
完善的自我保护
实时监控进程CPU、内存消耗。
限制使用上限。
前端服务器

采用LVS + Nginx构建的前端机器。其特点如下所示:

HTTP、REST协议
水平扩展
流量上涨时可快速提高处理能力。
支持增加前端机。
高吞吐、低延时
纯异步处理,单个请求异常不会影响其他请求。
内部采用专门针对日志的Lz4压缩,提高单机处理能力,降低网络带宽。
后端服务器

后端是分布式的进程,部署在多个机器上,完成实时对Logstore数据的持久化、索引、查询以及投递至MaxCompute。整体后端服务的特点如下所示:

数据高安全性 :
您写入的每条日志,都会被保存3份。
任意磁盘损坏、机器宕机情况下,数据自动复制修复。
稳定服务:
进程崩溃和机器宕机时,Logstore会自动迁移。
自动负载均衡,确保无单机热点。
严格的Quota限制,防止单个用户行为异常对其他用户产生影响。
水平扩展:
以分区(Shard)为单位进行水平扩展。
用户可以按需动态增加分区来增加吞吐量。
产品优势:
全托管服务

应用性强,5分钟即可接入服务进行使用,Agent支持任意网络下数据采集。
LogHub覆盖Kafka 100%功能,提供完整监控、报警等功能数据,并支持弹性伸缩(可支持PB/Day规模),使用成本为自建50%以下。
LogSearch/Analytics 提供快速查询、仪表盘和报警功能,使用成本为自建 20%以下。
0+接入方式,与云产品 (OSS/E-MapReduce/MaxCompute/Table Store/MNS/CDN/ARMS等)、开源软件(Storm、Spark)无缝对接。
生态丰富

LogHub 支持30+采集端,包括Logstash、Fluent等,无论是嵌入式设备,网页,服务器,程序等都能轻松接入。在消费端,支持与Storm、Spark Streaming、云监控等对接。
LogShipper 支持丰富数据格式(TextFile、SequenceFile、Parquet等),支持自定义Partition,数据可以直接被Presto、Hive、Spark、Hadoop、E-MapReduce、MaxCompute、HybridDB等处理。
LogSearch/Analytics 查询分析语法完整、兼容SQL92、支持JDBC协议与Grafana对接。
实时性强

LogHub:写入即可消费;Logtail(采集Agent)实时采集传输,1秒内到服务端(99.9%情况)。
LogSearch/Analytics:写入即可查询分析,在多个查询条件下1秒可查询10亿级数据,多个聚合条件下1秒可分析1亿级数据。
完整API/SDK

轻松支持自定义管理及二次开发。
所有功能均可通过API/SDK实现,提供多种语言SDK,可轻松管理服务和百万级设备。
查询分析语法简单便捷,兼容SQL92;接口友好、适合与生态软件对接,提供Grafana对接方案。
更多精品课程:

阿里云大学官网——云生态下的创新人才工场

© 著作权归作者所有

共有 人打赏支持
mcy0425
粉丝 7
博文 510
码字总数 177494
作品 0
基于容器技术的阿里云区块链优势和实现方法

以下内容根据演讲PPT及现场分享整理: 在2017年北京云栖大会的“开发者服务专场”上,阿里云高级技术专家余珊带来了《敏捷智连——基于容器技术的区块链业务创新》的精彩分享。分享中,他重点...

1993wang
01/03
0
0
API信息全掌控,方便你的日志管理——阿里云推出API网关打通日志服务

摘要: 近日,阿里云API网关对接了日志服务,可以输出用户在API网关产生的API调用日志,目前支持将 API 接入 API 网关的用户查看日志明细、概况、报表分析、在线查询等。 访问日志(Acccess...

阿里云云栖社区
02/06
0
0
如何用阿里云快速构建游戏发行技术体系

在2018云栖大会深圳峰会阿里云支持与服务专场上,由卓游技术总监张保峰带来了“如何用阿里云快速构建游戏发行技术体系”的主题分享,主要从三方面进行讲解,首先介绍了选择和阿里云合作的背景...

smile小太阳
05/07
0
0
容器加速业务创新,Serverless Kubernetes之解读

2018云栖大会武汉峰会企业研发云专场,阿里云高级技术专家汤志敏带来“容器加速业务创新,Serverless Kubemetes之解读”的精彩演讲,本文首先介绍了云原生架构的概念,其次详细阐述了标准的Kub...

云迹九州
05/29
0
0
阿里云ECS和Centos7实战-“与云共舞,新成大海”

HI,小伙伴们,经过半年时间的整理和内容的准备,我的新课《阿里云ECS与Centos7实战》很快就将以视频课程的方式在慕课网(imoocc.com)的实战课程中与大家见面了。 5月28日,慕课网实战课程首发...

Jeson老师
05/24
0
0

没有更多内容

加载失败,请刷新页面

加载更多

linux使用ntfs-3g操作ntfs格式硬盘

Linux内核目前只支持对微软NTFS文件系统的读取。 NTFS-3G 是微软 NTFS 文件系统的一个开源实现,同时支持读和写。NTFS-3G 开发者使用 FUSE 文件系统来辅助开发,同时对可移植性有益。 安装 ...

linuxprobe16
今天
1
0
kubeadm部署kubernetes集群

一、环境要求 这里使用RHEL7.5 master、etcd:192.168.10.101,主机名:master node1:192.168.10.103,主机名:node1 node2:192.168.10.104,主机名:node2 所有机子能基于主机名通信,编辑...

人在艹木中
今天
10
0
Shell特殊符号总结以及cut,sort,wc,uniq,tee,tr,split命令

特殊符号总结一 * 任意个任意字符 ? 任意一个字符 # 注释字符 \ 脱义字符 | 管道符 # #号后的备注被忽略[root@centos01 ~]# ls a.txt # 备注 a.txt[root@centos01 ~]# a=1[root@centos01...

野雪球
今天
3
0
OSChina 周二乱弹 —— 程序员圣衣

Osc乱弹歌单(2018)请戳(这里) 【今日歌曲】 @达尔文:分享Skeeter Davis的单曲《The End of the World》 《The End of the World》- Skeeter Davis 手机党少年们想听歌,请使劲儿戳(这里...

小小编辑
今天
20
0
[ python import module ] 导入模块

import moudle_name ----> import module_name.py ---> import module_name.py文件路径 -----> sys.path (这里进行查找文件) # from app.web import Personimport app.web.Person as Pe......

_______-
昨天
5
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部