Logstore支持Shard自动分裂
日志服务提供shard的split和merge功能,用户可以根据需求调整Logstore处理能力。在打开自动分裂后,服务会自动根据当前流量进行评估,当超过当前流量一段时间后系统会自动分裂Logstore下Shard数目,达到自适应流量目的。
查询分析(LogSearch/Analytics) 支持外部MySQL联合查询/结果写入
日志服务新增Join功能,可以在查询分析阶段对外部MySQL中数据进行联合查询,增强查询体验。同时支持将计算结果写入MySQL表中。(当前MySQL功能需要通过CLI 进行配置)
通过联合查询功能,可以进一步提升日志分析能力。
查询分析(LogSearch/Analytics) 新增JSON/Array/Map展开、空间几何运算、地理(GeoHash)函数支持
日志服务查询分析(LogSearch/Analytics)新增JSON/Array(unnest)展开、空间几何运算、地理(GeoHash)函数支持,主要包括:
- 对元素中的Json/Array/Map数据进行行展开
- Well-Known Text (WKT) 格式描述的几何实体之间的位置、距离、大小等运算
- 根据经纬度计算GeoHash位置
通过新增函数提升多样日志数据分析能力。
- unset:https://help.aliyun.com/document_detail/84586.html (使用说明:https://yq.aliyun.com/articles/602934)
- 空间几何:https://help.aliyun.com/document_detail/67927.html
- 地理映射:https://help.aliyun.com/document_detail/84374.html
Logtail支持Beats/Logstash协议
日志服务Logtail支持Lumberjack协议作为输入源,可支持将Beats系列软件(MetricBeat、PacketBeat、Winlogbeat、Auditbeat、Filebeat、Heartbeat等)、Logstash采集数据转发到日志服务。支持各类软件/应用Metric、各类网络协议、审计、Windows事件等数据实时采集到日志服务,便于对这类数据有存储、检索、统计、监控需求的用户快速接入。
数据接入向导支持IIS日志配置
日志服务支持IIS日志采集,包括Microsoft IIS日志格式、NCSA公用日志文件格式、W3C扩展文件日志格式三种,默认格式为W3C。
通过数据接入向导,可以在不到1分钟时间内一站式完成IIS日志接入、配置以及可视化报表等功能。
Logtail 快速诊断工具升级
Logtail 快速诊断工具升级,提升异常诊断准确性以及交互体验
日志服务Logtail快速诊断工具功能升级,支持交互式诊断功能,根据诊断问题以及用户选择自动选择诊断项目,大大提升异常诊断准确性以及交互体验。
日志服务控制台体验优化
控制台体验完成如下优化:
- JSON类型字段子项最大配置从20个提高到50个
- 优化查询分析框换行功能,用户可根据喜好选择Ctrl+Enter换行还是Enter换行,并提供自动换行
- 优化错误提示窗UI以及错误信息