目录
- 一、前言
-
- 1.1、日志架构思考
- 二、日志平台具体实现
-
- 2.1、日志采集--采集系统日志
- 2.2、日志采集--采集接口日志
- 三、ES频繁插入优化
-
- 3.1、大量写入如何提高性能
- 3.2、单线程bulk批量写入
- 3.3、多线程bulk批量写入
一、前言
目前接触的项目系统架构如上,属于分布式微服务架构。规模、QPS等特点决定它算不上大规模高并发高性能企业级的分布式微服务架构,因此一些业务场景要求的技术栈选型也是因地制宜。
当前项目要求,需要对应日志管理分析能力,这里不仅仅需要收集/搜索系统日志(info、warn、error等),而且还需要根据不同业务操作要求,来处理特别场景的日志,如接口调用记录明细、接口调用预警【设置单个接口调用次数阈值、单个接口被单个用户调用次数阈值等等】、日志报表统计图等。
流行的ELK日志平台,为什么不选择?<