标签: elk
所有带有标签 "elk".
使用Elasticsearch代替数据库like以加快查询的各种技术方案+实现细节
以海量订单查询为例,使用Elasticsearch替代联系人信息的数据库LIKE模糊查询,再回查数据库获取订单。介绍索引设计、历史与增量数据同步、UTC时间处理、分页优化,以及查询回退和同步差异的处理思路。
在业务开发中使用ElasticSearch的指导手册+附真实业务优化ElasticSearch场景
整理业务开发中使用Elasticsearch的检查要点,包括分词验证、字段映射、索引规划、生命周期和容量评估。结合真实日志业务,记录清理与写入引发的性能问题,以及Data Stream、熔断和批量处理等优化思路。
跟着官方文档一步一步搭建Elastic Stack(3节点ES集群+Kibana+Filebeat+Metricbeat)+ 零停机由单节点切换到集群解决方案
使用Docker Compose搭建包含三节点Elasticsearch集群、Kibana、Filebeat和Metricbeat的Elastic Stack,说明TLS与监控配置。结合生产环境迁移经历,讨论通过域名切换、数据迁移和连接验证完成单机到集群过渡的步骤。
Log4j2的使用(三)不同的环境使用不同的配置
介绍在不同环境使用不同Log4j2输出格式与配置的实现方式,包括SystemPropertyArbiter、属性替换、自定义Lookup插件和ScriptAppenderSelector。结合项目部署流程,讨论启动参数与代码扩展方案的选择。
使用Filebeat和AWS CloudWatch Logs将EC2上的Tomcat的access_log传送到Elasticsearch中并使用ILM完成日志的自动管理
在CloudWatch Logs到Elasticsearch的日志采集方案中,使用Data Stream和ILM管理索引滚动与过期删除。结合实践介绍Filebeat内存队列、批量写入和并发参数的调优过程,并记录延迟、费用与少量日志丢失等问题。
使用Filebeat和AWS CloudWatch Logs将EC2上的Tomcat的access_log传送到ELK
介绍将AWS EC2上的Tomcat访问日志送入ELK的整体方案:由CloudWatch Agent收集日志,Filebeat从CloudWatch Logs拉取,再交给Logstash解析并写入Elasticsearch。记录相关配置、流程验证及故障排查思路。
ElasticSearch Java API的使用
从Search API的请求结构和Query DSL入手,介绍Elasticsearch查询条件、排序、返回字段及分页的组织方式。通过示例说明如何将DSL转换为Java API调用,并开启请求日志辅助调试。
Log4j2的使用(二)动态修改日志级别
介绍在不重启应用的情况下动态调整Log4j2日志级别的两种方式:通过JConsole操作JMX配置,或通过HTTP接口调用编程式配置。结合排查生产环境问题的场景,比较两种方式的适用范围。