最新 最热

Loki日志聚合系统

Loki是 Grafana Labs 团队最新的开源项目,是一个水平可扩展,高可用性,多租户的日志聚合系统。它的设计非常经济高效且易于操作,因为它不会为日志内容编制索引,而是为每个日志流编制一组标签。项目受 Prometheus 启发,官方的...

2022-10-31
0

EFK日志平台部署

日志收集方案是采用 Elasticsearch、Fluentd、Filebeat 和 Kibana(EFK)技术栈。 Fluented主要用来收集k8s组件和docker容器日志,Filebeat主要用来收集应用日志,主要因为目前项目中应用日志并未全部通过stdout方式输出到do...

2022-10-31
0

B站基于Clickhouse的下一代日志体系建设实践

日志作为线上定位问题排障的重要手段,在可观测领域有着不可替代的作用。稳定性、成本、易用性、可扩展性都是日志系统需要追求的关键点。

2022-10-28
0

大数据ELK(二十六):探索数据(Discovery)

我们发现没有展示任何的数据。但我们之前已经把数据导入到Elasticsearch中了。

2022-10-15
0

大数据ELK(二十二):采集Apache Web服务器日志

Apache的Web Server会产生大量日志,当我们想要对这些日志检索分析。就需要先把这些日志导入到Elasticsearch中。此处,我们就可以使用Logstash来实现日志的采集...

2022-10-12
0

大数据ELK(二十一):Logstash简介和安装

Logstash是一个开源的数据采集引擎。它可以动态地将不同来源的数据统一采集,并按照指定的数据格式进行处理后,将数据加载到其他的目的地。最开始,Logstash主要是针对日志采集,但后来Logstash开发了大量丰富的插件,所以,它可...

2022-10-11
0

电力时间源服务器(北斗卫星同步时钟)技术应用方案

近年来,随着电网运行水平的提高,大部分变电站采用综合自动化方案,远方集中控制、操作,既提高了劳动生产率,又减少了人为误操作的可能。采用变电站自动化技术是变电站计算机应用的方向,也是电网发展的趋势。由于自动化系统(设...

2022-10-09
1

大数据ELK(十九):使用FileBeat采集Kafka日志到Elasticsearch

在资料中有一个kafka_server.log.tar.gz压缩包,里面包含了很多的Kafka服务器日志,现在我们为了通过在Elasticsearch中快速查询这些日志,定位问题。我们需要用FileBeats将日志数据上传到Elasticsearch中。...

2022-10-09
0

大数据ELK(十八):Beats 简单介绍和FileBeat工作原理

Beats是一个开放源代码的数据发送器。我们可以把Beats作为一种代理安装在我们的服务器上,这样就可以比较方便地将数据发送到Elasticsearch或者Logstash中。Elastic Stack提供了多种类型的Beats组件。...

2022-10-09
0

Dapr 可观测性之指标与日志

前面我们了解了 Dapr 可观测性中的分布式追踪部分的支持,本文我们将来介绍下指标和日志这方面的支持。

2022-09-29
0