yun
-
Elasticsearch Service 同步两个 Elasticsearch 集群中的数据
使用 Logstash 可以完成同步两个 Elasticsearch 集群中的数据,例如把数据从自建的 Elasticsearch 集群同步到腾讯云上的 Elasticsearch 集群,或者同步两个腾讯云上的 Elasticsearch 集群中的数据。下面介绍如何使用腾讯云 Logstash 同步两个 Elasticsearch 集群中的数据。
-
Elasticsearch Service 消费 kafka 数据并写入到 Elasticsearch
Logstash 的一个典型应用场景,就是消费 kafka 中的数据并且写入到 Elasticsearch,使用腾讯云的 Logstash 产品,可以通过简单的配置快速地完成这一过程。
-
Elasticsearch Service 企业微信机器人接收 Watcher 告警
腾讯云 Elasticsearch Service 白金版中支持了 X-Pack Watcher 特性,通过添加触发器、操作等配置,可以实现当条件满足时执行某些特定操作。例如当检测到索引中出现错误日志时自动发送告警。这里说明如何配置企业微信机器人接收 Watcher 发出的告警。
-
Elasticsearch Service 写入拒绝或查询拒绝问题如何解决?
集群在某些情况下会出现写入拒绝率(bulk reject)/查询拒绝率(search reject)增大的现象,具体表现为 bulk 写入/查询时,会有类似以下报错:
报错一。 -
Elasticsearch Service 集群整体 CPU 使用率过高问题如何解决?
集群所有节点 CPU 都很高,但读写都不是很高。具体表现可以从 kibana 端 Stack Monitoring 监控页面进行查看:
另外也可以从 ES 控制台 UI 的节点监控页面查看各节点的 CPU 使用率情况:
出现这种情况,由于表面上看集群读写都不高,导致很难快速从监控上找到根因。所以需要细心观察,从细节中找答案,下面我们介绍几种可能出现的场景以及排查思路。 -
Elasticsearch Service 集群磁盘使用率高和 read_only 状态问题如何解决?
当磁盘使用率超过85%,或者达到100%,会导致 Elasticsearch 集群或 Kibana 无法正常提供服务,可能会出现以下几种问题场景。
-
Elasticsearch Service 集群负载不均的问题如何解决?
集群在某些情况下会出现个别节点 CPU 使用率远高于其他节点的现象,具体表现为 ES 集群控制台节点监控上可以明显看到某些节点 CPU 使用率很高。
-
Elasticsearch Service 集群健康状态异常(RED、YELLOW)如何解决?
这篇解释Elasticsearch集群状态异常(RED/YELLOW)的原因、查看方法及问题分析。RED因主分片未分配,影响读写;YELLOW因副本分片未分配,通常可自动恢复。通过GET /_cluster/health查看状态,GET /_cluster/allocation/explain定位未分配分片的具体原因,如节点离开导致主分片无可用副本。 – RED与YELLOW定义:RED表示主分片未分配,需重点关注。
-
Elasticsearch Service 读取 COS 中的日志文件并写入到 Elasticsearch
在某些场景中,业务服务端或云上组件的日志会归档存储到对象存储 COS 中,在需要进行查询时,需要从 COS 中获取并查询日志。此时,可借助 Logstash 自动地读取 COS 中指定 bucket 的日志文件,然后写入到 Elasticsearch 中,再使用 Kibana 可视化组件进行查询和分析。
-
Elasticsearch Service 使用流计算 Oceanus 实时同步 MySQL 数据到 ES
了从 mysql 数据库采集数据到流计算服务 Oceanus 进行分析,最后输出到 ElasticSearch 服务的实践。本方案可作为日志搜索场景解决方案使用。使用了云数据库 MySQL、流计算 Oceanus、Elasticsearch、Kibana 和私有网络 VPC。