腾讯云产品
-
Elasticsearch Service 向量分页搜索
这篇说说Elasticsearch两种深度分页方案:search_after用于实时高效翻页,Scroll API用于离线批量导出,均需指定排序字段并利用游标获取后续数据。 Search_after:基于上一页最后文档的排序值作为游标,性能恒定且实时,需结合PIT保证一致性。 Scroll API:创建数据快照后通过scroll_id分批遍历,适合全量导出,需注意及时清理上下文释放资源。
-
Elasticsearch Service 管道管理
Logstash 通过管道来实现数据的采集处理,它包含必选的 input 和 output 插件,以及可选的 filter 插件,并支持多管道并行运行,目前支持并行的上限为10个。这里说明如何通过配置文件管理管道,包括创建管道、修改管道、复制管道和删除管道。
。 -
Elasticsearch Service 自治索引特性
索引的合理设置是业务高效稳定运行的基础,现实中索引管理不仅使用门槛高、运维投入高,更是很多线上问题的源头,目前 ES 60%的运维管理操作、60%的基础线上问题都与此相关,是使用 ES 的关键痛点。
-
Elasticsearch Service 发布管理
在文档库导入、在线测试与效果评估均完成后,可以以将应用发布为独享服务。发布后系统将提供一个可直接调用的 API,同时以独享方式分配计算资源,保障服务性能与其他租户隔离。
-
Elasticsearch Service 创建 Filebeat 采集日志文件
对于需要采集并分析腾讯云 CVM 服务日志的场景,可以使用 Filebeat 采集数据,再发送到腾讯云 Logstash 中进行过滤与预处理,最终传输到腾讯云 Elasticsearch 集群中进行存储,之后可以在 Kibana 中查询并分析日志。这里说明如何配置 Filebeat 采集部署在腾讯云 CVM 中的服务日志。
-
Elasticsearch Service 按量转包年包月
按量计费按使用量付费,提供了更大的灵活性,可以用来进行产品的功能和性能验证,而包年包月成本更为划算。腾讯云 Elasticsearch Service 提供了从按量计费转为包年包月的能力,以满足你灵活地购买和使用集群。
-
Elasticsearch Service 通过 Filebeat 采集 TKE 容器日志
对于需要采集并分析腾讯云 TKE 容器日志的场景,可以使用 Filebeat 采集数据,并将采集的数据传输到腾讯云 Elasticsearch 集群中进行存储,如果需要加工与处理,也可以先将数据发送到腾讯云 Logstash 中进行过滤与预处理,最终可以在 Kibana 中查询并分析日志。这里说明如何配置 Filebeat 采集部署在腾讯云的 TKE 容器日志。
-
Elasticsearch Service 向量量化
这篇说说Elasticsearch向量量化搜索,通过将高精度浮点向量转为低精度整数(如int8),在亿级规模下减少内存4-32倍,并采用粗排(量化向量近似搜索)与精排(原始向量过采样重评分)两阶段平衡性能与召回率,实测int8召回率约96-97%,bbq约90-94%。 量化原理:有损压缩技术将float32转为int8等低精度表示,降低内存并提升速度。 粗排与精排:量化向量快速粗搜后,对前k*oversample个。
-
Elasticsearch Service 查询日志
这里说明 Logstash 实例运行日志的使用说明。用户可以通过实例的运行日志,可以了解实例的运行状况、定位问题、辅助实例的应用开发和运维。
-
流计算 Oceanus 数据库 OceanBase
OceanBase Connector 提供了对 OceanBase 数据库读写支持。目前 Oceanus 提供的 flink-connector-oceanbase-jdbc Connector 组件支持 OceanBase 的 mysql 模式和 oracle 模式。