搜索结果
查询Tags标签： elasticsearch，共有 552条记录-
使用 Easysearch 还原 Elasticsearch 快照数据
本文主要验证 Elasticsearch 快照在 Easysearch 中进行数据恢复。 准备测试数据 索引别名模版生命周期策略创建快照 PUT /_snapshot/my_backup {"type": "fs","settings": {"location": "/infini/test/es_backup"} }PU…
2023/6/17 18:22:30 人评论 次浏览 -
基于Elasticsearch 为电商提供商品数据大数据查询
基于Elasticsearch 为电商提供商品数据大数据查询 前言 对于现代电商的产品，维度的多员花，与一套强大的搜索引擎，那是非常必要的。今天我们主要是描述我们在从事电商搜索引擎过程中的遇到的一些问题和经验分享。 过程 数据准备1、我们准备为我们需要做查找的数据做好一…
2023/6/15 14:22:39 人评论 次浏览 -
分布式数据库 Join 查询设计与实现浅析
相对于单例数据库的查询操作，分布式数据查询会有很多技术难题。 本文记录 Mysql 分库分表 和 Elasticsearch Join 查询的实现思路，了解分布式场景数据处理的设计方案。 文章从常用的关系型数据库 MySQL 的分库分表Join 分析，再到非关系型 ElasticSearch 来分析 Join 实…
2023/6/9 11:52:20 人评论 次浏览 -
Centos 7 通过 targz 文件安装 Elastic Search 服务
区别于通过发行版自带的仓库, 介绍如何通过 targz 文件安装 Elastic Search 服务, 使用的 Linux 为 Centos 7 下载 https://www.elastic.co/downloads/elasticsearch 选择 Linux x86_64, 下载 elasticsearch-8.8.0-linux-x86_64.tar.gz 安装 解压到 /opt/elasticsearch, 并…
2023/6/9 1:23:38 人评论 次浏览 -
INFINI Labs 产品更新 | Console 新增数据比对、新增数据看板表格组件及支持下钻功能等
INFINI Labs 产品更新啦~，本次产品版本更新包括 Gateway v1.14.0、Console v1.2.0、Easysearch v1.1.1 等，其中 Console 在上一版基础上做了很多优化改进以及新增了一些特性，如新增数据比对校验功能、数据看板模块新增了表格组件、图表组件支持下钻功能等。欢迎下载体验…
2023/5/27 1:23:46 人评论 次浏览 -
Elasticsearch 之 join 关联查询及使用场景
在Elasticsearch这样的分布式系统中执行类似SQL的join连接是代价是比较大的，然而，Elasticsearch却给我们提供了基于水平扩展的两种连接形式 。这句话摘自Elasticsearch官网，从“然而”来看，说明某些场景某些情况下我们还是可以使用的 一、join总述 1、关系类比 在关系…
2023/5/26 1:22:23 人评论 次浏览 -
Elasticsearch与Clickhouse数据存储对比
1 背景 京喜达技术部在社区团购场景下采用JDQ+Flink+Elasticsearch架构来打造实时数据报表。随着业务的发展Elasticsearch开始暴露出一些弊端，不适合大批量的数据查询，高频次分页导出导致宕机、存储成本较高。 Elasticsearch的查询语句维护成本较高、在聚合计算场景下出…
2023/5/24 11:52:06 人评论 次浏览 -
聊聊ElasticeSearch并发写的乐观锁机制
概述 ES的多客户端并发更新是基于乐观并发控制，通过版本号机制来实现冲突检测。 关键对象 ES的老版本是用过_version字段的版本号实现乐观锁的。现在新版增加了基于_seq_no与_primary_term字段，三个字段做乐观锁并发控制。_version：标识文档的版本号，只有当前文档的更…
2023/5/23 18:22:15 人评论 次浏览 -
elasticsearch升级和索引重建。
1.背景描述2020年团队决定对elasticsearch升级。es（elasticsearch缩写，下同）当前版本为0.9x，升级到5.x版本。es在本公司承载三个部分的业务，站内查询，订单数据统计，elk日志分析。对于站内查询和订单数据统计，当前业务架构是mysql -> canal -> kafka -> e…
2023/4/15 18:22:08 人评论 次浏览 -
elasticsearch 官方优化建议
1.一般建议a.不要返回过大的结果集。这个建议对一般数据库都是适用的，如果要获取大量结果，可以使用search_after api，或者scroll （新版本中已经不推荐）。b.避免大的文档。 2. 如何提高索引速度a.使用批量请求。为了达到最好的效果，可以进行测试，递增地提高bulk的数…
2023/4/9 11:21:59 人评论 次浏览 -
ElasticSearch深度分页详解
1 前言ElasticSearch是一个实时的分布式搜索与分析引擎，常用于大量非结构化数据的存储和快速检索场景，具有很强的扩展性。纵使其有诸多优点，在搜索领域远超关系型数据库，但依然存在与关系型数据库同样的深度分页问题，本文就此问题做一个实践性分析探讨2 from + size分…
2022/11/15 23:24:17 人评论 次浏览 -
在Linux系统下安装elasticsearch（包括es集群）
Elasticsearch 简介Elasticsearch 是一个非常强大的搜索引擎。它目前被广泛地使用于各个 IT 公司。Elasticsearch 是由 Elastic 公司创建。它的代码位于 GitHub - elastic/elasticsearch: Free and Open, Distributed, RESTful Search Engine。目前，Elasticsearch 是一个…
2022/10/27 5:24:53 人评论 次浏览 -
Java注解（一个真实的Elasticsearch案例）
/** * elastic文档注解，定义每个elasticsearch文档上的属性 * * @author xiangwang */@Inherited@Retention(RetentionPolicy.RUNTIME)@Target({ ElementType.TYPE })public @interface Document { String index(); String type() default "_doc"; bo…
2022/10/18 14:54:51 人评论 次浏览 -
干货 | Elasticsearch Java 客户端演进历史和选型指南
1、Elasticsearch java 客户端为什么要选型？ Elasticsearch 官方提供了很多版本的 Java 客户端，包含但不限于：Transport 客户端 Java REST 客户端 Low Level REST 客户端 High Level REST 客户端 Java API 客户端非官方的 Java 客户端，包含但不限于：Jest 客户端 BBos…
2022/9/8 1:23:15 人评论 次浏览 -
ElasticSearch聚合之管道聚合（Pipeline Aggregation）
管道聚合 让上一步聚合的结果作为下一个聚合的输入，类似stream()流的操作，当不上终结操作时，每次操作的流都作为下次操作的输入 管道类型有很多种不同类型，每种类型都与其他聚合计算不同的信息，但是可以将这些类型分为两类父级 父级聚合的输出提供了一组管道聚合，它…
2022/9/7 23:25:14 人评论 次浏览
