项目介绍 这个模块主要是对近期所做的一个项目的一个总结，主要是针对 数据地图 中的一个搜索功能做一个优化。那么什么是数据地图呢？这里简单上网查了点资料： 什么是数据地图 针对此次项目中的数据地图，数据地图是基于元数据中心构建的一站式企业数据资产目录，可以看作是 元数据 中心的界面。数据开发、 分析师 、数据运营、 算法工程师 可以在数
......
37
0
0
2023-07-22
1、简介 elasticSearch【分布式开源搜索与分析引擎，适用于所有类型的数据，包括文本，数字，地理空间，结构化和非结构化数据， 秒级从海量数据从检索出我们所需要的数据，而mysql单表如果达到了百万级数据，检索很慢】 用途： 1、应用程序搜索 2、网站搜索 3、企业搜索 4、日志处理和分析 5、基础设施指标和容器检测 6、应用程
......
61
0
0
2023-07-02
目录前置知识1.Analyzer2.Elasticsearch 内置分词器3. Standard Analyzer3.1 Definition3.2 Configuration3.3 实验4. Simple Analyzer4.1 Definition4.2 Configuation4.3 实验5. Stop Analyzer5.1 Definition5.
......
77
0
0
2023-06-13
一、高级查询Query DSL Elasticsearch 高级查询Query DSL： 1、查询接口的步骤 一个查询接口的基本步骤如下： 、创建 SearchRequest搜索请求
创建 SearchRequest 搜索请求，如果不带参数，表示查询所有 索引
、创建 SearchSourceBuilder条件构造
创建 SearchS
......
94
0
0
2023-06-11
目录Elasticsearch rest-high-level-client 基本操作前置准备1.配置依赖2.构建 RestHighLevelClient3.创建索引 client.indices().create4.删除索引 client.indices().delete5.查询索引 client.indices().get6.插入文档 client.in
......
64
0
0
2023-06-06
目录java操作es有两种方式Elasticsearch-Rest-Client（官方，推荐）maven配置文件es配置类导包Spring Data ElasticSearch配置文件实体类daocrud方法命名规则查询springdata对es没有封装的方法elasticsearch transport 通过9300操作mavenjava操作es有两种方式
......
139
0
0
2023-04-07
目录es创建索引和mapping索引和type分开创建索引和type一次创建更改elasticsearch中索引的mapping查看旧索引的mapping创建一个自定义mapping的新索引把旧索引的数据reindex到新索引上删除旧索引按照步骤2创建test索引把test-new索引的数据reindex到test索引上查看test索引的mapping总结e
......
140
0
0
2023-04-03
目录前言连接elasticsearchelasticsearch_dsl.Searchquery方法filter方法index方法elasticsearch_dsl.queryelasticsearch_dsl.Q嵌套类型查询排序分页聚合高亮显示source限制返回字段删除案例分析前言elasticsearch-dsl是基于elasticsearch-py封
......
177
0
0
2023-02-28
目录一、前言二、lucence写2.1 增删改2.2. 并发模型2.2.1. 基本操作2.2.2 更新2.2.3 删除2.2.4 flush和commit2.2.5 merge小结三、 ElasticSearch的写3.1. 宏观看ElasticSearch请求3.2. 详细流程3.2.1 协调节点内部流程3.2.2 主分片节点流程*3.
......
172
0
0
2023-02-08
直接上java整合吧测试连接Easticsearch 的官方地址：https://www.elastic.co/cn/进入bin目录，点击 elasticsearch.bat 文件启动 ES 服务，注意这里的版本要和pom里面的版本对应新建一个maven项目即可，我这里创建springboot项目pom.xml<?xml version="1.0" e
......
194
0
0
2023-01-27
背景随着平台的业务日益增多，基于数据库的全文搜索查询速度较慢，已经无法满足需求。所以，决定基于Elasticsearch 做一个全文搜索平台，支持业务相关的搜索需求。那么第一个问题就是：如何从MySQL同步数据到Elasticsearch？解决方案基于Logstash同步数据Logstash同步数据流程图：优点： 1、组件少，只需要Logstash就可以实现
......
222
0
0
2023-01-20
一、背景微信支付的账单系统是方便用户获取交易记录，针对不同的用户群，账单也分为三类：个人账单：针对普通用户群，这类用户特点是基数大，单个用户数据量小，使用账单系统主要是获取列表以及基础统计；商户账单：针对商户用户群，这类用户特点是基数小，单个用户数据量非常大，使用账单系统主要是获取列表，并且在获取列表时需要支持丰富查询条件；业务账单：针对用户群介于普通用户和
......
142
0
0
2023-01-09
一、简介实际的项目开发过程中，我们通常基于某些主流框架平台进行技术开发，比如 SpringBoot，今天我们就以 SpringBoot 整合 ElasticSearch 为例，给大家详细的介绍 ElasticSearch 的使用！SpringBoot 连接 ElasticSearch，主流的方式有以下四种方式方式一：通过Elastic Transport C
......
203
0
0
2022-12-31
es是啥不说了往期写过这次直接干货。ES与MySQL的对比导入依赖
<dependency>
<groupId>org.elasticsearch.plugin</groupId>
<artifactId>transport-netty4-client</artifactId>
<
......
175
0
0
2022-12-17
前言这段时间在维护产品的搜索功能，每次在管理台看到 elasticsearch 这么高效的查询效率我都很好奇他是如何做到的。这甚至比在我本地使用 MySQL 通过主键的查询速度还快。为此我搜索了相关资料：这类问题网上很多答案，大概意思呢如下：ES 是基于 Lucene 的全文检索引擎，它会对数据进行分词后保存索引，擅长管理大量的索引数据，相对于 MySQL
......
134
0
0
2022-12-12