java与es8实战之二:实战前的准备工作

java,es8,实战,之二,准备,工作 · 浏览次数 : 237

小编点评

**Java API Client 的使用指南** **简介** 《java与es8实战》系列中,我们介绍了使用Java API Client部署和配置Elasticsearch集群和Kibana服务的方法。由于Spring Data模块的更新,Java REST Client不再支持es8.x版本,因此我们使用的是Java API Client进行操作。 **步骤** 1. **创建Maven工程** ``` mkdir elasticsearch-tutorials cd elasticsearch-tutorials mvn archetype:create -Dspring-boot ``` 2. **配置Spring Boot项目** 在`application.yml`文件中配置以下信息: ```yaml spring: data: spring.data.elasticsearch.client.type: REST elasticsearch.properties: # 将您的Elasticsearch服务器配置信息添加到此文件中 elasticsearch: cluster: name: my-elasticsearch-cluster client: transport: type: REST host: localhost:9200 ``` 3. **启动应用程序** ``` mvn spring-boot:run ``` 4. **访问Elasticsearch集群** 访问 `localhost:9200`,您可以看到 Kibana 的主界面。 **配置** 为了配置es集群,您可以使用以下命令修改 `elasticsearch.properties` 文件: ``` elasticsearch.properties.put(ELASTICSEARCH_HOST_NAME, "localhost:9200"); ``` **重要知识点** * Java API Client 支持多种数据格式,包括 JSON、CSV 和 XML。 * 您可以使用 `@Autowired` 注解自动配置Spring Data Elasticsearch客户端。 * 您可以使用 `log4j` 等日志框架来记录日志。 * 您可以使用 `@Configuration` 注解来配置 Spring Boot 项目。 **结论** 使用Java API Client部署和配置Elasticsearch集群和 Kibana服务非常简单。通过阅读以上指南,您可以轻松地完成该任务。

正文

欢迎访问我的GitHub

这里分类和汇总了欣宸的全部原创(含配套源码):https://github.com/zq2599/blog_demos

本篇概览

  • 本篇是《java与es8实战》系列的第二篇,主要任务是为动手实战做好准备工作,包括这些内容
  1. 借助docker,快速部署es服务
  2. 借助docker-compose,以更简单的方式部署es集群和kibana服务
  3. 介绍实战中涉及的环境信息,例如JDK、软件、库的版本
  4. 聊聊java操作es的基本套路
  5. 为整个《java与es8实战》系列创建父工程,后面的实战有关的代码,全部写在这个父工程下面
  • OK,开始

借助docker,快速部署es服务

借助docker-compose,以更简单的方式部署es集群和kibana服务

介绍实战中的环境信息,给您作为参考

  1. 操作系统:macOS Monterey(M1 Pro芯片的MacBook Pro,16G内存)
  2. Docker:Docker Desktop 4.7.1 (77678)
  3. ElasticSearch:8.2.2
  4. Kibana:8.2.2
  5. JDK:openjdk 11.0.14.1
  6. Maven:3.8.5
  7. IDEA: 2022.1.2 (Ultimate Edition)
  8. SpringBoot:2.7.0

聊聊java操作es的基本套路

  • 从es官方的视角来看,提供了三种操作es的方式
  1. Java Transport Client :提供异步操作es的客户端API,自7.0.0版本开始被废弃,所以本系列是用不上了
  2. Java REST Client:这个算是大名鼎鼎了,平常用的也很多,它由Low Level和Hight Level两部分组成,Low Level负责负载均衡、容错、持续连接、底层日志跟踪等基本能力,Hight Level是基于Low Level实现的,提供了原有的Transport Client的客户端能力,提供同步和异步两种操作模式,从7.X版本开始,es官方就给出了迁移指导:推荐用户从Java REST Client迁移到Java API Client
  3. Java API Client:官方主推方案,依赖Elasticsearch core,对请求和响应都有强类型约束,支持jackson和JSON-b等两种序列化&反序列化方案,所有API都提供了同步和异步两种方式,推荐使用fluent style+lambda模式编码
  • 从以上小结可以看出,在es8.x的环境下,使用Java API Client是首选,不过旧代码以Java REST Client居多,拿来也能在es8环境使用(通过一个api设置,让请求的header中带有兼容信息,es服务器收到此信息会以7.x模式处理请求)

  • 再从spring视角来看如何操作es

  1. Spring Data模块下属的Spring Data Elasticsearch是推荐的es操作方案
  2. High Level REST Client是Spring Data中默认的底层实现
  3. 尽管Spring Data依然支持Java Transport Client,但推荐使用的是High Level REST Client
  4. 遗憾的是,Spring Data目前还不支持Java API Client,也不支持es的8.x版本,详情如下表,来自官方
image-20220610073638114
  • 由于《java与es8实战》系列已将es版本固定为8.2,因此,编码过程中,es操作方案选择es官方的Java API Client,和Spring Data不会有关系了

为整个《java与es8实战》系列创建父工程

  • 整个系列后面的文章,少不了写代码,还是提前建好工程吧,用maven建立一个父工程,后面的代码都放在这个父工程下面,方便jar包版本和代码资源的统一管理

  • 新建名为elasticsearch-tutorials的maven工程,其pom.xml内容如下,可见非常简单,仅仅是对jar做了些管理,再定义了一些常量,今后新增的子工程可以用到,例如SpringBoot版本为2.7.0

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">

    <modelVersion>4.0.0</modelVersion>
    <groupId>com.bolingcavalry</groupId>
    <artifactId>elasticsearch-tutorials</artifactId>
    <version>1.0-SNAPSHOT</version>
    <packaging>pom</packaging>
    <name>elasticsearch-tutorials</name>

    <properties>
        <java.version>11</java.version>
        <maven.compiler.source>11</maven.compiler.source>
        <maven.compiler.target>11</maven.compiler.target>
        <!--    <maven-compiler-plugin.version>3.6.1</maven-compiler-plugin.version>-->
        <springboot.version>2.7.0</springboot.version>
        <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
        <project.reporting.outputEncoding>UTF-8</project.reporting.outputEncoding>
        <elastic.version>8.2.2</elastic.version>
    </properties>

    <dependencyManagement>
        <dependencies>
            <dependency>
                <groupId>co.elastic.clients</groupId>
                <artifactId>elasticsearch-java</artifactId>
                <version>${elastic.version}</version>
            </dependency>

            <dependency>
                <groupId>com.fasterxml.jackson.core</groupId>
                <artifactId>jackson-databind</artifactId>
                <version>2.12.3</version>
            </dependency>

            <!-- Needed only if you use the spring-boot Maven plugin -->
            <dependency>
                <groupId>jakarta.json</groupId>
                <artifactId>jakarta.json-api</artifactId>
                <version>2.0.1</version>
            </dependency>

        </dependencies>
    </dependencyManagement>

</project>
  • 至此,准备工作算是完成了,接下来文章会很轻松,和大家聊聊关于Java API Client的一些重要知识点,毕竟后面写代码全指望它了

欢迎关注博客园:程序员欣宸

学习路上,你不孤单,欣宸原创一路相伴...

与java与es8实战之二:实战前的准备工作相似的内容:

java与es8实战之二:实战前的准备工作

编码实战前的准备工作,包括搭建环境,列举各软件参考版本,选择合适的库,创建父工程等

java与es8实战之一:以builder pattern开篇

欣宸原创《java与es8实战》系列的开篇,重温经典,夯实基础,再出发

java与es8实战之三:Java API Client有关的知识点串讲

正式使用官方的Java API Client操作ES之前,将与之有关的重要知识点先做一轮串讲,后面开始编码时,疑点已扫清,可以愉快而顺畅的实现业务功能

java与es8实战之四:SpringBoot应用中操作es8(无安全检查)

最简单的,在SpringBoot应用中使用ES官方库操作ES8

java与es8实战之五:SpringBoot应用中操作es8(带安全检查:https、账号密码、API Key)

SpringBoot应用中操作es8,本篇重点是如何连接带安全检查的es8服务端(https、账号密码、API Key)

java与es8实战之六:用JSON创建请求对象(比builder pattern更加直观简洁)

向ES发送请求时,如何创建请求对象呢?官方推荐的builder patter,在面对复杂的请求对象结构时还好用吗?有没有更加直观简洁的方法,尽在本文一网打尽

Java与React轻松导出Excel/PDF数据

前言 在B/S架构中,服务端导出是一种高效的方式。它将导出的逻辑放在服务端,前端仅需发起请求即可。通过在服务端完成导出后,前端再下载文件完成整个导出过程。服务端导出具有许多优点,如数据安全、适用于大规模数据场景以及不受前端性能影响等。 本文将使用前端框架React和服务端框架Spring Boot搭

[转帖]【JVM】Java内存区域与OOM

引入 Java与C++之间有一堵由内存动态分配和垃圾收集技术所围成的“高墙”,墙外面的人想进去,墙里面的人却想出来。 Java虚拟机运行时数据区 如图所示 1.程序计数器(线程私有) 作用 记录当前线程所执行到的字节码的行号。字节码解释器工作的时候就是通过改变这个计数器的值来选取下一条需要执行的字节

[转帖]【JVM】Java内存区域与OOM

引入 Java与C++之间有一堵由内存动态分配和垃圾收集技术所围成的“高墙”,墙外面的人想进去,墙里面的人却想出来。 Java虚拟机运行时数据区 如图所示 1.程序计数器(线程私有) 作用 记录当前线程所执行到的字节码的行号。字节码解释器工作的时候就是通过改变这个计数器的值来选取下一条需要执行的字节

Java反射与Fastjson的危险反序列化

Preface 在前文中,我们介绍了 Java 的基础语法和特性和 fastjson 的基础用法,本文我们将深入学习fastjson的危险反序列化以及预期相关的 Java 概念。 什么是Java反射? 在前文中,我们有一行代码 Computer macBookPro = JSON.parseObje