零、概念介绍

简单学习参考

官网

官方文档

基础学习参考

Elasticsearch索引原理

Elasticsearch 是一个分布式可扩展的实时搜索和分析引擎,一个建立在全文搜索引擎 Apache Lucene(TM) 基础上的搜索引擎.

本质上是一个分布式数据库，允许多台服务器协同工作，每台服务器可以允许多个Elastic实例，单个实例被称为一个节点（node），一组节点构成一个集群（cluster）

当然 Elasticsearch 并不仅仅是 Lucene 那么简单，它不仅包括了全文搜索功能，还可以进行以下工作:

分布式实时文件存储，并将每一个字段都编入索引，使其可以被搜索。

可实现亿级数据实时查询

实时分析的分布式搜索引擎。

可以扩展到上百台服务器，处理PB级别的结构化或非结构化数据。

0-1 内部结构

Index - 数据管理的顶层单位（单个数据库）

Document - Index内的单条记录，多条文档构成了一个Index（Json格式文档）注意！同一个Index内的Document不要求有相同的结构（scheme），但最好保持相同，有利于提高搜索效率。

Type - Index内的虚拟逻辑分组，用来过滤Document
比如weather这个 Index 里面，可以按城市分组（北京和上海），也可以按气候分组（晴天和雨天），这种分组就叫做 Type
不同的Type应该有相似的结构，例如：性质完全不同的数据（比如products和logs）应该存成两个 Index，而不是一个 Index 里面的两个 Type（虽然可以做到）。

注意！Elastic 6.X版本中只允许每个Index包含一个Type，7.X将会彻底删除Type

0-2 可视化工具

参考链接

Kibana - 下载链接

Kibana - 官方使用文档

Grafana - 下载链接

0-2-1 Kibana - win下使用

配置文件修改，将hosts指向elastic开启端口

需要等待一段时间，等终端开始显示完成

使用浏览器访问地址http://localhost:5601

一、安装

官网安装文档

注意：Elasticsearch是用Java开发的，最新版本的Elasticsearch需要安装jdk1.8以上的环境

安装包下载完，解压，进入到bin目录，启动 elasticsearch.bat 即可

1-0 Windows安装

https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.7.0.msi

windows 建议使用MSI程序包，可以基于GUI界面完成安装

1-1 Windows 下启动

节点成功运行显示
[code]# 使用命令行启动节点和单个集群（注意进入exe目录下）
.\elasticsearch.exe\elasticsearch.exe

# 使用命令行启动节点的时候覆盖集群或节点名称
./elasticsearch -Ecluster.name=my_cluster_name -Enode.name=my_node_nameelasticsearch -Ecluster.name=my_cluster_name -Enode.name=my_node_name
1-2 Linux 下安装
[code]# 命令行方式下载
$ wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.7.0.tar.gz
$ tar -xvf elasticsearch-6.7.0.tar.gz
$ cd elasticsearch-6.7.0 / bin

# 启动
$ ./elasticsearch

# 报错"max virtual memory areas vm.maxmapcount [65530] is too low"
$ sudo sysctl -w vm.max_map_count=262144

# 查看默认9200的端口信息
$ curl localhost:9200
{
"name" : "atntrTf",
"cluster_name" : "elasticsearch",
"cluster_uuid" : "tf9250XhQ6ee4h7YI11anA",
"version" : {
   "number" : "5.5.1",
   "build_hash" : "19c13d0",
   "build_date" : "2017-07-18T20:44:24.823Z",
   "build_snapshot" : false,
   "lucene_version" : "6.6.0"
},
"tagline" : "You Know, for Search"
}

''' 按下 Ctrl + C，Elastic 就会停止运行。 '''
1-3 curl 安装 - 提供一种将请求提交给Elastic的快捷方式

curl下载链接（注意系统匹配）

curl for win 的安装包

注意！记得将curl.exe 配置到系统环境变量内

1-4 设置Elastic的远程访问

默认情况下，Elastic 只允许本机访问，如果需要远程访问，可以修改 Elastic 安装目录的config/elasticsearch.yml文件，去掉network.host的注释，将它的值改成0.0.0.0，然后重新启动 Elastic。
[code]network.host: 0.0.0.0
上面代码中，设成
0.0.0.0
让任何人都可以访问。线上服务不要这样设置，要设成具体的 IP。

二、Elastic 的简单操作

注意！命令必须为双引号！！

[code]# 查看集群健康
curl -X GET "localhost:9200/_cat/indices?v"

# 查看集群的节点列表
curl -X GET "localhost:9200/_cat/nodes?v"

# 列出所有index
curl -X GET "localhost:9200/_cat/indices?v"
# health status index uuid pri rep docs.count docs.deleted store.size pri.store.size 返回响应表示未存在相关index

三、Plugins 操作（windows环境下）

官方文档Plugins操作

官方文档 - 支持插件查询（非单页）

3-1 Plugins 安装

3-1-1 方式一、通过指定插件名

[code]# 语法
elasticsearch-plugin install [plugin_name]
# 举例
elasticsearch-plugin install analysis-icu

3-1-2 方式二、通过本地url

[code]# 语法
elasticsearch-plugin install [url]
# unix下
elasticsearch-plugin install file:///path/to/plugin.zip
# win下
elasticsearch-plugin install file:///C:/path/to/plugin.zip

3-1-3 方式三、通过HTTP url

[code]elasticsearch-plugin install http://some.domain/path/to/plugin.zip

# 插件脚本将拒绝与具有不受信任证书的HTTPS URL通信。
# 要使用自签名HTTPS证书，您需要将CA证书添加到本地Java信任库，并将该位置传递给脚本，如下所示：
#（linux下）
sudo ES_JAVA_OPTS="-Djavax.net.ssl.trustStore=/path/to/trustStore.jks" bin/elasticsearch-plugin install https://host/plugin.zip

3-2 Plugins - Listing, Removing and Updating Installed

[code]# list
elasticsearch-plugin list

# rm
elasticsearch-plugin remove [pluginname]

# install
elasticsearch-plugin install [pluginname]

# update （rm + install）
elasticsearch-plugin remove [pluginname]
elasticsearch-plugin install [pluginname]

四、Index操作

4-1 Index 新建

[code]# 创建 customer 的 index
curl -X PUT "localhost:9200/customer?pretty"
# 查看所有 index
curl -X GET "localhost:9200/_cat/indices?v"

4-2 Index 删除

[code]# 删除指定的index
curl -X DELETE "localhost:9200/customer?pretty"
# 查看所有index
curl -X GET "localhost:9200/_cat/indices?v"

五、Document 操作

建议在Kibana下使用，不建议使用win的CMD操作（不是很好支持换行等操作）

[code]# 注意！该命令操作都在kibana下实现，若需要强行win下实现，必须使用双引号

# 在customer（index）下创建 id 为 1 的 document ，json格式，内容为name
curl -XPUT "http://localhost:9200/customer/_doc/1?pretty" -H 'Content-Type: application/json' -d'
{
"name": "John Doe"
}'

PUT /customer/_doc/1?pretty
{
"name": "John Doe"
}

# 查看文档内容
curl -X GET "localhost:9200/customer/_doc/1?pretty"

GET /customer/_doc/1?pretty

[code]

[code]# 修改文档内字段
curl -XPUT "http://localhost:9200/customer/_doc/1?pretty" -H 'Content-Type: application/json' -d'
{
"name": "hello"
}'

5-1 更新文档

[code]# 更新文档
POST /customer/_doc/1/_update?pretty
{
"doc": { "name": "Jane Doe" }
}

curl -X POST "localhost:9200/customer/_doc/1/_update?pretty" -H 'Content-Type: application/json' -d'
{
"doc": { "name": "Jane Doe" }
}
'
GET /customer/_doc/1?pretty

[code]POST /customer/_doc/1/_update?pretty
{
"doc": { "name": "Jane Doe", "age": 20 }
}

curl -X POST "localhost:9200/customer/_doc/1/_update?pretty" -H 'Content-Type: application/json' -d'
{
"doc": { "name": "Jane Doe", "age": 20 }
}
'

GET /customer/_doc/1?pretty

[code]# 使用简单脚本进行更新，使用script脚本将年龄更新到到25
POST /customer/_doc/1/_update?pretty
{
"script" : "ctx._source.age += 5"
}

curl -X POST "localhost:9200/customer/_doc/1/_update?pretty" -H 'Content-Type: application/json' -d'
{
"script" : "ctx._source.age += 5"
}
'
GET /customer/_doc/1?pretty

5-2 删除文档

[code]# 删除指定文档2
DELETE /customer/_doc/2?pretty

curl -X DELETE "localhost:9200/customer/_doc/2?pretty"

GET /customer/_doc/2?pretty

5-3 文档的批量处理

[code]# 批量调用指定索引的2个文档
POST /customer/_doc/_bulk?pretty
{"index":{"_id":"1"}}
{"name": "John Doe" }
{"index":{"_id":"2"}}
{"name": "Jane Doe" }

[code]# 更新第一个文档，删除第二个文档
POST /customer/_doc/_bulk?pretty
{"update":{"_id":"1"}}
{"doc": { "name": "John Doe becomes Jane Doe" } }
{"delete":{"_id":"2"}}

内容来自用户分享和网络整理，不保证内容的准确性，如有侵权内容，可联系管理员处理

标签：

相关文章推荐

新的分享

章节导航