ElasticSearch初体验

一、基本概念

基本介绍

全文检索属于最常见的需求,开源的ElasticSearch是目前全文搜索引擎的首选。
它可以快速地存储、搜索和分析海量数据。
底层是开源库Lucene。但是,你没法直接用Lucene,必须自己写代码去调用它的接口。ElasticSearch是Lucene的封装,提供了REST API的操作接口,开箱即用。

1. Index(索引)

动词:相当于MySQL的insert;
名词:相当于MySQL的Database。
类似于数据库的库。

2. Type(类型)

在Index(索引)中,可以定义一个或多个类型。
类似于MySQL中的Table;每一种类型的数据放在一起;

3. Document(文档)

保存在某个索引(Index)下,某种类型(Type)的一个数据(Document),文档是JSON格式,Document就像是MySQL中的某个Table里面的内容。

image.png

二、简单举例

image.png
  1. 分词
  2. 评分

三、安装

1、下载镜像文件

--存储和检索数据
docker pull elasticsearch:7.4.2
--可视化检索数据
docker pull kibana:7.4.2  

2、 ElasticSearch安装

-- 新建配置和数据文件夹,供docker挂载
mkdir -p /mydata/elasticsearch/config
mkdir -p /mydata/elasticsearch/data
-- 设置配置文件,并写入:外部所有均可访问
echo "http.host:0.0.0.0">>/mydata/elasticsearch/config/elasticsearch.yml

启动

docker run --name elasticsearch -p 9200:9200 -p 9300:9300 \
-e "discovery.type=single-node" \
-e ES_JAVA_OPTS="-Xms64m -Xmx128m" \
-v /mydata/elasticsearch/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
-v /mydata/elasticsearch/data:/usr/share/elasticsearch/data \
-v /mydata/elasticsearch/plugins:/usr/share/elasticsearch/plugins \
-d elasticsearch:7.4.2
  1. --name 别名,给容器起个别名。
  2. -p 9200,外部访问端口。-p9300,集群间通讯端口。
  3. -e "discovery.type=single-node",指定单节点运行。
  4. ES_JAVA_OPTS,指定初始64,最大128。否则可能会将内存全部沾满。
  5. -v,将douker的elasticsearch目录或文件挂载到外部虚拟机中,方便修改。
  6. -d ,指定镜像。

报错1

image.png

解决:配置文件是字符串,而非对象。检查上述的配置文件,冒号后需要有空格。

    http.host: 0.0.0.0

报错2

image.png

原因:docker内的用户无权限写挂载下的目录或文件。
解决:将被挂载的目录全部修改权限为777。-R递归,目录下所有目录及其文件。

chmod -R 777 /mydata/elasticsearch/

3、Kibana安装

docker run --name kibana \
-e ELASTICSEARCH_HOSTS=http://192.168.56.10:9200 \
-p 5601:5601 \
-d kibana:7.4.2

注意:http://192.168.56.10:9200 一定改为自己的虚拟机地址

启动后验证
http://192.168.56.10:5601/

正常显示页面即可

四、初体验

1、_cat

  • GET/_cat/nodes 查看所有节点
  • GET/_cat/health 查看健康状况
  • GET/_cat/master 查看主节点
  • GET/_cat/indices 查看所有索引,类似于数据库的show databases;

2、PUT 请求

保存一个数据,保存在哪个索引的哪个类型下,指定用哪个唯一标识。
类似于在哪个数据库的哪张表,保存一条唯一数据。
PUT customer/external/1:
在cuetomer索引下的external类型下保存1号数据为:JSON数据

  1. 必须带唯一标识,否则报405错误。
  2. 标识唯一则新增,否则更新。
PUT http://192.168.56.10:9200/customer/external/2
{
    "_index": "customer",   //元数据:索引
    "_type": "external",       //元数据:类型
    "_id": "1",                   //元数据:唯一标识
    "_version": 3,            //新增为1,不断更新则累加
    "result": "updated",    //新增为created,更新为updated
    "_shards": {
        "total": 2,
        "successful": 1,
        "failed": 0
    },
    "_seq_no": 2,
    "_primary_term": 1
}

3、POST请求

POST http://192.168.56.10:9200/customer/external/ywOEjXgBvHJomOGQf_Dv
  1. 可以不带唯一标识,系统自动生成并返回。
  2. 使用系统返回的唯一标识进行POST,则也是更新操作。
  3. 也可带标识,若标识存在则为更新,不存在为新增。
  4. 返回保存同PUT,此处不做展示。

4、 GET请求

根据索引、类型、唯一标识获取数据

GET http://192.168.56.10:9200/customer/external/ywOEjXgBvHJomOGQf_Dv
{
    "_index": "customer",          //在哪个索引
    "_type": "external",             //在哪个类型
    "_id": "ywOEjXgBvHJomOGQf_Dv",   //记录ID
    "_version": 2,                 //版本号
    "_seq_no": 6,                //并发控制字段,每次更新都会+1,用来做乐观锁
    "_primary_term": 1,       //同上,主分片重新分配,如重启,就会变化
    "found": true,
    "_source": {                  //真正的内容
        "name": "fangk"
    }
}

防止并发,更新携带

?if_seq_n=0&if_primary_term=1

5、特殊更新_update

作用:更新时对比json内容,若一致则不更新。
请求url尾部增加_update,内容体需要增加 "doc":{原JSON数据},否则报错

POST http://192.168.56.10:9200/customer/external/1/_update
http://192.168.56.10:9200/customer/external/1/_update
{
    "doc":{
 "name":"fangk"}
}

响应内容

    "_version": 3,         //版本号不会新增
    "result": "noop",     //返回noop啥都没更新
    "_seq_no": 2,         //乐观锁相应字段也不会增加
    "_primary_term": 1

6、DELETE

删除某个数据
DELETE http://192.168.56.10:9200/customer/external/1
删除整个索引
DELETE http://192.168.56.10:9200/customer
无法删除某个类型

7、bulk批量API

PostMan无法进行此api调用,需使用kibana可视化界面。

image.png
解释
POST /customer/external/_bulk
{"index":{"_id":"1"}}
{"name":"fangkkk"}
{"index":{"_id":"2"}}
{"name":"fangkkkk"}
  1. 两行为一个操作,第一行为命令及文档标识,第二行为内容。
  2. 命令可以为增删改查。
  3. 响应报文中,took为用时多少毫秒,errors为是否有错误,false为没有。
  4. 响应报文中多个操作互不影响,一个item为一个两行操作的结果。
复杂操作集合
POST /_bulk
{"delete":{"_index":"website","_type":"blog","_id":"123"}}
{"create":{"_index":"website","_type":"blog","_id":"123"}}
{"title":"fangkkk"}
{"insex":{"_index":"website","_type":"blog"}}
{"title":"fangk"}
{"update":{"_index":"website","_type":"blog","_id":"123"}}
{"doc":{"title":"fangkkkkkk"}}
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,012评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,628评论 3 389
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 160,653评论 0 350
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,485评论 1 288
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,574评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,590评论 1 293
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,596评论 3 414
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,340评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,794评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,102评论 2 330
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,276评论 1 344
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,940评论 5 339
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,583评论 3 322
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,201评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,441评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,173评论 2 366
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,136评论 2 352

推荐阅读更多精彩内容

  • 需要明白的问题 什么是倒排索引?它的组成是什么? 常见的相关性算分方法有哪些? 为什么查询语句没有返回预期的文档?...
    小旋锋的简书阅读 425评论 0 0
  • 笔者所有文章第一时间发布于:hhbbz的个人博客 简介 Elasticsearch 是一款稳定高效的分布式搜索和分...
    虾餃阅读 286评论 0 0
  • 背景 在开发一个新的需求的过程中,涉及到有些查询量大,频次高,搜索条件复杂,所以会将数据存到elasticsear...
    输入昵称就行阅读 574评论 0 0
  • Elastic 安装与简介 Elastic Search 为了搜索,但不止是全文搜索引擎。 为什么不止,在 Ela...
    与子笑阅读 526评论 0 0
  • 今天感恩节哎,感谢一直在我身边的亲朋好友。感恩相遇!感恩不离不弃。 中午开了第一次的党会,身份的转变要...
    迷月闪星情阅读 10,561评论 0 11