五、ElasticSearch之Document详解与版本并发控制

{
"_index": "test_index",
"_type": "test_type",
"_id": "1",
"_version": 3,
"found": true,
"_source": {
"test_field1": "test field1",
"test_field2": "test field2"
}
}

(1)_id元数据

代表document的唯一标识,与index和type一起,可以唯一标识和定位一个document

我们可以手动指定document的id(put /index/type/id),也可以不指定,由es自动为我们创建一个id。

自动生成的id,长度为20个字符,URL安全,base64编码,GUID,分布式系统并行生成时不可能会发生冲突

(2)_source元数据

是document的完整文本,返回字段可定制

PUT /test_index/test_type/1
{
"test_field1": "test field1",
"test_field2": "test field2"
}

GET /test_index/test_type/1?_source=test_field1

(3)lazy delete

document的全量替换

语法与创建文档是一样的,es会将老的document标记为deleted,然后新增我们给定的一个document

document的强制创建

PUT /index/type/id?op_type=create,PUT /index/type/id/_create

document的删除

DELETE /index/type/id

不会理解物理删除,只会将其标记为deleted,当数据越来越多的时候,在后台自动删除

(4)_version

基于_version进行乐观锁并发控制,第一次创建一个document的时候,它的_version内部版本号就是1;以后每次对这个document执行修改或者删除操作,都会对这个_version版本号自动加1;哪怕是删除,也会对这条数据的版本号加1。删除一条document,再重新创建这条document,其实会在delete version基础之上,再把version号加1 。侧面印证了lazy delete,而不是物理删除

## 新增一个文档
PUT /test_index/test_type/7
{
  "test_field7": "test field7"
}

GET /test_index/test_type/7

{
  "_index": "test_index",
  "_type": "test_type",
  "_id": "7",
  "_version": 1,
  "found": true,
  "_source": {
    "test_field7": "test field7"
  }
}

## 客户端A修改文档成功
PUT /test_index/test_type/7?version=1 
{
  "test_field7": "test client A"
}

## 客户端B修改文档失败
PUT /test_index/test_type/7?version=1 
{
  "test_field7": "test client B"
}

## 在乐观锁成功阻止并发问题之后,尝试正确的完成更新。基于最新的数据和版本号,去进行修改。可能这个步骤会需要反复执行好几次,才能成功,特别是在多线程并发更新同一条数据很频繁的情况下
GET /test_index/test_type/7 

PUT /test_index/test_type/7?version=2
{
  "test_field7": "test client B"
}

external version

使用乐观锁并发控制的时候,若不想要用es内部的_version来进行控制,也可以自己维护的版本号来进行控制

?version=1
?version=1&version_type=external
唯一的区别在于:version只有当你提供的version与es中的version一模一样的时候,才可以进行修改,只要不一样,就报错;当version_type=external的时候,只有当你提供的version比es中的_version大的时候,才能完成修改

GET /test_index/test_type/7 获取到版本version是4

PUT /test_index/test_type/7?version=4&version_type=external
{
  "test_field7": "test client C"
}
-- 失败


PUT /test_index/test_type/7?version=5&version_type=external
{
  "test_field7": "test client C"
}
-- 成功

(5)partial update

PUT是document的全量替换,会先lazy delete,然后创建新文档。

POST则是document的部分更新,只要传入部分要修改的字段,网络开销更少、保证在同一个shard上。

并且:

(1)partial update 内置乐观锁并发控制,不用我们自己写version判断
(2)retry_on_conflict 会自动获取最新的版本号比对再更新,并发情况下失败了会重试。可设置重试次数
    POST /index/type/id/_update?retry_on_conflict=5
 (3) 当然partial update 也可以我们自己强制指定版本号修改
    POST /index/type/id/_update?retry_on_conflict=5&version=6
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,384评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,845评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,148评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,640评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,731评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,712评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,703评论 3 415
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,473评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,915评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,227评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,384评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,063评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,706评论 3 324
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,302评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,531评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,321评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,248评论 2 352

推荐阅读更多精彩内容