Elasticsearch document id 生成方式

文字内容整理自 B 站中华石杉的 Elasticsearch 顶尖高手系列课程核心知识篇

手动指定

根据应用情况来说，是否满足手动指定 document id 的前提：

一般来说，是从某些其他的系统中，导入一些数据到 es 时，会采取这种方式，就是使用系统中已有数据的唯一标识，作为 es 中 document 的 id。举个例子，比如说，我们现在在开发一个电商网站，做搜索功能，或者是 OA 系统，做员工检索功能。这个时候，数据首先会在网站系统或者 IT 系统内部的数据库中，会先有一份，此时就肯定会有一个数据库的 primary key（自增长，UUID，或者是业务编号）。如果将数据导入到 Elasticsearch 中，此时就比较适合采用数据在数据库中已有的 primary key。

如果说，我们是在做一个系统，这个系统主要的数据存储就是 Elasticsearch 一种，也就是说，数据产生出来以后，可能就没有 id，直接就放 es 一个存储，那么这个时候，可能就不太适合说手动指定 document id 的形式了，因为你也不知道 id 应该是什么，此时可以采取下面要讲解的让 Elasticsearch 自动生成 id 的方式。

# put /index/type/id
PUT /test_index/test_type/2{  "test_content": "my test"}
{  "_index" : "test_index",  "_type" : "test_type",  "_id" : "2",  "_version" : 1,  "result" : "created",  "_shards" : {    "total" : 2,    "successful" : 2,    "failed" : 0  },  "_seq_no" : 0,  "_primary_term" : 1}

自动生成

# post /index/type
PUT test_index/test_type{  "test_content": "my test automated document id"}
{  "error" : "Incorrect HTTP method for uri [/test_index/test_type?pretty=true] and method [PUT], allowed: [POST]",  "status" : 405}
POST /test_index/test_type{  "test_content": "my test"}
{  "_index" : "test_index",  "_type" : "test_type",  "_id" : "A7Ma5XYB_s8SuYmy2Xg0",  "_version" : 1,  "result" : "created",  "_shards" : {    "total" : 2,    "successful" : 2,    "failed" : 0  },  "_seq_no" : 1,  "_primary_term" : 1}

有可能两个创建 Document 的请求是完全在同一时间执行的（小概率事件），只不过在不同的 Elastic 节点上，那么，如果 _id 自动生成的算法不够好的话，有没有可能出现两个节点，给两个不同的 Document 创建了相同的 _id ?

当然是不可能的。

GUID 算法可以保证在分布式的环境下，不同节点同一时间创建的 _id 一定是不冲突的（即使是同一个节点，也不会有任何的问题）。

Elasticsearch 自动生成 _id 的机制，可以保证不会出现两个不同的 Document 的 _id 是一样的。

注意，自动生成 ID 的时候，使用的是 POST 而不是 PUT；手动生成 ID 的时候使用 PUT 或者 POST 都可以。

另外，这一节的实际操作，我是在 cloud.elastic.co 提供的虚拟机上进行的。其实在准备认证期间，我觉得可以考虑购买两个月左右的服务；也可以考虑在阿里云上购买。

自动生成的 id，长度为 20 个字符，URL 安全，base64 编码，GUID，分布式系统并行生成时不可能会发生冲突。

GUID

以下文字来自维基百科

A universally unique identifier (UUID) is a 128-bit number used to identify information in computer systems. The term globally unique identifier (GUID) is also used, typically in software created by Microsoft.

而 CODING HORROR 说

Each globally unique ID is like a beautiful snowflake: every one a unique item waiting to be born.

GUID Pros

• Unique across every table, every database, every server

• Allows easy merging of records from different databases

• Allows easy distribution of databases across multiple servers

• You can generate IDs anywhere, instead of having to roundtrip to the database

• Most replication scenarios require GUID columns anyway

GUID Cons

• It is a whopping 4 times larger than the traditional 4-byte index value; this can have serious performance and storage implications if you're not careful

• Cumbersome to debug where userid='{BAE7DF4-DDF-3RG-5TY3E3RF456AS10}'

• The generated GUIDs should be partially sequential for best performance (eg, newsequentialid() on SQL 2005) and to enable use of clustered indexes

就我个人来说，我是不太喜欢 GUID 的。