Elasticsearch——分散式文件系統之document

Dictator丶發表於2019-02-15

1. document 核心後設資料

1.1 _index後設資料

  • 代表一個document存放在哪個index中
  • 類似的資料放在一個索引,非類似的資料放不同索引:product index(包含了所有的商品),sales index(包含了所有的商品銷售資料),inventory index(包含了所有庫存相關的資料)。比如product,sales,human resource(employee),全都放在一個大的index裡面,比如說company index,不合適的
  • ndex中包含了很多類似的document:類似是什麼意思,其實指的就是說,這些document的fields很大一部分是相同的,你說你放了3個document,每個document的fields都完全不一樣,這就不是類似了,就不太適合放到一個index裡面去了
  • 索引名稱必須是小寫的,不能用下劃線開頭,不能包含逗號

1.2 _type後設資料

  • 代表document屬於index中的哪個類別(type)
  • 一個索引通常會劃分為多個type,邏輯上對index中有些許不同的幾類資料進行分類:因為一批相同的資料,可能有很多相同的fields,但是還是可能會有一些輕微的不同,可能會有少數fields是不一樣的,舉個例子,就比如說,商品,可能劃分為電子商品,生鮮商品,日化商品,等等。
  • type名稱可以是大寫或者小寫,但是同時不能用下劃線開頭,不能包含逗號

1.3 _id後設資料

  • 代表document的唯一標識,與index和type一起,可以唯一標識和定位一個document

  • 我們可以手動指定document的id(put /index/type/id),也可以不指定,由es自動為我們建立一個id

    • 手動指定document id

      一般來說,是從某些其他的系統中,匯入一些資料到es時,會採取這種方式,就是使用系統中已有資料的唯一標識,作為es中document的id。舉個例子,比如說,我們現在在開發一個電商網站,做搜尋功能,或者是OA系統,做員工檢索功能。這個時候,資料首先會在網站系統或者IT系統內部的資料庫中,會先有一份,此時就肯定會有一個資料庫的primary key(自增長,UUID,或者是業務編號)。如果將資料匯入到es中,此時就比較適合採用資料在資料庫中已有的primary key。

    • 自動生成id

      資料產生出來以後,可能就沒有id,直接就放es一個儲存,那麼這個時候,可能就不太適合說手動指定document id的形式了

      自動生成的id,長度為20個字元,URL安全,base64編碼,GUID,分散式系統並行生成時不可能會發生衝突

  • 程式碼示例

    • 手動指定唯一標識

      PUT /test_index/test_type/1
      {
        "test_field": "create id by myself"
      }
      複製程式碼
    • 自動生成id

      POST /test_index/test_type
      {
        "test_field": "create id by es"
      }
      複製程式碼

Elasticsearch——分散式文件系統之document

1.5 _source後設資料並定製返回結果

_source後設資料:就是說,我們在建立一個document的時候,使用的那個放在request body中的json串,預設情況下,在get的時候,會原封不動的給我們返回回來。

PUT /test_index/test_type/2
{
  "name": "Tom",
  "age": 12,
  "gender": "M" 
}
複製程式碼

執行GET請求,返回資料:

GET test_index/test_type/2

{
  "_index": "test_index",
  "_type": "test_type",
  "_id": "2",
  "_version": 1,
  "found": true,
  "_source": {
    "name": "Tom",
    "age": 12,
    "gender": "M"
  }
}
複製程式碼

定製返回結果

  • 定製返回的結果,指定_source中,返回哪些field

    GET /test_index/test_type/2?_source=name,age
    {
      "_index": "test_index",
      "_type": "test_type",
      "_id": "2",
      "_version": 1,
      "found": true,
      "_source": {
        "name": "Tom",
        "age": 12
      }
    }
    複製程式碼

2. document的全量替換、強制建立和刪除

2.1 全量替換

  • 語法與建立文件是一樣的,如果document id不存在,那麼就是建立;如果document id已經存在,那麼就是全量替換操作,替換document的json串內容
  • document是不可變的,如果要修改document的內容,第一種方式就是全量替換,直接對document重新建立索引,替換裡面所有的內容

2.2 強制建立

  • 如果需要新建文件,不想替換文件,就需要強制進行建立文件。

  • 語法:

    PUT /index/type/id?op_type=create
    PUT /index/type/id/_create
    複製程式碼

    兩種都可以,但是如果 document id 已經存在,則會報錯

2.3 刪除

  • 語法

    DELETE /index/type/id
    複製程式碼
  • 不會立即物理刪除,只會將其標記為deleted,當資料越來越多的時候,es會在適當的時機在後臺自動刪除標記為deleted的document

相關文章