主頁 > 後端開發 > Python連接es筆記二之查詢方式匯總

Python連接es筆記二之查詢方式匯總

2023-05-30 07:44:09 後端開發

本文首發于公眾號:Hunter后端
原文鏈接:Python連接es筆記二之查詢方式匯總

上一節除了介紹使用 Python 連接 es,還有最簡單的 query() 方法,這一節介紹一下幾種其他的查詢方式,

以下是本篇筆記目錄:

  1. query() 方法介紹
  2. Q() 查詢
  3. 排序
  4. 分頁
  5. source() 指定回傳欄位
  6. extra() 操作
  7. count() 總數
  8. from_dict() 函式

1、query() 方法介紹

在上一節中介紹了 query() 的一個簡單示例,如下:

s = Search(using="default").index("exam")

s = s.query("match", name="張三豐")

query() 中接受兩個引數,第一個是欄位查詢的方式,比如這里是 match,也可以是 term,這個依照查詢的目的來替換,

第二個則是查詢的欄位與值,比如這里是查詢的 name 欄位為 "張三豐" 的資料,

如果是有多個條件,比如 name="張三豐",address="中國" 的資料,這里的 = ,并非是完全等于的意思,而是會依照前面的查詢方式,比如 match 或 term 進行類似的分詞或者模糊搜索,

如果是上面多個條件的查詢,可以直接在后面加上類似的 query():

s = s.query("match", name="張三豐").query("match", address="中國")

這兩個 query() 通過鏈式操作連在一起轉換成 es 陳述句就是使用 must 將多條件連接在一起,我們可以使用 to_dict() 方式來查看:

s.to_dict()

# {'query': {'bool': {'must': [{'match': {'name': '張三豐'}}, {'match': {'address': '中國'}}]}}}

2、Q() 查詢

如果看過之前我寫過的 Django 系列筆記,應該記得在 Django 里也有個 Q() 方法的查詢,和這里的一樣,也是用于條件的聯合,與或非條件都可以實作,

引入方式如下:

from elasticsearch_dsl import Q

但是如果是在 Django 中使用 es 的連接,也是同樣使用 Q() 方法,我們可以使用 as 來區分,這里我們對于 es 的 Q() 方法可以使用 ES_Q() 來區分:

from elasticsearch_dsl import Q as ES_Q

單個條件的使用 Q() 如下:

s = s.query(ES_Q("match", name="張三豐"))

如下使用 dict 形式的操作也是等效的:

s = s.query(ES_Q({"match": {"name": "張三豐"}}))

與操作

對于這兩個條件,如果想要實作它們的與操作:

q1 = ES_Q("match", name="張三豐")
q2 = ES_Q("match", address="中國")

可以如下實作:

s = s.query(q1 & q2)

或操作

如果是想實作上面的或操作,可以如下:

s = s.query(q1 | q2)

非操作

如果是想取反,直接在條件前加一個 ~ 即可:

q1 = ~ES_Q("match", name="張三豐")
s = s.query(q1)

multi_match

如果是搜索多欄位,可以如下操作:

q = ES_Q("multi_match", query="中國 張三豐", fields=["name", "address"])

s = s.query(q)

text.keyword 操作

對于 es 中 text 欄位,前面我們介紹過 .keyword 的查詢方式,是將 text 欄位作為一個整體進行查詢,在 ES_Q() 中,以下兩種操作是等效的:

q = ES_Q({"term": {"address.keyword": "中國湖北省"}})

q = ES_Q("term", address__keyword="中國湖北省")

filter() 操作

在 es 中的 filter 操作,在 Python 中是一個 filter() 函式,可以直接使用:

q = ES_Q("term", name="張三豐")
s = s.filter(q)

range 操作

實作大小于的操作示例如下:

q = ES_Q({"range": {"age": {"gte": 21}}})
s = s.query(q)

exclude() 操作

如果是想取反,除了使用 ~Q(),還可以直接使用 exclude() 函式,這個和 Django 里的操作也是一樣的:

q = ES_Q("term", name="張三豐")
s = s.exclude(q)

3、排序

如果是想對回傳的結果進行排序操作,直接使用 .sort() 方法,

比如想對 age 欄位排序,正序回傳資料,可如下操作:

s = s.sort("age")

如果是想倒序回傳,可以如下操作:

s = s.sort("-age")

多欄位排序直接在后面跟上就行:

s = s.sort("-age", "name")

4、分頁

Python 連接 es 進行分頁,可以直接使用 Python 里的切片操作,比如:

s = s[5:10]

5、source() 指定回傳欄位

我們可以通過 source() 方法指定回傳的欄位:

s = s.source(["name", "address"])

source() 方法還可以接受 includes 和 excludes 引數來指定回傳的欄位或者不回傳的欄位,這個和 es 的原生處理方式是一致的:

s = s.source(
    includes=["address"],
    excludes=["name"]
)

6、extra() 操作

extra() 函式接受一些查詢的額外屬性,比如 size 引數決定回傳條數,比如 from 引數可以決定從第幾條資料開始回傳,sort 引數決定排序方式,以及 _source 引數決定回傳的欄位,

比如我們想要回傳的資料從第 2 條資料開始,回傳兩條,按照 name 欄位進行排序,只回傳 name 和 _id 欄位,可以如下操作:

s = Search(using="default").index("exam")
s = s.extra(
    sort="name",
    _source=["name"],
    **{
        "from": 1,
        "size": 2
    }
)
response = s.execute()

7、count() 總數

前面介紹過獲取符合條件的總數,可以通過 response.hits.total.value 的方式獲得,其實對于 Search(),可以直接使用 count() 函式:

count = s.count()

8、from_dict() 函式

如果我們想直接運行 kibana 里執行的命令,可以使用 from_dict() 函式,比如:

s = s.from_dict(
  {
    "query": {
      "term": {
        "name": {
          "value": "張三豐"
        }
      }
    }
  }
)

如果想獲取更多后端相關文章,可掃碼關注閱讀:
image

轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/553744.html

標籤:其他

上一篇:【python基礎】基本資料型別-數字型別

下一篇:返回列表

標籤雲
其他(159936) Python(38185) JavaScript(25462) Java(18151) C(15233) 區塊鏈(8268) C#(7972) AI(7469) 爪哇(7425) MySQL(7215) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5873) 数组(5741) R(5409) Linux(5344) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4578) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2434) ASP.NET(2403) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) .NET技术(1977) 功能(1967) Web開發(1951) HtmlCss(1949) C++(1926) python-3.x(1918) 弹簧靴(1913) xml(1889) PostgreSQL(1878) .NETCore(1862) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 【C++】Microsoft C++、C 和匯編程式檔案

    ......

    uj5u.com 2020-09-10 00:57:23 more
  • 例外宣告

    相比于斷言適用于排除邏輯上不可能存在的狀態,例外通常是用于邏輯上可能發生的錯誤。 例外宣告 Item 1:當函式不可能拋出例外或不能接受拋出例外時,使用noexcept 理由 如果不打算拋出例外的話,程式就會認為無法處理這種錯誤,并且應當盡早終止,如此可以有效地阻止例外的傳播與擴散。 示例 //不可 ......

    uj5u.com 2020-09-10 00:57:27 more
  • Codeforces 1400E Clear the Multiset(貪心 + 分治)

    鏈接:https://codeforces.com/problemset/problem/1400/E 來源:Codeforces 思路:給你一個陣列,現在你可以進行兩種操作,操作1:將一段沒有 0 的區間進行減一的操作,操作2:將 i 位置上的元素歸零。最終問:將這個陣列的全部元素歸零后操作的最少 ......

    uj5u.com 2020-09-10 00:57:30 more
  • UVA11610 【Reverse Prime】

    本人看到此題沒有翻譯,就附帶了一個自己的翻譯版本 思考 這一題,它的第一個要求是找出所有 $7$ 位反向質數及其質因數的個數。 我們應該需要質數篩篩選1~$10^{7}$的所有數,這里就不慢慢介紹了。但是,重讀題,我們突然發現反向質數都是 $7$ 位,而將它反過來后的數字卻是 $6$ 位數,這就說明 ......

    uj5u.com 2020-09-10 00:57:36 more
  • 統計區間素數數量

    1 #pragma GCC optimize(2) 2 #include <bits/stdc++.h> 3 using namespace std; 4 bool isprime[1000000010]; 5 vector<int> prime; 6 inline int getlist(int ......

    uj5u.com 2020-09-10 00:57:47 more
  • C/C++編程筆記:C++中的 const 變數詳解,教你正確認識const用法

    1、C中的const 1、區域const變數存放在堆疊區中,會分配記憶體(也就是說可以通過地址間接修改變數的值)。測驗代碼如下: 運行結果: 2、全域const變數存放在只讀資料段(不能通過地址修改,會發生寫入錯誤), 默認為外部聯編,可以給其他源檔案使用(需要用extern關鍵字修飾) 運行結果: ......

    uj5u.com 2020-09-10 00:58:04 more
  • 【C++犯錯記錄】VS2019 MFC添加資源不懂如何修改資源宏ID

    1. 首先在資源視圖中,添加資源 2. 點擊新添加的資源,復制自動生成的ID 3. 在解決方案資源管理器中找到Resource.h檔案,編輯,使用整個專案搜索和替換的方式快速替換 宏宣告 4. Ctrl+Shift+F 全域搜索,點擊查找全部,然后逐個替換 5. 為什么使用搜索替換而不使用屬性視窗直 ......

    uj5u.com 2020-09-10 00:59:11 more
  • 【C++犯錯記錄】VS2019 MFC不懂的批量添加資源

    1. 打開資源頭檔案Resource.h,在其中預先定義好宏 ID(不清楚其實ID值應該設定多少,可以先新建一個相同的資源項,再在這個資源的ID值的基礎上遞增即可) 2. 在資源視圖中選中專案資源,按F7編輯資源檔案,按 ID 型別 相對路徑的形式添加 資源。(別忘了先把檔案拷貝到專案中的res檔案 ......

    uj5u.com 2020-09-10 01:00:19 more
  • C/C++編程筆記:關于C++的參考型別,專供新手入門使用

    今天要講的是C++中我最喜歡的一個用法——參考,也叫別名。 參考就是給一個變數名取一個變數名,方便我們間接地使用這個變數。我們可以給一個變數創建N個參考,這N + 1個變數共享了同一塊記憶體區域。(參考型別的變數會占用記憶體空間,占用的記憶體空間的大小和指標型別的大小是相同的。雖然參考是一個物件的別名,但 ......

    uj5u.com 2020-09-10 01:00:22 more
  • 【C/C++編程筆記】從頭開始學習C ++:初學者完整指南

    眾所周知,C ++的學習曲線陡峭,但是花時間學習這種語言將為您的職業帶來奇跡,并使您與其他開發人員區分開。您會更輕松地學習新語言,形成真正的解決問題的技能,并在編程的基礎上打下堅實的基礎。 C ++將幫助您養成良好的編程習慣(即清晰一致的編碼風格,在撰寫代碼時注釋代碼,并限制類內部的可見性),并且由 ......

    uj5u.com 2020-09-10 01:00:41 more
最新发布
  • Python連接es筆記二之查詢方式匯總

    > 本文首發于公眾號:Hunter后端 > 原文鏈接:[Python連接es筆記二之查詢方式匯總](https://mp.weixin.qq.com/s/0Yn5c-U9pBWrSC5HrCgWog) 上一節除了介紹使用 Python 連接 es,還有最簡單的 query() 方法,這一節介紹一下幾 ......

    uj5u.com 2023-05-30 07:44:09 more
  • 【python基礎】基本資料型別-數字型別

    Python3 支持int(整型資料)、float(浮點型資料)、bool(布爾型別) # 1.int(整型資料) 在Python 3里,**只有一種整數型別 int,表示為長整型**。像大多數語言一樣,數值型別的賦值和計算都是很直觀的。 ## 1.1數值運算 撰寫程式如下所示 ![image](h ......

    uj5u.com 2023-05-30 07:43:56 more
  • Redis+分布式+秒殺

    ## 聊一下MySQL 關于mysql關系型資料庫的一些分析: 1、從性能上:如果我們碰到需要執行耗時特別久,并且執行結果不是很頻繁變動的SQL陳述句,我們就沒有必要每次都去查詢資料庫,因為每次操作資料庫都很耗時。 2、從并發上:在大并發的情況下(比如618秒殺活動,你敢讓千萬級的請求直接打到資料庫上 ......

    uj5u.com 2023-05-30 07:43:44 more
  • < Python全景系列-8 > Python超薄感知,超強保護:例外處理的絕佳實

    歡迎來到系列第八篇,例外處理的深入探討。本文將分五部分展開。首先,我們將學習Python例外處理的基礎知識,理解`try/except`陳述句的用法。然后,我們將了解Python的常見例外型別并通過實體理解它們的作用。第三部分,我們將更深入地決議`try-except`塊,理解其作業原理及更加復雜的用... ......

    uj5u.com 2023-05-30 07:43:38 more
  • Pandas 加載資料的方法和技巧

    哈嘍大家好,我是咸魚 相信小伙伴們在學習 python 資料分析的程序中或多或少都會聽說或者使用過 pandas pandas 是 python 的一個拓展庫,常用于資料分析 今天咸魚將介紹幾個關于 pandas 匯入資料的方法和技巧 ## 從 URL 獲取 csv 資料 關于 pandas 匯入 ......

    uj5u.com 2023-05-30 07:43:31 more
  • Angular Highcharts教程_編程入門自學教程_菜鳥教程-免費教程分

    ## 教程簡介 Angular Highcharts是一個基于Angular的開源組件,可在Angular應用程式中提供優雅且功能豐富的高圖表可視化,并可與Angular組件無縫配合使用。 [Angular Highcharts入門教程](https://www.itbaoku.cn/tutoria ......

    uj5u.com 2023-05-30 07:43:26 more
  • 面試官:MySQL 自增主鍵一定是連續的嗎?大部分人都會答錯!

    ## 測驗環境: > MySQL版本:8.0 資料庫表:T (主鍵id,唯一索引c,普通欄位d) ![](http://img.javastack.cn/1685072039483867.png) 如果你的業務設計依賴于自增主鍵的連續性,這個設計假設自增主鍵是連續的。但實際上,這樣的假設是錯的,因為 ......

    uj5u.com 2023-05-30 07:43:14 more
  • VST實體(5)節點(NODE) 二、節點的遍歷

    二、節點的遍歷 每一個節點都有一個index值,用于描述其在相同level,相同父節點下的序號,但是,遍歷時并不能利用這個值,因為這個值是變化的,當進行排序,插入節點、洗掉節點等等操作時,這個index會發生改變。 同樣的,vst.AbsoluteIndex(node)回傳的是某一節點在VST中的絕 ......

    uj5u.com 2023-05-30 07:43:05 more
  • c語言,函式的址傳遞例子

    編碼如下:#include <stdio.h> void swap(int* x,int* y ){ int tmp; tmp=*x; *x=*y; *y=tmp ; }; int main(){ int a=4; int b=5; printf("befer\n"); printf("a=%d\n ......

    uj5u.com 2023-05-30 07:43:01 more
  • Python日期帶時區轉換工具類總結

    @[TOC] # 1.背景 最近專案是國際專案,所以需要經常需要用到UTC時間和local時間的轉換。 所以整理了一下時間戳工具類,方便使用。 這里主要用到的包就是datatime、time、pytz。 # 2. 遇到的坑 直接看測驗案例 ```python tzinfo=pytz.timezone ......

    uj5u.com 2023-05-30 07:42:57 more