主頁 > 後端開發 > Python工具箱系列(三十四)

Python工具箱系列(三十四)

2023-05-30 07:42:45 後端開發

SQLAlchemy是著名的ORM(Object Relational Mapping-物件關系映射)框架,其主要作用是在編程中,把面向物件的概念跟資料庫中表的概念對應起來,對許多語言(例如JAVA/PYTHON)來說就是定義一個物件,并且這個物件對應著一張資料庫的表,而這個物件的實體,就對應著表中的一條記錄,

其整體思路如下圖所示:

其中類、物件與屬性與資料庫相關內容的對應關系如下圖所示:

ORM的優點:

 

  • 資料模型與代碼統一定義,更新與維護簡單,代碼高度重用一致,

  • ORM有現成的工具,很多功能都可以自動完成,比如表格增刪、預處理、事務等,

  • 基于ORM的業務代碼比較簡單,代碼量少,語意性好,容易理解,

  • 你不必撰寫性能不佳的SQL,

ORM的缺點:

 

  • ORM庫多層封裝,實作巧妙,需要花很多精力學習和設定,

  • 對于復雜的查詢,ORM要么是無法表達,要么是性能不如原生的SQL,

  • ORM抽象掉了資料庫層,開發者無法了解底層的資料庫操作,也無法定制一些特殊的SQL,

 

 

 從整體上看,ORM節省了開發時間,減少了代碼錯誤的可能性,同時能夠方便地在多個資料庫間靈活遷移,還是非常值得使用,而在python語言中,SQLAlchemy是著名的ORM框架之一,它的整體架構如下圖所示:

從圖中可以看出,SQLAIchemy是分層架構,由Core以及ORM兩部分組成,其中,Core完成了與資料庫操作的各類封閉,是相對低層的,而ORM層則利用Core層的能力進行更宏觀的操作,因此,在一段python代碼中,使用Core與ORM層同時來操作資料庫也是可行的,并不矛盾與沖突,

下面先從最基本的表格創建做起,非ORM編程中,表格的創建無非兩個途徑:

●基于DBMS本身提供的CLI/GUI界面,發出DDL陳述句進行資料庫/表格本身的增刪改查,

●使用語言連接資料庫后,發出命令來對資料庫/表格進行增刪改查,

而由于每種資料庫都有自己的方言,所以命令陳述句各有差異,需要不斷地調整,而使用SQLAlchemy則實作了代碼統一,例如以下代碼在mssql以及mysql上創建表格,并且可以查詢表格的元資料,以及插入資料后的查詢,

from sqlalchemy import (Column, Integer, MetaData, String, Table,
                        create_engine, text, Float, DateTime, ForeignKey)
from sqlalchemy_utils.functions import create_database, database_exists

configure_pg = {"user": "postgres",
                'password': '88488848',
                'dns': 'dbserver.home',
                "port": 5432,
                'prefix': 'postgresql+psycopg2',
                'postfix': ''
                }

configure_mssql = {"user": "sa",
                   'password': '88488848',
                   'dns': 'dbserver.home',
                   "port": 1433,
                   'prefix': 'mssql+pymssql',
                   'postfix': '?charset=utf8'
                   }

configure_mysql = {"user": "root",
                   'password': '88488848',
                   'dns': 'dbserver.home',
                   "port": 3306,
                   'prefix': 'mysql+mysqlconnector',
                   'postfix': ''
                   }

config = {'mssql': configure_mssql,
          'mysql': configure_mysql, 'postgresql': configure_pg}

database_name = 'testdb'
table_sensor_location = "sensor_location"
table_sensor_data = "sensor_data"


def linkdb(targetstr):
    """
    連接不同的資料庫

    Args:
        targetstr (string): 資料庫名稱

    Returns:
        engine: 用于后續的資料庫連接
    """
    if targetstr in config.keys():
        item = config[targetstr]
        connectstring = f"{item['prefix']}://{item['user']}:{item['password']}@{item['dns']}:{item['port']}/{database_name}{item['postfix']}"
        engine = create_engine(connectstring, echo=True, future=True)

    # 如果資料庫不存在,則創建之
    if not database_exists(engine.url):
        create_database(engine.url)

    # 做一個測驗,不針對任何表
    with engine.connect() as conn:
        result = conn.execute(text("select 'hello world'"))
        print(result.all())
    return engine


def createtbs(connector):
    """"
    創建資料庫中的2張表,用于保存傳感器資料與傳感器本身的資訊
    """
    metadata_obj = MetaData()

    # 描述傳感器的表
    sensor_location_tb = Table(
        table_sensor_location,
        metadata_obj,
        Column('id', Integer, primary_key=True, autoincrement=False),
        Column('location', String(30), nullable=False)
    )

    # 保存傳感器資料的表
    sensor_data_tb = Table(
        table_sensor_data,
        metadata_obj,
        Column('id', Integer, primary_key=True, autoincrement=False),
        Column('sensor_id', ForeignKey(
            f'{table_sensor_location}.id'), nullable=False),
        Column('area', String(30)),
        Column('pm25', Float),
        Column('timestamp', DateTime)
    )
    print(sensor_data_tb.compile())

    # 創建并回傳表
    metadata_obj.create_all(connector)
    return sensor_data_tb, sensor_location_tb


def tableinfo(connector, tablename):
    """
    獲得指定表名的相關元資料資訊

    Args:
        connector (engine): 資料庫連接器
        tablename (string): 要查詢的表名
    """
    metadata_obj = MetaData()
    some_table = Table(tablename, metadata_obj, autoload_with=connector)
    print([c.name for c in some_table.columns])


def gensonsorinfo(connector):
    with connector.connect() as conn:
        conn.execute(text(f"INSERT INTO {table_sensor_location} (id, location) VALUES (:x, :y)"),
                     [{"x": 1, "y": '1號樓'}, {"x": 2, "y": '2號樓'}])

        conn.commit()

        result = conn.execute(
            text(f"SELECT id, location FROM {table_sensor_location}"))
        for x, y in result:
            print(f"id: {x}  location: {y}")


# 依次連接多個資料庫,從而驗證代碼的一致性
for dbname in config.keys():
    con = linkdb(dbname)
    createtbs(con)
    tableinfo(con, table_sensor_data)
    tableinfo(con, table_sensor_location)
    gensonsorinfo(con)

從代碼可以看出,可以用統一的訪問方式來操作mssql/mysql/postgresql三種資料庫,而且,以上方式與前文中的基于游標的寫法類似,

 

轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/553733.html

標籤:其他

上一篇:Python壓縮JS檔案,重點是 slimit

下一篇:返回列表

標籤雲
其他(159925) Python(38185) JavaScript(25462) Java(18151) C(15233) 區塊鏈(8268) C#(7972) AI(7469) 爪哇(7425) MySQL(7215) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5873) 数组(5741) R(5409) Linux(5344) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4578) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2434) ASP.NET(2403) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) .NET技术(1977) 功能(1967) Web開發(1951) HtmlCss(1949) C++(1926) python-3.x(1918) 弹簧靴(1913) xml(1889) PostgreSQL(1878) .NETCore(1862) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 【C++】Microsoft C++、C 和匯編程式檔案

    ......

    uj5u.com 2020-09-10 00:57:23 more
  • 例外宣告

    相比于斷言適用于排除邏輯上不可能存在的狀態,例外通常是用于邏輯上可能發生的錯誤。 例外宣告 Item 1:當函式不可能拋出例外或不能接受拋出例外時,使用noexcept 理由 如果不打算拋出例外的話,程式就會認為無法處理這種錯誤,并且應當盡早終止,如此可以有效地阻止例外的傳播與擴散。 示例 //不可 ......

    uj5u.com 2020-09-10 00:57:27 more
  • Codeforces 1400E Clear the Multiset(貪心 + 分治)

    鏈接:https://codeforces.com/problemset/problem/1400/E 來源:Codeforces 思路:給你一個陣列,現在你可以進行兩種操作,操作1:將一段沒有 0 的區間進行減一的操作,操作2:將 i 位置上的元素歸零。最終問:將這個陣列的全部元素歸零后操作的最少 ......

    uj5u.com 2020-09-10 00:57:30 more
  • UVA11610 【Reverse Prime】

    本人看到此題沒有翻譯,就附帶了一個自己的翻譯版本 思考 這一題,它的第一個要求是找出所有 $7$ 位反向質數及其質因數的個數。 我們應該需要質數篩篩選1~$10^{7}$的所有數,這里就不慢慢介紹了。但是,重讀題,我們突然發現反向質數都是 $7$ 位,而將它反過來后的數字卻是 $6$ 位數,這就說明 ......

    uj5u.com 2020-09-10 00:57:36 more
  • 統計區間素數數量

    1 #pragma GCC optimize(2) 2 #include <bits/stdc++.h> 3 using namespace std; 4 bool isprime[1000000010]; 5 vector<int> prime; 6 inline int getlist(int ......

    uj5u.com 2020-09-10 00:57:47 more
  • C/C++編程筆記:C++中的 const 變數詳解,教你正確認識const用法

    1、C中的const 1、區域const變數存放在堆疊區中,會分配記憶體(也就是說可以通過地址間接修改變數的值)。測驗代碼如下: 運行結果: 2、全域const變數存放在只讀資料段(不能通過地址修改,會發生寫入錯誤), 默認為外部聯編,可以給其他源檔案使用(需要用extern關鍵字修飾) 運行結果: ......

    uj5u.com 2020-09-10 00:58:04 more
  • 【C++犯錯記錄】VS2019 MFC添加資源不懂如何修改資源宏ID

    1. 首先在資源視圖中,添加資源 2. 點擊新添加的資源,復制自動生成的ID 3. 在解決方案資源管理器中找到Resource.h檔案,編輯,使用整個專案搜索和替換的方式快速替換 宏宣告 4. Ctrl+Shift+F 全域搜索,點擊查找全部,然后逐個替換 5. 為什么使用搜索替換而不使用屬性視窗直 ......

    uj5u.com 2020-09-10 00:59:11 more
  • 【C++犯錯記錄】VS2019 MFC不懂的批量添加資源

    1. 打開資源頭檔案Resource.h,在其中預先定義好宏 ID(不清楚其實ID值應該設定多少,可以先新建一個相同的資源項,再在這個資源的ID值的基礎上遞增即可) 2. 在資源視圖中選中專案資源,按F7編輯資源檔案,按 ID 型別 相對路徑的形式添加 資源。(別忘了先把檔案拷貝到專案中的res檔案 ......

    uj5u.com 2020-09-10 01:00:19 more
  • C/C++編程筆記:關于C++的參考型別,專供新手入門使用

    今天要講的是C++中我最喜歡的一個用法——參考,也叫別名。 參考就是給一個變數名取一個變數名,方便我們間接地使用這個變數。我們可以給一個變數創建N個參考,這N + 1個變數共享了同一塊記憶體區域。(參考型別的變數會占用記憶體空間,占用的記憶體空間的大小和指標型別的大小是相同的。雖然參考是一個物件的別名,但 ......

    uj5u.com 2020-09-10 01:00:22 more
  • 【C/C++編程筆記】從頭開始學習C ++:初學者完整指南

    眾所周知,C ++的學習曲線陡峭,但是花時間學習這種語言將為您的職業帶來奇跡,并使您與其他開發人員區分開。您會更輕松地學習新語言,形成真正的解決問題的技能,并在編程的基礎上打下堅實的基礎。 C ++將幫助您養成良好的編程習慣(即清晰一致的編碼風格,在撰寫代碼時注釋代碼,并限制類內部的可見性),并且由 ......

    uj5u.com 2020-09-10 01:00:41 more
最新发布
  • Python工具箱系列(三十四)

    SQLAlchemy是著名的ORM(Object Relational Mapping-物件關系映射)框架。其主要作用是在編程中,把面向物件的概念跟資料庫中表的概念對應起來。對許多語言(例如JAVA/PYTHON)來說就是定義一個物件,并且這個物件對應著一張資料庫的表。而這個物件的實體,就對應著表中... ......

    uj5u.com 2023-05-30 07:42:45 more
  • Python壓縮JS檔案,重點是 slimit

    摘要:Python Web程式員必看系列,學習如何壓縮 JS 代碼。 本文分享自華為云社區《Python壓縮JS檔案,PythonWeb程式員必看系列,重點是 slimit》,作者: 夢想橡皮擦 。 本篇博客將學習壓縮 JS 代碼,首先要學習的模塊是 jsmin。 jsmin 庫 Python 中的 ......

    uj5u.com 2023-05-30 07:42:36 more
  • 【重學C++】05 | 說透右值參考、移動語意、完美轉發(下)

    ## 文章首發 [【重學C++】05 | 說透右值參考、移動語意、完美轉發(下)](https://mp.weixin.qq.com/s/w7yXp6efE7_V0EHxXWJiJA) ## 引言 大家好,我是只講技術干貨的會玩code,今天是【重學C++】的第五講,在第四講《[【重學C++】04 ......

    uj5u.com 2023-05-30 07:42:31 more
  • JavaWeb編程面試題——MyBatis

    面試題==知識點,這里所記錄的面試題并不針對于面試者,而是將這些面試題作為技能知識點來看待。不以刷題進大廠為目的,而是以學習為目的。這里的知識點會持續更新,目錄也會隨時進行調整。 ......

    uj5u.com 2023-05-30 07:42:26 more
  • Python連接es筆記二之查詢方式匯總

    > 本文首發于公眾號:Hunter后端 > 原文鏈接:[Python連接es筆記二之查詢方式匯總](https://mp.weixin.qq.com/s/0Yn5c-U9pBWrSC5HrCgWog) 上一節除了介紹使用 Python 連接 es,還有最簡單的 query() 方法,這一節介紹一下幾 ......

    uj5u.com 2023-05-30 07:41:47 more
  • 【python基礎】基本資料型別-數字型別

    Python3 支持int(整型資料)、float(浮點型資料)、bool(布爾型別) # 1.int(整型資料) 在Python 3里,**只有一種整數型別 int,表示為長整型**。像大多數語言一樣,數值型別的賦值和計算都是很直觀的。 ## 1.1數值運算 撰寫程式如下所示 ![image](h ......

    uj5u.com 2023-05-30 07:41:35 more
  • < Python全景系列-8 > Python超薄感知,超強保護:例外處理的絕佳實

    歡迎來到系列第八篇,例外處理的深入探討。本文將分五部分展開。首先,我們將學習Python例外處理的基礎知識,理解`try/except`陳述句的用法。然后,我們將了解Python的常見例外型別并通過實體理解它們的作用。第三部分,我們將更深入地決議`try-except`塊,理解其作業原理及更加復雜的用... ......

    uj5u.com 2023-05-30 07:41:26 more
  • Pandas 加載資料的方法和技巧

    哈嘍大家好,我是咸魚 相信小伙伴們在學習 python 資料分析的程序中或多或少都會聽說或者使用過 pandas pandas 是 python 的一個拓展庫,常用于資料分析 今天咸魚將介紹幾個關于 pandas 匯入資料的方法和技巧 ## 從 URL 獲取 csv 資料 關于 pandas 匯入 ......

    uj5u.com 2023-05-30 07:41:19 more
  • Python日期帶時區轉換工具類總結

    @[TOC] # 1.背景 最近專案是國際專案,所以需要經常需要用到UTC時間和local時間的轉換。 所以整理了一下時間戳工具類,方便使用。 這里主要用到的包就是datatime、time、pytz。 # 2. 遇到的坑 直接看測驗案例 ```python tzinfo=pytz.timezone ......

    uj5u.com 2023-05-30 07:39:51 more
  • Python工具箱系列(三十四)

    SQLAlchemy是著名的ORM(Object Relational Mapping-物件關系映射)框架。其主要作用是在編程中,把面向物件的概念跟資料庫中表的概念對應起來。對許多語言(例如JAVA/PYTHON)來說就是定義一個物件,并且這個物件對應著一張資料庫的表。而這個物件的實體,就對應著表中... ......

    uj5u.com 2023-05-30 07:39:45 more