濮阳杆衣贸易有限公司

主頁 > 知識(shí)庫 > PostgreSQL實(shí)現(xiàn)批量插入、更新與合并操作的方法

PostgreSQL實(shí)現(xiàn)批量插入、更新與合并操作的方法

熱門標(biāo)簽:外呼調(diào)研系統(tǒng) 打電話智能電銷機(jī)器人授權(quán) 辦公外呼電話系統(tǒng) 重慶自動(dòng)外呼系統(tǒng)定制 美容工作室地圖標(biāo)注 漯河外呼電話系統(tǒng) 地圖標(biāo)注和圖片名稱的區(qū)別 合肥公司外呼系統(tǒng)運(yùn)營(yíng)商 海豐有多少商家沒有地圖標(biāo)注

前言

就在 2019 年 1 月份微軟收購了 PostgreSQL 數(shù)據(jù)庫的初創(chuàng)公司 CitusData, 在云數(shù)據(jù)庫方面可以增強(qiáng)與 AWS 的竟?fàn)?。AWS 的 RDS 兩大開源數(shù)據(jù)庫就是 MySQL(Aurora 和 MariaDB 是它的變種) 和 PostgreSQL。

而 PostgreSQL 跳出了普通關(guān)系型數(shù)據(jù)庫的類型約束,它靈活的支持 JSON, JSONB, XML, 數(shù)組等類型。比如說字段類型可以是各種形式的數(shù)組,一維或多維。

create table t1(
 address varchar(5)[3],
 counter integer[3][3],
 schedule text[][]
)

上面只是認(rèn)識(shí)了一下 PostgreSQL 這一亮眼的特性,本篇重點(diǎn)不在如何定義操作數(shù)組類型的字段,而是對(duì)于普通的非數(shù)組字段類型如何用與數(shù)組相關(guān)的 unnest 關(guān)鍵字進(jìn)行記錄的批量插入,更新以及合并操作。

在正式使用介入 unnest 之前先熟悉一下 PostgreSQL 的 upsert(update insert) 操作。受其他數(shù)據(jù)庫的影響,總以后 PostgreSQL 也應(yīng)該支持 merge into 語句,而且竟然 PostgreSQL 官方也有文檔介紹 MERGE 有模有樣的,然而試了一下根本就不支持 merge into 操作。

普通的 insert upsert 操作

不過 PostgreSQL 有另一種 upsert 的語法,或稱之為 insert on conflict,也就是 PostgreSQL 加強(qiáng)版的 insert 語句。如下

INSERT INTO users (id, level)
VALUES (1, 0)
ON CONFLICT (id) DO UPDATE
SET level = users.level + 1;

即插入記錄時(shí)存在相同的主鍵可對(duì)原記錄的某些列進(jìn)行更新,否則插入該記錄。更詳細(xì)的 insert 語法請(qǐng)參考官方文檔 PostgreSQL INSERT。

注意到上面的 upsert 只是應(yīng)用于處理單條記錄,而本文將要討論到的是批量的處理。我們知道 insert 時(shí)可以同時(shí)插入多行記錄,那么這個(gè)  upsert 語法是否也能同時(shí)操作多行記錄呢?我們大膽假設(shè),小心求證,那就動(dòng)手一試吧

create table users(
 id int primary key,
 level int
)

創(chuàng)建一個(gè)表 users, 然后插入一條記錄

INSERT INTO users (id, level) VALUES (1, 0)

查詢 select * from users 表的內(nèi)容如下

執(zhí)行批量的 insert

INSERT INTO users (id, level)
VALUES (1, 3), (2, 1)
ON CONFLICT (id) DO UPDATE
SET level = excluded.level;

理看看 users 表中的內(nèi)容

我們看到已存在行(id=1) 的 level 更新為新的值 3, 并且插入新行。

這里注意到我們用到一個(gè)關(guān)鍵字 excluded 用于引用 INSERT 語句中 VALUES 提供的值,相應(yīng)的表名 users 用于引用表中原有的值。

基于 unnest 的 upsert 操作

前面仍然是寫作此文的意外收獲,實(shí)際上想要總結(jié)的是 unnest 關(guān)鍵字在批量操作中的作用。下面來進(jìn)行演示

create table testunnest(
  id int primary key,
 col1 int,
 col2 varchar(50)
)

創(chuàng)建一個(gè)表并用 unnest 提供并行數(shù)組來進(jìn)行批量插入

insert into testunnest(id, col1, col2) 
 values (unnest(array[1,2]), unnest(array[30,40]), unnest(array['val1', 'val2']));

這時(shí)候表中的內(nèi)容為

從執(zhí)行效果來看,它與下面的 insert 語句是等效的

insert into testunnest(id, col1, col2) values
 (1, 30, 'val1')
 (2, 40, 'val2')

換成成 unnest(array[..]) 的形式有一種行轉(zhuǎn)列的行為。

用 unnest 加上 unsert 再執(zhí)行一次插入

insert into testunnest(id, col1, col2)
 values (unnest(array[2,3]), unnest(array[80,90]), unnest(array['valupdated', 'val3']))
 on conflict (id) do update
 set col1 = excluded.col1, col2 = excluded.col2

再查看表的內(nèi)容如下

 

unnest 與 JDBC 操作

insert into users values (?, ?) on conflict.... 的 SQL 語句的單條記錄或批量操作(addBatch(), executeBatch()) 就不多說了,主要看下用 JDBC 怎么對(duì) unnest 進(jìn)行賦值操作。

PreparedStatement pstmt = conn.prepareStatement(
 "INSERT INTO testunnest(id, col1, col2) " +
  " VALUES (unnest(?), unnest(?), unnest(?))" +
  " ON CONFLICT (id) DO UPDATE" +
  " SET col1 = excluded.col1, col2 = excluded.col2"
);
 
pstmt.setArray(1, conn.createArrayOf("int", new Integer[]{2, 3}));
pstmt.setArray(2, conn.createArrayOf(JDBCType.INTEGER.getName(), new Integer[]{80, 90}));
pstmt.setArray(3, conn.createArrayOf("varchar", new String[]{"val1", "val2"}));
 
int update = pstmt.executeUpdate();
System.out.println(update); //影響的記錄數(shù)是 2

點(diǎn)位符要用 unnest(?),設(shè)置參數(shù)時(shí)要用 setArray(), 參數(shù)用 conn.createArrayOf(type, array) 來指定。需要指明數(shù)組中的元素類型,這么普通的 setInt(), setString() 是一個(gè)意思。

用不著轉(zhuǎn)換為 PostgreSQL 特定的 PreparedStatement 來操作,用 JDBC 通用的 PreparedStatement 接口就能支持對(duì)數(shù)組類型的賦值,難道是其他類型的數(shù)據(jù)庫也能支持類似的數(shù)組操作?

鏈接:

Upsert Records with PostgresSQL 9.5

總結(jié)

以上就是這篇文章的全部?jī)?nèi)容了,希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,如果有疑問大家可以留言交流,謝謝大家對(duì)腳本之家的支持。

您可能感興趣的文章:
  • 基于PostgreSQL和mysql數(shù)據(jù)類型對(duì)比兼容
  • 解決postgresql 數(shù)據(jù)庫 update更新慢的原因
  • 將MySQL數(shù)據(jù)庫移植為PostgreSQL
  • PostgreSQL使用MySQL外表的步驟詳解(mysql_fdw)
  • PostgreSQL使用MySQL外表的步驟詳解(mysql_fdw)
  • 實(shí)現(xiàn)MySQL + PostgreSQL批量插入更新insertOrUpdate

標(biāo)簽:烏海 株洲 錦州 來賓 珠海 晉城 蚌埠 衡陽

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《PostgreSQL實(shí)現(xiàn)批量插入、更新與合并操作的方法》,本文關(guān)鍵詞  PostgreSQL,實(shí)現(xiàn),批量,插入,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請(qǐng)?zhí)峁┫嚓P(guān)信息告之我們,我們將及時(shí)溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《PostgreSQL實(shí)現(xiàn)批量插入、更新與合并操作的方法》相關(guān)的同類信息!
  • 本頁收集關(guān)于PostgreSQL實(shí)現(xiàn)批量插入、更新與合并操作的方法的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章
    苗栗县| 图们市| 合作市| 司法| 车险| 玛沁县| 清水县| 革吉县| 麻江县| 长泰县| 通化县| 屏边| 平和县| 兰州市| 郎溪县| 兴义市| 青龙| 上犹县| 兴宁市| 巧家县| 玉树县| 文水县| 逊克县| 乐陵市| 凤冈县| 金塔县| 镇康县| 宝应县| 朝阳市| 内黄县| 汶上县| 上林县| 蓬安县| 蓬溪县| 闽侯县| 门头沟区| 祥云县| 惠水县| 佛教| 西吉县| 齐河县|