วิธีการเลียนแบบ“ การเพิกเฉยการแทรก” และ“ การอัปเดตคีย์ซ้ำ” (sql merge) ด้วย postgresql ได้อย่างไร

เซิร์ฟเวอร์ SQL บางตัวมีคุณสมบัติที่INSERTถูกข้ามไปถ้ามันจะละเมิดข้อ จำกัด ของคีย์หลัก / เฉพาะ ยกตัวอย่างเช่น MySQL INSERT IGNOREมี

วิธีที่ดีที่สุดในการจำลองINSERT IGNOREและON DUPLICATE KEY UPDATEใช้ PostgreSQL คืออะไร

ลองอัปเดต หากไม่ได้แก้ไขแถวใด ๆ ที่หมายความว่าไม่มีอยู่ให้ทำการแทรก เห็นได้ชัดว่าคุณทำเช่นนี้ในการทำธุรกรรม

แน่นอนคุณสามารถห่อสิ่งนี้ในฟังก์ชั่นถ้าคุณไม่ต้องการใส่รหัสพิเศษในฝั่งไคลเอ็นต์ นอกจากนี้คุณยังต้องวนซ้ำสำหรับสภาพการแข่งขันที่หายากมากในการคิดนั้น

มีตัวอย่างของสิ่งนี้ในเอกสาร: http://www.postgresql.org/docs/9.3/static/plpgsql-control-structures.htmlตัวอย่าง 40-2 ที่ด้านล่าง

นั่นเป็นวิธีที่ง่ายที่สุด คุณสามารถทำเวทมนตร์ด้วยกฎ แต่มันอาจจะยุ่งมาก ฉันขอแนะนำวิธีการแบบปิดฟังก์ชั่นในแต่ละวัน

สิ่งนี้ใช้ได้กับค่าในแถวเดียวหรือสองสามแถว หากคุณกำลังจัดการกับแถวจำนวนมากเช่นจากแบบสอบถามย่อยคุณควรแบ่งเป็นสองแบบสอบถามหนึ่งรายการสำหรับ INSERT และอีกหนึ่งรายการสำหรับ UPDATE (เป็นหลักสูตรการเข้าร่วม / เลือกย่อยที่เหมาะสม - ไม่จำเป็นต้องเขียนหลักของคุณ กรองสองครั้ง)

ด้วย PostgreSQL 9.5 ตอนนี้เป็นฟังก์ชันดั้งเดิม (เช่นMySQL มีมาหลายปีแล้ว):

INSERT ... ตามความขัดแย้งห้ามทำการอัปเดต ("UPSERT")

9.5 นำการสนับสนุนสำหรับการดำเนินงาน "UPSERT" INSERT ถูกขยายเพื่อยอมรับ ON ON CONFLICT DO UPDATE / IGNORE ข้อนี้ระบุการกระทำทางเลือกที่จะใช้ในกรณีที่มีการละเมิดซ้ำซ้อน

...

ตัวอย่างเพิ่มเติมของไวยากรณ์ใหม่:

INSERT INTO user_logins (username, logins)
VALUES ('Naomi',1),('James',1) 
ON CONFLICT (username)
DO UPDATE SET logins = user_logins.logins + EXCLUDED.logins;

แก้ไข: ในกรณีที่คุณไม่ได้รับคำตอบจากวอร์เรนตอนนี้ PG9.5 จะมีคุณสมบัตินี้ ถึงเวลาอัพเกรดแล้ว!

การสร้างคำตอบของ Bill Karwin เพื่อค้นหาว่าวิธีการตามกฎจะมีลักษณะอย่างไร (ถ่ายโอนจากสคีอื่นในฐานข้อมูลเดียวกันและมีคีย์หลักแบบหลายคอลัมน์):

CREATE RULE "my_table_on_duplicate_ignore" AS ON INSERT TO "my_table"
  WHERE EXISTS(SELECT 1 FROM my_table 
                WHERE (pk_col_1, pk_col_2)=(NEW.pk_col_1, NEW.pk_col_2))
  DO INSTEAD NOTHING;
INSERT INTO my_table SELECT * FROM another_schema.my_table WHERE some_cond;
DROP RULE "my_table_on_duplicate_ignore" ON "my_table";

หมายเหตุ: กฎนี้ใช้กับINSERTการดำเนินการทั้งหมดจนกว่ากฎจะถูกดร็อปดังนั้นจึงไม่ได้เป็นแบบเฉพาะกิจ

สำหรับบรรดาของคุณที่มี Postgres 9.5 หรือสูงกว่าไวยากรณ์ON ON ความขัดแย้งใหม่ที่ไม่มีอะไรควรทำงาน:

INSERT INTO target_table (field_one, field_two, field_three ) 
SELECT field_one, field_two, field_three
FROM source_table
ON CONFLICT (field_one) DO NOTHING;

สำหรับพวกเราที่มีรุ่นก่อนหน้าการเข้าร่วมที่ถูกต้องนี้จะทำงานแทน:

INSERT INTO target_table (field_one, field_two, field_three )
SELECT source_table.field_one, source_table.field_two, source_table.field_three
FROM source_table 
LEFT JOIN target_table ON source_table.field_one = target_table.field_one
WHERE target_table.field_one IS NULL;

ในการรับตรรกะการเพิกเฉยต่อการแทรกคุณสามารถทำสิ่งต่อไปนี้ ฉันพบว่าการแทรกจากคำสั่ง select ของค่าตัวอักษรทำงานได้ดีที่สุดจากนั้นคุณสามารถซ่อนคีย์ที่ซ้ำกันโดยใช้ประโยค NO EXISTS หากต้องการรับการอัพเดตเกี่ยวกับลอจิกที่ซ้ำกันฉันสงสัยว่าจะต้องมีการวนซ้ำ pl / pgsql

INSERT INTO manager.vin_manufacturer
(SELECT * FROM( VALUES
  ('935',' Citroën Brazil','Citroën'),
  ('ABC', 'Toyota', 'Toyota'),
  ('ZOM',' OM','OM')
  ) as tmp (vin_manufacturer_id, manufacturer_desc, make_desc)
  WHERE NOT EXISTS (
    --ignore anything that has already been inserted
    SELECT 1 FROM manager.vin_manufacturer m where m.vin_manufacturer_id = tmp.vin_manufacturer_id)
)

INSERT INTO mytable(col1,col2) 
    SELECT 'val1','val2' 
    WHERE NOT EXISTS (SELECT 1 FROM mytable WHERE col1='val1')

ดูเหมือน PostgreSQL สนับสนุนวัตถุคีมาที่เรียกว่ากฎ

http://www.postgresql.org/docs/current/static/rules-update.html

คุณสามารถสร้างกฎON INSERTสำหรับตารางที่กำหนดทำให้มันเกิดขึ้นNOTHINGถ้าแถวมีอยู่ด้วยค่าคีย์หลักที่กำหนดหรือมิฉะนั้นทำให้มันทำUPDATEแทนINSERTถ้าแถวมีอยู่ด้วยค่าคีย์หลักที่กำหนด

ฉันไม่ได้ลองตัวเองดังนั้นฉันจึงไม่สามารถพูดจากประสบการณ์หรือเสนอตัวอย่าง

ในฐานะที่เป็น @hanmari กล่าวถึงในความคิดเห็นของเขา เมื่อแทรกลงในตาราง postgres, on ขัดแย้ง (.. ) ทำอะไรเป็นรหัสที่ดีที่สุดที่จะใช้สำหรับการไม่ใส่ข้อมูลที่ซ้ำกัน:

query = "INSERT INTO db_table_name(column_name)
         VALUES(%s) ON CONFLICT (column_name) DO NOTHING;"

บรรทัดรหัส ON ON ความขัดแย้งจะช่วยให้คำสั่งแทรกยังคงแทรกแถวของข้อมูล แบบสอบถามและรหัสค่าเป็นตัวอย่างของวันที่แทรกจาก Excel ลงในตาราง postgres db ฉันมีข้อ จำกัด ที่เพิ่มลงในตาราง postgres ที่ฉันใช้เพื่อให้แน่ใจว่าฟิลด์ ID นั้นไม่ซ้ำกัน แทนที่จะเรียกใช้การลบแถวของข้อมูลที่เหมือนกันฉันเพิ่มบรรทัดของรหัส sql ที่สร้างหมายเลขคอลัมน์เริ่มต้นที่ 1 ตัวอย่าง:

q = 'ALTER id_column serial RESTART WITH 1'

หากข้อมูลของฉันมีฟิลด์ ID ฉันจะไม่ใช้สิ่งนี้เป็น ID หลัก / รหัสประจำตัวฉันจะสร้างคอลัมน์ ID และฉันตั้งเป็นซีเรียล ฉันหวังว่าข้อมูลนี้จะเป็นประโยชน์กับทุกคน * ฉันไม่มีวุฒิปริญญาตรีด้านการพัฒนา / เข้ารหัสซอฟต์แวร์ ทุกสิ่งที่ฉันรู้ในการเขียนโปรแกรมฉันศึกษาด้วยตัวเอง

วิธีนี้หลีกเลี่ยงการใช้กฎ:

BEGIN
   INSERT INTO tableA (unique_column,c2,c3) VALUES (1,2,3);
EXCEPTION 
   WHEN unique_violation THEN
     UPDATE tableA SET c2 = 2, c3 = 3 WHERE unique_column = 1;
END;

แต่มีข้อเสียเปรียบด้านประสิทธิภาพ (ดูPostgreSQL.org ):

บล็อกที่มีส่วนข้อยกเว้นมีราคาแพงกว่าการเข้าและออกมากกว่าบล็อกที่ไม่มี ดังนั้นอย่าใช้ข้อยกเว้นโดยไม่จำเป็น

เป็นกลุ่มคุณสามารถลบแถวก่อนที่จะแทรก การลบแถวที่ไม่มีอยู่นั้นไม่ทำให้เกิดข้อผิดพลาดดังนั้นจึงข้ามได้อย่างปลอดภัย

สำหรับสคริปต์การนำเข้าข้อมูลหากต้องการแทนที่ "IF NOT EXISTS" จะมีสูตรที่ไม่แน่นอนอยู่บ้างซึ่งยังคงใช้งานได้:

DO
$do$
BEGIN
PERFORM id
FROM whatever_table;

IF NOT FOUND THEN
-- INSERT stuff
END IF;
END
$do$;