ส่งออกแถวเฉพาะจากตาราง PostgreSQL เป็นสคริปต์ INSERT SQL

ฉันมีสคีมาฐานข้อมูลชื่อ: nyummyและตารางที่ชื่อว่าcimory:

create table nyummy.cimory (
  id numeric(10,0) not null,
  name character varying(60) not null,
  city character varying(50) not null,
  CONSTRAINT cimory_pkey PRIMARY KEY (id)
);

ฉันต้องการส่งออกcimoryข้อมูลของตารางเป็นการแทรกไฟล์สคริปต์ SQL อย่างไรก็ตามฉันต้องการส่งออกบันทึก / ข้อมูลที่มีค่าเท่ากับ 'tokyo' เท่านั้น (สมมติว่าข้อมูลเมืองเป็นตัวพิมพ์เล็กทั้งหมด)

ทำอย่างไร?

ไม่สำคัญว่าโซลูชันจะอยู่ในเครื่องมือ GUI ฟรีแวร์หรือบรรทัดคำสั่ง (แม้ว่าโซลูชันเครื่องมือ GUI จะดีกว่า) ฉันลอง pgAdmin III แล้ว แต่ไม่พบตัวเลือกในการทำเช่นนี้

สร้างตารางด้วยชุดที่คุณต้องการส่งออกจากนั้นใช้ยูทิลิตีบรรทัดคำสั่ง pg_dump เพื่อส่งออกไปยังไฟล์:

create table export_table as 
select id, name, city
from nyummy.cimory
where city = 'tokyo'

$ pg_dump --table=export_table --data-only --column-inserts my_database > data.sql

--column-inserts จะถ่ายโอนข้อมูลเป็นคำสั่งแทรกด้วยชื่อคอลัมน์

--data-only อย่าดัมพ์สกีมา

ตามที่แสดงความคิดเห็นด้านล่างการสร้างมุมมองแทนที่จะเป็นตารางจะทำให้เกิดการสร้างตารางเมื่อใดก็ตามที่จำเป็นต้องทำการเอ็กซ์ปอร์ตใหม่

สำหรับข้อมูลการส่งออกอย่างเดียวCOPYการใช้งาน
คุณได้รับไฟล์ที่มีหนึ่งตารางแถวต่อบรรทัดเป็นข้อความธรรมดา (ไม่ใช่INSERTคำสั่ง) มันเล็กกว่าและเร็วกว่า:

COPY (SELECT * FROM nyummy.cimory WHERE city = 'tokio') TO '/path/to/file.csv';

นำเข้าสิ่งเดียวกันไปยังอีกตารางหนึ่งของโครงสร้างเดียวกันทุกที่ด้วย:

COPY other_tbl FROM '/path/to/file.csv';

COPYเขียนและอ่านไฟล์ในเครื่องไปยังเซิร์ฟเวอร์ซึ่งแตกต่างจากโปรแกรมไคลเอนต์เช่นpg_dumpหรือpsqlที่อ่านและเขียนไฟล์ในเครื่องไปยังลูกค้าในท้องถิ่นให้กับลูกค้าหากทั้งสองทำงานบนเครื่องเดียวกันมันไม่สำคัญมากนัก แต่มันสำหรับการเชื่อมต่อระยะไกล

นอกจากนี้ยังมี\copyคำสั่งของ psqlที่:

ดำเนินการสำเนาส่วนหน้า (ไคลเอนต์) นี่คือการดำเนินการที่รันCOPYคำสั่งSQL แต่แทนที่จะเซิร์ฟเวอร์อ่านหรือเขียนไฟล์ที่ระบุ psql จะอ่านหรือเขียนไฟล์และกำหนดเส้นทางข้อมูลระหว่างเซิร์ฟเวอร์และระบบไฟล์โลคัล ซึ่งหมายความว่าการเข้าถึงไฟล์และสิทธิพิเศษเป็นของผู้ใช้ท้องถิ่นไม่ใช่เซิร์ฟเวอร์และไม่ต้องการสิทธิ์ SQL superuser

นี่เป็นวิธีที่ง่ายและรวดเร็วในการส่งออกตารางไปยังสคริปต์ด้วย pgAdminด้วยตนเองโดยไม่ต้องติดตั้งเพิ่มเติม :

1. คลิกขวาที่ตารางเป้าหมายและเลือก "สำรองข้อมูล"
2. เลือกเส้นทางไฟล์เพื่อจัดเก็บข้อมูลสำรอง ในฐานะที่เป็นรูปแบบเลือก "ธรรมดา"
3. เปิดแท็บ "ตัวเลือกการถ่ายโอนข้อมูล # 2" ที่ด้านล่างและทำเครื่องหมาย "ใช้การแทรกคอลัมน์"
4. คลิกปุ่มสำรองข้อมูล
5. หากคุณเปิดไฟล์ผลลัพธ์ด้วยโปรแกรมอ่านข้อความ (เช่น notepad ++) คุณจะได้รับสคริปต์เพื่อสร้างตารางทั้งหมด จากตรงนั้นคุณสามารถคัดลอก INSERT-Statement ที่สร้างขึ้น

วิธีนี้ยังทำงานร่วมกับเทคนิคการสร้าง export_table ตามที่แสดงในคำตอบของ @Clodoaldo Neto

ปรับแต่ง SQLมีคุณสมบัติดังกล่าว

หลังจากเรียกใช้แบบสอบถามคลิกขวาที่ผลลัพธ์แบบสอบถามแล้วเลือก "คัดลอกข้อมูลเป็น SQL> แทรก SQL"

สำหรับกรณีการใช้งานของฉันฉันก็สามารถท่อไป grep

pg_dump -U user_name --data-only --column-inserts -t nyummy.cimory | grep "tokyo" > tokyo.sql

ฉันพยายามเขียนขั้นตอนการทำตามรหัส @PhilHibbs ด้วยวิธีอื่น กรุณาดูและทดสอบ

 CREATE OR REPLACE FUNCTION dump(IN p_schema text, IN p_table text, IN p_where text)
   RETURNS setof text AS
 $BODY$
 DECLARE
     dumpquery_0 text;
     dumpquery_1 text;
     selquery text;
     selvalue text;
     valrec record;
     colrec record;
 BEGIN

     -- ------ --
     -- GLOBAL --
     --   build base INSERT
     --   build SELECT array[ ... ]
     dumpquery_0 := 'INSERT INTO ' ||  quote_ident(p_schema) || '.' || quote_ident(p_table) || '(';
     selquery    := 'SELECT array[';

     <<label0>>
     FOR colrec IN SELECT table_schema, table_name, column_name, data_type
                   FROM information_schema.columns
                   WHERE table_name = p_table and table_schema = p_schema
                   ORDER BY ordinal_position
     LOOP
         dumpquery_0 := dumpquery_0 || quote_ident(colrec.column_name) || ',';
         selquery    := selquery    || 'CAST(' || quote_ident(colrec.column_name) || ' AS TEXT),';
     END LOOP label0;

     dumpquery_0 := substring(dumpquery_0 ,1,length(dumpquery_0)-1) || ')';
     dumpquery_0 := dumpquery_0 || ' VALUES (';
     selquery    := substring(selquery    ,1,length(selquery)-1)    || '] AS MYARRAY';
     selquery    := selquery    || ' FROM ' ||quote_ident(p_schema)||'.'||quote_ident(p_table);
     selquery    := selquery    || ' WHERE '||p_where;
     -- GLOBAL --
     -- ------ --

     -- ----------- --
     -- SELECT LOOP --
     --   execute SELECT built and loop on each row
     <<label1>>
     FOR valrec IN  EXECUTE  selquery
     LOOP
         dumpquery_1 := '';
         IF not found THEN
             EXIT ;
         END IF;

         -- ----------- --
         -- LOOP ARRAY (EACH FIELDS) --
         <<label2>>
         FOREACH selvalue in ARRAY valrec.MYARRAY
         LOOP
             IF selvalue IS NULL
             THEN selvalue := 'NULL';
             ELSE selvalue := quote_literal(selvalue);
             END IF;
             dumpquery_1 := dumpquery_1 || selvalue || ',';
         END LOOP label2;
         dumpquery_1 := substring(dumpquery_1 ,1,length(dumpquery_1)-1) || ');';
         -- LOOP ARRAY (EACH FIELD) --
         -- ----------- --

         -- debug: RETURN NEXT dumpquery_0 || dumpquery_1 || ' --' || selquery;
         -- debug: RETURN NEXT selquery;
         RETURN NEXT dumpquery_0 || dumpquery_1;

     END LOOP label1 ;
     -- SELECT LOOP --
     -- ----------- --

 RETURN ;
 END
 $BODY$
   LANGUAGE plpgsql VOLATILE;

แล้ว:

-- for a range
SELECT dump('public', 'my_table','my_id between 123456 and 123459'); 
-- for the entire table
SELECT dump('public', 'my_table','true');

ทดสอบกับ postgres ของฉัน 9.1 พร้อมกับตารางที่มีประเภทข้อมูลผสม (ข้อความ, double, int, timestamp โดยไม่มีเขตเวลา ฯลฯ )

นั่นเป็นเหตุผลที่จำเป็นต้องใช้ CAST ในรูปแบบ TEXT การทดสอบของฉันทำงานอย่างถูกต้องสำหรับสายประมาณ 9M ดูเหมือนว่าจะล้มเหลวก่อนการทำงาน 18 นาที

ps: ฉันพบว่า mysql บนเว็บเทียบเท่ากัน

คุณสามารถสร้างมุมมองของตารางด้วยเร็กคอร์ด specifit จากนั้นดัมพ์ไฟล์ sql

CREATE VIEW foo AS
SELECT id,name,city FROM nyummy.cimory WHERE city = 'tokyo'

ฉันเพิ่งทำขั้นตอนด่วนเพื่อทำสิ่งนี้ ใช้งานได้กับแถวเดียวเท่านั้นดังนั้นฉันจึงสร้างมุมมองชั่วคราวที่เลือกแถวที่ฉันต้องการจากนั้นแทนที่ pg_temp.temp_view ด้วยตารางจริงที่ฉันต้องการแทรก

CREATE OR REPLACE FUNCTION dv_util.gen_insert_statement(IN p_schema text, IN p_table text)
  RETURNS text AS
$BODY$
DECLARE
    selquery text; 
    valquery text; 
    selvalue text; 
    colvalue text; 
    colrec record;
BEGIN

    selquery := 'INSERT INTO ' ||  quote_ident(p_schema) || '.' || quote_ident(p_table);

    selquery := selquery || '(';

    valquery := ' VALUES (';
    FOR colrec IN SELECT table_schema, table_name, column_name, data_type
                  FROM information_schema.columns 
                  WHERE table_name = p_table and table_schema = p_schema 
                  ORDER BY ordinal_position 
    LOOP
      selquery := selquery || quote_ident(colrec.column_name) || ',';

      selvalue := 
        'SELECT CASE WHEN ' || quote_ident(colrec.column_name) || ' IS NULL' || 
                   ' THEN ''NULL''' || 
                   ' ELSE '''' || quote_literal('|| quote_ident(colrec.column_name) || ')::text || ''''' || 
                   ' END' || 
        ' FROM '||quote_ident(p_schema)||'.'||quote_ident(p_table);
      EXECUTE selvalue INTO colvalue;
      valquery := valquery || colvalue || ',';
    END LOOP;
    -- Replace the last , with a )
    selquery := substring(selquery,1,length(selquery)-1) || ')';
    valquery := substring(valquery,1,length(valquery)-1) || ')';

    selquery := selquery || valquery;

RETURN selquery;
END
$BODY$
  LANGUAGE plpgsql VOLATILE;

อุทธรณ์ดังนี้:

SELECT distinct dv_util.gen_insert_statement('pg_temp_' || sess_id::text,'my_data') 
from pg_stat_activity 
where procpid = pg_backend_pid()

ฉันยังไม่ได้ทดสอบสิ่งนี้กับการโจมตีของการฉีดโปรดแจ้งให้เราทราบหากการเรียก quote_literal นั้นไม่เพียงพอสำหรับเรื่องนั้น

นอกจากนี้ยังใช้งานได้กับคอลัมน์ที่สามารถส่งไปยัง :: text และกลับมาอีกครั้งได้อย่างง่ายดาย

นอกจากนี้สำหรับ Greenplum แต่ฉันไม่สามารถคิดได้ว่าทำไมมันถึงไม่ทำงานกับ Postgres, CMIIW

คุณได้ลอง pgadmin ในการดำเนินการค้นหาด้วย " EXECUTE QUERY WRITE RESULT TO FILE " ตัวเลือก

มันเป็นเพียงการส่งออกข้อมูลมิฉะนั้นจะลอง

pg_dump -t view_name DB_name > db.sql

ตัวเลือกที่ใช้สำหรับ ==> การถ่ายโอนข้อมูลตารางเท่านั้น (หรือมุมมองหรือลำดับ) ตารางการจับคู่อ้างอิง