วิธีแทรกข้อมูล (ไฟล์) ลงในคอลัมน์ PostgreSQL bytea ได้อย่างไร

คำถามนี้ไม่เกี่ยวกับ bytea v. oid v. blobs v. วัตถุขนาดใหญ่ ฯลฯ

ฉันมีตารางที่ประกอบด้วยintegerเขตข้อมูลคีย์หลักและbyteaเขตข้อมูล ฉันต้องการป้อนข้อมูลลงในbyteaช่อง สิ่งนี้สามารถสันนิษฐานได้ว่าทำได้ด้วยPL/ภาษาใดภาษาหนึ่งและฉันอาจจะลองทำสิ่งนี้PL/Pythonในอนาคต

ขณะที่ฉันยังคงทดสอบและทดลองใช้ฉันต้องการแทรกข้อมูลจากไฟล์ (บนเซิร์ฟเวอร์) โดยใช้คำสั่ง SQL "มาตรฐาน" ฉันทราบว่าผู้ดูแลระบบที่มีสิทธิ์เขียนบนเซิร์ฟเวอร์เท่านั้นที่จะสามารถแทรกข้อมูลในแบบที่ฉันต้องการ ฉันไม่ได้กังวลเกี่ยวกับเรื่องนี้ในขณะนี้เนื่องจากผู้ใช้จะไม่สามารถแทรกbyteaข้อมูลในปัจจุบัน ฉันได้ค้นหาไซต์ StackExchange ต่างๆ, คลังข้อมูล PostgreSQL และอินเทอร์เน็ตโดยทั่วไปแล้ว แต่ไม่สามารถหาคำตอบได้

แก้ไข: นี้การอภิปรายจาก 2008 แสดงให้เห็นว่าสิ่งที่ฉันต้องการจะทำคือไปไม่ได้ มีการbyteaใช้ฟิลด์อย่างไร

แก้ไข: คำถามที่คล้ายกันนี้จากปี 2005 ยังไม่มีคำตอบ

แก้ไขได้:รายละเอียดที่ให้ไว้ที่นี่ในpsycopgเว็บไซต์เป็นพื้นฐานสำหรับการแก้ปัญหาที่ฉันเขียนใน Python มันก็อาจจะเป็นไปได้ที่จะใส่ข้อมูลไบนารีเป็นคอลัมน์ที่ใช้bytea PL/Pythonฉันไม่ทราบว่าสิ่งนี้เป็นไปได้โดยใช้ "บริสุทธิ์" SQL

ในฐานะ superuser:

create or replace function bytea_import(p_path text, p_result out bytea) 
                   language plpgsql as $$
declare
  l_oid oid;
begin
  select lo_import(p_path) into l_oid;
  select lo_get(l_oid) INTO p_result;
  perform lo_unlink(l_oid);
end;$$;

lo_get เปิดตัวใน 9.4 ดังนั้นสำหรับรุ่นเก่าที่คุณต้องการ:

create or replace function bytea_import(p_path text, p_result out bytea) 
                   language plpgsql as $$
declare
  l_oid oid;
  r record;
begin
  p_result := '';
  select lo_import(p_path) into l_oid;
  for r in ( select data 
             from pg_largeobject 
             where loid = l_oid 
             order by pageno ) loop
    p_result = p_result || r.data;
  end loop;
  perform lo_unlink(l_oid);
end;$$;

แล้ว:

insert into my_table(bytea_data) select bytea_import('/my/file.name');

pg_read_file('location_of file')::byteaใช้

ตัวอย่างเช่น,

create table test(id int, image bytea);
insert into test values (1, pg_read_file('/home/xyz')::bytea);

คู่มือ

การแก้ปัญหานี้ไม่ได้มีประสิทธิภาพว่าในแง่ของการรันไทม์ แต่มันนิด ๆ COPY BINARYง่ายเมื่อเทียบกับการทำส่วนหัวของคุณเอง นอกจากนี้ไม่จำเป็นต้องใช้ไลบรารีหรือภาษาสคริปต์นอกเหนือจากการทุบตี

ก่อนอื่นให้แปลงไฟล์เป็น hexdump เพิ่มขนาดไฟล์เป็นสองเท่า xxd -pทำให้เราใกล้ชิดกันมาก แต่มันก็เกิดขึ้นในบางบรรทัดใหม่ที่น่ารำคาญที่เราต้องดูแล:

xxd -p /path/file.bin | tr -d '\n' > /path/file.hex

ถัดไปนำเข้าข้อมูลใน PostgreSQL เป็นtextฟิลด์ที่มีขนาดใหญ่มาก ประเภทนี้เก็บได้มากถึงหนึ่ง GB ต่อค่าฟิลด์ดังนั้นเราควรโอเคสำหรับวัตถุประสงค์ส่วนใหญ่:

CREATE TABLE hexdump (hex text); COPY hexdump FROM '/path/file.hex';

ตอนนี้ข้อมูลของเราเป็นสตริงฐานสิบหกที่มีค่ามากเราใช้ PostgresQL decodeเพื่อทำให้เป็นbyteaประเภท:

CREATE TABLE bindump AS SELECT decode(hex, 'hex') FROM hexdump;

คำตอบกับ xxdเป็นสิ่งที่ดีและสำหรับไฟล์ขนาดเล็กอย่างรวดเร็ว ด้านล่างเป็นสคริปต์ตัวอย่างที่ฉันใช้

xxd  -p /home/user/myimage.png | tr -d '\n' > /tmp/image.hex
echo "
    -- CREATE TABLE hexdump (hex text);
    DELETE FROM hexdump;
    COPY hexdump FROM '/tmp/image.hex';

    -- CREATE TABLE bindump (binarydump bytea);
    DELETE FROM bindump;

    INSERT INTO bindump (binarydump)  
    (SELECT decode(hex, 'hex') FROM hexdump limit 1);

    UPDATE users 
    SET image= 
    (
        SELECT decode(hex, 'hex') 
        FROM hexdump LIMIT 1
    )  
    WHERE id=15489 ;
    " | psql mydatabase

ใช้ฟังก์ชันPostgres COPY BINARY นี้เป็นวงกว้างเทียบเท่ากับของออราเคิลตารางภายนอก