Postgres: bloat, pg_repack, dan batasan yang ditangguhkan

Mengapa kembung terjadi

Apakah saya mengalami gembung?

Cara mengatasi kembung

Cara kerja pg_repack

Pancake pertama pada prod

$ ./pg_repack -t tablename -o id
INFO: repacking table "tablename"
ERROR: query failed: 
    ERROR: duplicate key value violates unique constraint "index_16508"
DETAIL:  Key (id, index)=(100500, 42) already exists.

Kendala yang ditangguhkan: mengapa mereka dibutuhkan dan bagaimana cara kerjanya

create table cars
(
  name text constraint pk_cars primary key,
  ord integer not null constraint uk_cars unique
);

begin;
  update cars set ord = 2 where name = 'audi';
  update cars set ord = 1 where name = 'bmw';
commit;

[23305] ERROR: duplicate key value violates unique constraint “uk_cars”
Detail: Key (ord)=(2) already exists.

create table cars
(
  name text constraint pk_cars primary key,
  ord integer not null constraint uk_cars unique deferrable initially deferred
);

Perbaikan pg_repack

$ ./pg_repack -t tablename -o id
INFO: repacking table "tablename"
ERROR: query failed: 
    ERROR: duplicate key value violates unique constraint "index_16508"
DETAIL:  Key (id, index)=(100500, 42) already exists.

Buat indeks yang mirip dengan ditangguhkan

CREATE UNIQUE INDEX CONCURRENTLY uk_tablename__immediate ON tablename (id, index);
-- run pg_repack
DROP INDEX CONCURRENTLY uk_tablename__immediate;

Ganti indeks di tabel baru dengan batasan yang ditangguhkan dari tabel sumber

• tabel dengan pembatasan yang ditangguhkan dan satu catatan;
• masukkan data dalam loop yang bertentangan dengan catatan yang ada;
• melakukan pembaruan - data tidak lagi konflik;
• komit perubahan.

create table test_table
(
  id serial,
  val int,
  constraint uk_test_table__val unique (val) deferrable initially deferred 
);

INSERT INTO test_table (val) VALUES (0);
FOR i IN 1..10000 LOOP
  BEGIN
    INSERT INTO test_table VALUES (0) RETURNING id INTO v_id;
    UPDATE test_table set val = i where id = v_id;
    COMMIT;
  END;
END LOOP;

$ ./pg_repack -t tablename -o id
INFO: repacking table "tablename"
ERROR: query failed: 
    ERROR: duplicate key value violates unique constraint "index_16508"
DETAIL:  Key (id, index)=(100500, 42) already exists.

APPLY_COUNT dan sambungan dua bets

for (;;)
{
num = apply_log(connection, table, APPLY_COUNT);

if (num > MIN_TUPLES_BEFORE_SWITCH)
     continue;  /* there might be still some tuples, repeat. */
...
}

FOR i IN 1..10000 LOOP
  BEGIN
    INSERT INTO test_table VALUES (1) RETURNING id INTO v_id;
    UPDATE test_table set val = i where id = v_id;
    UPDATE test_table set val = i where id = v_id; -- one more update
    COMMIT;
  END;
END LOOP;

Penolakan Butching

temuan

1. Pantau bloat Anda. Berdasarkan data pemantauan, Anda dapat memahami seberapa baik autovacuum dikonfigurasi.
2. Tetapkan AUTOVACUUM untuk menjaga kembung pada tingkat yang wajar.
3. bloat “ ”, . – .
4. – , .