]> git.ipfire.org Git - thirdparty/postgresql.git/commit
Avoid detoasting failure after COMMIT inside a plpgsql FOR loop.
authorTom Lane <tgl@sss.pgh.pa.us>
Thu, 20 May 2021 22:32:37 +0000 (18:32 -0400)
committerTom Lane <tgl@sss.pgh.pa.us>
Thu, 20 May 2021 22:32:37 +0000 (18:32 -0400)
commitc64183f234e8e185347edf8820b3459e802b5354
treea2055522842e63ff9468383037513fbcb92cb06e
parent9dc76f032cd6a1fbde760aa9c264057fec7b1855
Avoid detoasting failure after COMMIT inside a plpgsql FOR loop.

exec_for_query() normally tries to prefetch a few rows at a time
from the query being iterated over, so as to reduce executor
entry/exit overhead.  Unfortunately this is unsafe if we have
COMMIT or ROLLBACK within the loop, because there might be
TOAST references in the data that we prefetched but haven't
yet examined.  Immediately after the COMMIT/ROLLBACK, we have
no snapshots in the session, meaning that VACUUM is at liberty
to remove recently-deleted TOAST rows.

This was originally reported as a case triggering the "no known
snapshots" error in init_toast_snapshot(), but even if you miss
hitting that, you can get "missing toast chunk", as illustrated
by the added isolation test case.

To fix, just disable prefetching in non-atomic contexts.  Maybe
there will be performance complaints prompting us to work harder
later, but it's not clear at the moment that this really costs
much, and I doubt we'd want to back-patch any complicated fix.

In passing, adjust that error message in init_toast_snapshot()
to be a little clearer about the likely cause of the problem.

Patch by me, based on earlier investigation by Konstantin Knizhnik.

Per bug #15990 from Andreas Wicht.  Back-patch to v11 where
intra-procedure COMMIT was added.

Discussion: https://postgr.es/m/15990-eee2ac466b11293d@postgresql.org
src/backend/access/common/toast_internals.c
src/pl/plpgsql/src/pl_exec.c
src/test/isolation/expected/plpgsql-toast.out
src/test/isolation/specs/plpgsql-toast.spec