Les fonctionnalités de Postgres qui remplacent des services supplémentaires
Voyez comment JSONB, la recherche plein texte, LISTEN/NOTIFY, SKIP LOCKED, les tables non journalisées et pgvector remplacent des services, et quand évoluer.
Avant d’ajouter Redis, un broker de files d’attente, un moteur de recherche ou une base de données orientée documents, vérifiez si une fonctionnalité native de Postgres ne répond pas déjà suffisamment bien au besoin à votre échelle.
Le scénario habituel est le suivant : une fonctionnalité a besoin d’un cache, une autre de tâches en arrière-plan, et le schéma d’architecture se retrouve avec trois nouvelles briques, chacune avec son propre déploiement, ses sauvegardes et ses modes de défaillance. Certaines de ces briques en valent la peine. Beaucoup ne le valent pas encore.
Cet article présente six fonctionnalités de Postgres capables de remplacer un service distinct. Chaque section propose un court exemple SQL et indique clairement dans quels cas le service dédié reste plus performant. Si vous avez d’abord besoin de revoir la conception de schémas, l’indexation et le pooling de connexions, commencez par ces bonnes pratiques Postgres pour les applications web modernes.
Points clés
- Un index GIN sur une colonne
jsonbaccélère les requêtes de containment@>, et la classe d’opérateursjsonb_path_opsfournit un index dédié au containment qui prend en charge moins d’opérateurs que la classe par défautjsonb_ops. LISTEN/NOTIFYne stocke pas les messages : une notification n’est émise qu’au moment du commit de la transaction émettrice, et si aucune session n’est à l’écoute à cet instant, elle est perdue.FOR UPDATE SKIP LOCKEDest une clause de verrouillage de lignes, pas un filtre : chaque worker verrouille la tâche qu’il sélectionne et ignore les lignes déjà verrouillées par une autre transaction, au lieu de les attendre.- Postgres tronque une table
UNLOGGEDaprès un crash et ne la réplique pas vers les standbys ; réservez-la donc aux données que vous pouvez reconstruire. - Commencez par la fonctionnalité Postgres, mesurez-la sous charge réelle, et n’ajoutez un service dédié qu’une fois que vous êtes en mesure de nommer la limite précise que vous avez atteinte.
Quand se contenter de Postgres : récapitulatif
Le principe « Just use Postgres » tient la route pour les applications de petite et moyenne taille, dès lors que chaque fonctionnalité couvre la charge de travail que vous avez réellement. Le tableau associe chaque service à son équivalent Postgres et au signal indiquant qu’il est temps de passer à autre chose.
| Au lieu de | Fonctionnalité Postgres | Suffisant pour | Ajoutez le service quand |
|---|---|---|---|
| Base de données orientée documents | jsonb + GIN | Attributs flexibles, requêtes de containment | Volume d’écriture très élevé, sharding natif |
| Moteur de recherche | tsvector + GIN | Recherche par mots-clés avec classement | Tolérance aux fautes de frappe, facettes, réglage de la pertinence |
| Broker pub/sub | LISTEN/NOTIFY | Invalidation de cache, réveil des workers | Vous avez besoin de messages durables ou rejouables |
| File de tâches | FOR UPDATE SKIP LOCKED | Tâches en arrière-plan, volume modéré | Fan-out, rejeu, débit très élevé |
| Cache | Table UNLOGGED | Données reconstructibles et expirables | Vous avez besoin d’une latence en mémoire ou de structures de données |
| Base de données vectorielle | pgvector | Embeddings à côté des lignes relationnelles | Les charges vectorielles dépassent les capacités d’un seul nœud |
JSONB et GIN à la place d’une base de données orientée documents
Une colonne jsonb associée à un index GIN permet à Postgres de stocker des documents sans schéma et de répondre aux requêtes de containment (« ce document contient-il ces paires clé/valeur ? ») via l’index. La documentation sur l’indexation de jsonb décrit deux classes d’opérateurs. La classe par défaut est jsonb_ops. L’alternative, jsonb_path_ops, prend en charge moins d’opérateurs, mais elle est bien adaptée lorsque vos requêtes n’utilisent que le containment.
CREATE TABLE events (
id bigint GENERATED ALWAYS AS IDENTITY PRIMARY KEY,
payload jsonb NOT NULL
);
-- jsonb_path_ops supports fewer operators than the default jsonb_ops
CREATE INDEX events_payload_idx ON events USING gin (payload jsonb_path_ops);
EXPLAIN
SELECT id FROM events
WHERE payload @> '{"type": "signup", "plan": "pro"}';
Avant d’opter pour jsonb_path_ops, vérifiez quels opérateurs vos requêtes utilisent. Préférez un document store dédié lorsque le volume d’écriture devient très élevé ou que vous avez besoin d’un sharding natif sur plusieurs nœuds.
Recherche plein texte avec tsvector et GIN
La recherche plein texte de Postgres transforme le texte en lexèmes normalisés (un tsvector) et les compare à une requête analysée (un tsquery). Une colonne tsvector générée en mode STORED maintient le document de recherche synchronisé avec ses colonnes sources à chaque insertion et mise à jour, sans trigger à maintenir. L’expression doit nommer une configuration, par exemple 'english'. Comme l’explique la documentation sur les tables de recherche plein texte, les expressions de recherche plein texte indexées ne peuvent pas dépendre de default_text_search_config.
ALTER TABLE articles ADD COLUMN search tsvector
GENERATED ALWAYS AS (
setweight(to_tsvector('english', coalesce(title, '')), 'A') ||
setweight(to_tsvector('english', coalesce(body, '')), 'B')
) STORED;
CREATE INDEX articles_search_idx ON articles USING gin (search);
SELECT id, title, ts_rank(search, q) AS rank
FROM articles, websearch_to_tsquery('english', $1) AS q
WHERE search @@ q
ORDER BY rank DESC
LIMIT 20;
STORED est obligatoire ici, car la colonne tsvector générée est indexée. Depuis PostgreSQL 18, les colonnes générées sont virtuelles par défaut, c’est-à-dire calculées au moment de la lecture. Les fonctions de contrôle de la recherche plein texte s’occupent du reste : websearch_to_tsquery accepte le type de texte que les utilisateurs saisissent dans un champ de recherche, setweight attribue l’étiquette A aux lexèmes du titre et B à ceux du corps, et ts_rank note les correspondances en fonction de ces poids.
La recherche plein texte de Postgres fait correspondre des mots racinisés, pas des fautes d’orthographe. Le module pg_trgm ajoute la recherche par similarité sur des trigrammes de caractères grâce à l’opérateur % et à un index gin_trgm_ops, ce qui comble en partie ce manque. Les synonymes sont possibles avec les dictionnaires de synonymes et de thésaurus, mais ceux-ci nécessitent des fichiers de configuration sur le serveur. Optez pour un moteur de recherche dédié si vous avez besoin de facettes, d’une solide tolérance aux fautes de frappe ou d’un réglage de la pertinence sans modifier le SQL.
LISTEN/NOTIFY à la place d’un broker pub/sub
LISTEN/NOTIFY est un canal de signalisation léger entre sessions de base de données. Il convient bien à l’invalidation de cache et au réveil des workers inactifs. Il ne stocke pas les messages. D’après la référence de NOTIFY :
- Une notification n’est délivrée qu’au moment du commit de la transaction émettrice.
- Les sessions qui ne sont pas à l’écoute à cet instant ne la reçoivent jamais.
- Par défaut, le payload doit faire moins de 8000 octets.
-- Listener session (kept open)
LISTEN cache_invalidation;
-- Sender, inside any transaction
SELECT pg_notify('cache_invalidation', 'product:42');
Avec NOTIFY, envoyez un identifiant plutôt que la ligne entière. Le payload reste ainsi sous la limite de taille, et le destinataire lit de toute façon des données à jour. Une session LISTEN doit rester connectée : elle n’a donc pas sa place dans un route handler serverless. Exécutez plutôt le listener dans un worker Node de longue durée. Le mode de pooling par transaction de PgBouncer ne prend pas en charge LISTEN : connectez donc le listener directement ou via un pool en mode session. Optez pour un véritable broker lorsque les messages doivent survivre aux redémarrages, être rejoués ou atteindre des consommateurs hors ligne.
Une file de tâches avec SKIP LOCKED
FOR UPDATE SKIP LOCKED est une clause de verrouillage de lignes, pas un filtre. Chaque worker verrouille la tâche qu’il sélectionne et ignore les lignes déjà verrouillées par une autre transaction, au lieu de les attendre. La documentation sur la clause de verrouillage précise que cela donne, par conception, une vue incohérente des données, ce qui convient aux tables de type file d’attente. Pour les concepts liés aux workers et aux nouvelles tentatives, consultez les files de tâches expliquées.
CREATE TABLE jobs (
id bigint GENERATED ALWAYS AS IDENTITY PRIMARY KEY,
kind text NOT NULL,
payload jsonb NOT NULL,
status text NOT NULL DEFAULT 'queued',
created_at timestamptz NOT NULL DEFAULT now(),
finished_at timestamptz
);
CREATE INDEX jobs_queued_idx ON jobs (id) WHERE status = 'queued';
BEGIN;
SELECT id, kind, payload
FROM jobs
WHERE status = 'queued'
ORDER BY id
LIMIT 1
FOR UPDATE SKIP LOCKED;
-- application runs the job using the returned id
UPDATE jobs SET status = 'done', finished_at = now() WHERE id = $1;
COMMIT;
Si le worker plante avant le COMMIT, la transaction est annulée, le verrou est libéré et la tâche redevient disponible. L’index partiel garde la requête de réservation légère à mesure que les tâches terminées s’accumulent. L’inconvénient, c’est que cette version avec SKIP LOCKED maintient une transaction ouverte pendant toute la durée de la tâche. Pour les tâches longues, réservez la ligne en positionnant status = 'running' avec un horodatage, faites un commit, puis terminez dans une seconde transaction. Il vous faut alors un processus de nettoyage (sweeper) pour réinitialiser les lignes running obsolètes. Optez pour une file dédiée lorsque vous avez besoin de fan-out vers de nombreux consommateurs, de rejeu des messages ou d’un débit très élevé.
Tables UNLOGGED pour les données de type cache
Une table UNLOGGED contourne le write-ahead log (WAL), ce qui rend les écritures moins coûteuses. La documentation de CREATE TABLE en détaille la contrepartie : Postgres tronque une table unlogged après un crash ou un arrêt brutal, et ne la réplique pas vers les standbys. Une table UNLOGGED ne convient donc qu’aux données que vous pouvez reconstruire à partir d’une autre source.
CREATE UNLOGGED TABLE cache_entries (
key text PRIMARY KEY,
value jsonb NOT NULL,
expires_at timestamptz NOT NULL
);
CREATE INDEX cache_entries_expires_idx ON cache_entries (expires_at);
-- Write
INSERT INTO cache_entries (key, value, expires_at)
VALUES ($1, $2, now() + interval '10 minutes')
ON CONFLICT (key) DO UPDATE
SET value = EXCLUDED.value, expires_at = EXCLUDED.expires_at;
-- Read
SELECT value FROM cache_entries WHERE key = $1 AND expires_at > now();
-- Cleanup, run on a schedule
DELETE FROM cache_entries WHERE expires_at < now();
L’upsert ON CONFLICT rafraîchit une clé existante en une seule instruction. La lecture vérifie expires_at, car le nettoyage s’exécute périodiquement et des lignes expirées peuvent donc subsister entre deux passages. Déclenchez le nettoyage depuis le planificateur de votre application. Redis reste le meilleur choix si vous avez besoin d’une latence inférieure à la milliseconde ou de structures de données natives telles que les sorted sets et les compteurs. L’article Comment fonctionnent les bases de données clé-valeur explique pourquoi.
pgvector à la place d’une base de données vectorielle distincte
pgvector ajoute à Postgres un type de colonne vectoriel et la recherche par similarité, ce qui permet de stocker les embeddings à côté des lignes qu’ils décrivent. Optez pour une base de données vectorielle dédiée lorsque vos charges vectorielles dépassent les capacités d’un seul nœud. L’article Implémenter la recherche vectorielle dans Postgres détaille la mise en place.
Une règle empirique pour ajouter des services
Considérez chaque fonctionnalité Postgres présentée ici comme l’option par défaut, et un service dédié comme une évolution à justifier par des données concrètes :
- Développez d’abord la fonctionnalité dans Postgres.
- Mesurez-la sous charge réelle avec
EXPLAIN ANALYZEetpg_stat_statements. - Ajoutez le service une fois que vous pouvez nommer la limite atteinte : notifications devant survivre aux redémarrages, recherche nécessitant une tolérance aux fautes de frappe, latence du cache ou volume d’écriture.
Prochaine étape : prenez le service que vous vous apprêtiez à ajouter, trouvez sa ligne dans le tableau récapitulatif et développez d’abord la version Postgres. Si elle ne suffit pas, vos mesures montreront précisément ce que le nouveau service doit corriger.
FAQ
Faut-il utiliser json ou jsonb pour les données de type document dans Postgres ?
Utilisez jsonb pour tout ce que vous interrogez. Le type json stocke une copie textuelle exacte de l'entrée, en conservant les espaces, l'ordre des clés et les clés en double, et la réanalyse à chaque accès. Le type jsonb stocke une forme binaire décomposée, supprime les espaces, ne préserve pas l'ordre des clés et ne conserve que la dernière valeur d'une clé en double. Les index GIN et l'opérateur de containment @> fonctionnent avec jsonb.
Une table UNLOGGED perd-elle ses données lors d'un redémarrage normal de Postgres ?
Non. Postgres ne tronque une table unlogged qu'après un crash ou un arrêt brutal. Après un arrêt propre suivi d'un redémarrage, son contenu est conservé. Vous pouvez convertir une table existante avec ALTER TABLE name SET LOGGED ou SET UNLOGGED. Le passage en LOGGED réécrit la table et inscrit l'intégralité de son contenu dans le WAL, ce qui peut s'avérer coûteux sur les tables volumineuses.
Postgres délivre-t-il les messages NOTIFY en double envoyés dans une même transaction ?
Non. Si une transaction signale plusieurs fois le même canal avec un payload identique, les listeners ne reçoivent qu'une seule notification. Les notifications avec des payloads distincts sont toujours délivrées séparément, et les notifications provenant de transactions différentes ne sont jamais fusionnées. Hormis les doublons supprimés, les notifications d'une même transaction arrivent dans l'ordre d'envoi : il est donc sûr d'émettre depuis des triggers des signaux d'invalidation répétés pour une même clé.
LISTEN/NOTIFY peut-il remplacer le polling dans une file de tâches basée sur SKIP LOCKED ?
En partie. Un trigger sur la table jobs peut appeler pg_notify après chaque insertion, et comme les notifications ne sont émises qu'au commit, les workers ne sont jamais réveillés pour une insertion annulée. Les workers réveillés exécutent ensuite la requête de réservation SKIP LOCKED. Conservez un intervalle de polling lent en solution de repli, car un worker déconnecté au moment où la notification est émise ne la reçoit jamais.
Gain Debugging Superpowers
Unleash the power of session replay to reproduce bugs, track slowdowns and uncover frustrations in your app. Get complete visibility into your frontend with OpenReplay — the most advanced open-source session replay tool for developers.
Star on GitHub12k