articles:informatique:nettoyage_de_la_base_de_donnee_de_pleroma
Différences
Ci-dessous, les différences entre deux révisions de la page.
Les deux révisions précédentesRévision précédenteProchaine révision | Révision précédenteDernière révisionLes deux révisions suivantes | ||
articles:informatique:nettoyage_de_la_base_de_donnee_de_pleroma [25/04/2020 12:58] – Code SQL en un seul block avec commentaires antoineve | articles:informatique:nettoyage_de_la_base_de_donnee_de_pleroma [25/04/2020 22:03] – antoineve | ||
---|---|---|---|
Ligne 1: | Ligne 1: | ||
- | ====== Suppressions des activités | + | ====== Suppressions des activités |
+ | ===== Sans tenir compte des personnes suivies ===== | ||
+ | <code sql> | ||
+ | -- Il est important de d' | ||
+ | -- puisqu' | ||
+ | -- de lien avec cette table. | ||
+ | -- | ||
+ | -- 1ère partie pour la table activities | ||
+ | -- | ||
+ | DELETE FROM activities | ||
+ | WHERE local = false | ||
+ | AND updated_at < (CURRENT_DATE - INTERVAL '90 days' | ||
+ | -- | ||
+ | -- 2ème partie pour la table objects | ||
+ | -- | ||
+ | DELETE FROM objects | ||
+ | WHERE id NOT IN (SELECT CAST(data->>' | ||
+ | AND data->>' | ||
+ | AND updated_at < (CURRENT_DATE - INTERVAL '90 days' | ||
+ | </ | ||
+ | ===== En tenant compte des personnes suivies ===== | ||
+ | Seul la première partie de la commande change : | ||
<code sql> | <code sql> | ||
- | -- Création | + | -- Il est important de d'abord traiter la table activities |
- | CREATE TABLE activities2 AS SELECT * FROM activities WHERE local = True; | + | -- puisqu' |
- | -- Insertion des activités en lien avec l'instance locale (ici ' | + | -- de lien avec cette table. |
- | INSERT INTO activities2 SELECT * FROM activities | + | -- |
- | -- Insertion des activités | + | -- 1ère partie pour la table activities |
- | INSERT INTO activities2 SELECT * FROM activities WHERE updated_at > (CURRENT_DATE - INTERVAL | + | -- |
- | -- Suppression des doublons | + | DELETE |
- | DELETE FROM activities2 | + | WHERE local = false |
- | -- Vidange de la table des activités | + | AND updated_at < (CURRENT_DATE |
- | DELETE | + | AND WHERE data->>' |
- | -- Insertion des activités conservées | + | NOT IN ( |
- | INSERT INTO activities SELECT * FROM activities2; | + | SELECT ap_id FROM users WHERE id IN ( |
- | -- Suppression | + | SELECT following_id FROM following_relationships WHERE follower_id IN ( |
- | DROP TABLE activities2; | + | SELECT id FROM users WHERE ap_id LIKE ' |
+ | AND nickname IS NOT NULL AND nickname NOT LIKE '%fetch%'))); | ||
+ | -- | ||
+ | -- 2ème partie pour la table objects | ||
+ | -- | ||
+ | DELETE FROM objects | ||
+ | WHERE id NOT IN (SELECT | ||
+ | AND data->>' | ||
+ | AND updated_at < (CURRENT_DATE - INTERVAL '90 days'); -- Ici 90 jours, à ajuster si besoin | ||
</ | </ | ||
- | ====== Suppresions des objects devenus inutiles ====== | ||
- | ====== Suppressions de utilisateurs dont on n' | ||
- | Cette requête va supprimer les utilisateurs distants qui n'ont pas commnuniqué avec l' | ||
+ | ====== Suppressions d' | ||
+ | |||
+ | ===== Ceux qui n'ont aucun lien avec les activités ou les objets ===== | ||
<code sql> | <code sql> | ||
- | DELETE FROM users WHERE last_refreshed_at < (CURRENT_DATE | + | DELETE FROM users |
+ | WHERE ap_id NOT IN ( | ||
+ | SELECT data->>'actor' | ||
+ | WHERE data->>' | ||
+ | AND ap_id NOT IN ( | ||
+ | SELECT actor FROM activities GROUP BY actor HAVING COUNT(*) > 1) | ||
+ | AND ( | ||
+ | ap_id LIKE ' | ||
+ | OR ap_id LIKE ' | ||
+ | OR ap_id LIKE ' | ||
+ | OR ap_id LIKE ' | ||
+ | OR ap_id LIKE ' | ||
+ | </ | ||
+ | ===== Ceux qui n'ont aucun followers et ne suivent personnes ===== | ||
+ | <code sql> | ||
+ | DELETE FROM users | ||
+ | WHERE following_count = 0 | ||
+ | AND follower_count | ||
</ | </ | ||
- | |||
articles/informatique/nettoyage_de_la_base_de_donnee_de_pleroma.txt · Dernière modification : 25/04/2020 22:04 de antoineve