www/ecrire/genie/optimiser.php

   1 <?php
   2
   3 /***************************************************************************\
   4  *  SPIP, Systeme de publication pour l'internet                           *
   5  *                                                                         *
   6  *  Copyright (c) 2001-2019                                                *
   7  *  Arnaud Martin, Antoine Pitrou, Philippe Riviere, Emmanuel Saint-James  *
   8  *                                                                         *
   9  *  Ce programme est un logiciel libre distribue sous licence GNU/GPL.     *
  10  *  Pour plus de details voir le fichier COPYING.txt ou l'aide en ligne.   *
  11 \***************************************************************************/
  12
  13 /**
  14  * Gestion des optimisations de la base de données en cron
  15  *
  16  * @package SPIP\Core\Genie\Optimiser
  17  **/
  18
  19 if (!defined('_ECRIRE_INC_VERSION')) {
  20         return;
  21 }
  22
  23 include_spip('base/abstract_sql');
  24 include_spip('inc/config');
  25
  26 /**
  27  * Cron d'optimisation de la base de données
  28  *
  29  * Tache appelée régulièrement
  30  *
  31  * @param int $t
  32  *     Timestamp de la date de dernier appel de la tâche
  33  * @return int
  34  *     Timestamp de la date du prochain appel de la tâche
  35  **/
  36 function genie_optimiser_dist($t) {
  37
  38         optimiser_base_une_table();
  39         optimiser_base();
  40
  41         // la date souhaitee pour le tour suivant = apres-demain a 4h du mat ;
  42         // sachant qu'on a un delai de 48h, on renvoie aujourd'hui a 4h du mat
  43         // avec une periode de flou entre 2h et 6h pour ne pas saturer un hebergeur
  44         // qui aurait beaucoup de sites SPIP
  45         return -(mktime(2, 0, 0) + rand(0, 3600 * 4));
  46 }
  47
  48 /**
  49  * Optimise la base de données
  50  *
  51  * Supprime les relicats d'éléments qui ont disparu
  52  *
  53  * @note
  54  *     Heure de référence pour le garbage collector = 24h auparavant
  55  * @param int $attente
  56  *     Attente entre 2 exécutions de la tache en secondes
  57  * @return void
  58  **/
  59 function optimiser_base($attente = 86400) {
  60         optimiser_base_disparus($attente);
  61 }
  62
  63
  64 /**
  65  * Lance une requête d'optimisation sur une des tables SQL de la
  66  * base de données.
  67  *
  68  * À chaque appel, une nouvelle table est optimisée (la suivante dans la
  69  * liste par rapport à la dernière fois).
  70  *
  71  * @see sql_optimize()
  72  *
  73  * @global int $GLOBALS ['meta']['optimiser_table']
  74  **/
  75 function optimiser_base_une_table() {
  76
  77         $tables = array();
  78         $result = sql_showbase();
  79
  80         // on n'optimise qu'une seule table a chaque fois,
  81         // pour ne pas vautrer le systeme
  82         // lire http://dev.mysql.com/doc/refman/5.0/fr/optimize-table.html
  83         while ($row = sql_fetch($result)) {
  84                 $tables[] = array_shift($row);
  85         }
  86
  87         if ($tables) {
  88                 $table_op = intval(lire_config('optimiser_table', 0) + 1) % sizeof($tables);
  89                 ecrire_config('optimiser_table', $table_op);
  90                 $q = $tables[$table_op];
  91                 spip_log("debut d'optimisation de la table $q");
  92                 if (sql_optimize($q)) {
  93                         spip_log("fin d'optimisation de la table $q");
  94                 } else {
  95                         spip_log("Pas d'optimiseur necessaire");
  96                 }
  97         }
  98 }
  99
 100
 101 /**
 102  * Supprime des enregistrements d'une table SQL dont les ids à supprimer
 103  * se trouvent dans les résultats de ressource SQL transmise, sous la colonne 'id'
 104  *
 105  * @note
 106  *     Mysql < 4.0 refuse les requetes DELETE multi table
 107  *     et elles ont une syntaxe differente entre 4.0 et 4.1
 108  *     On passe donc par un SELECT puis DELETE avec IN
 109  *
 110  * @param string $table
 111  *     Nom de la table SQL, exemple : spip_articles
 112  * @param string $id
 113  *     Nom de la clé primaire de la table, exemple : id_article
 114  * @param Resource $sel
 115  *     Ressource SQL issue d'une sélection (sql_select) et contenant une
 116  *     colonne 'id' ayant l'identifiant de la clé primaire à supprimer
 117  * @param string $and
 118  *     Condition AND à appliquer en plus sur la requête de suppression
 119  * @return int
 120  *     Nombre de suppressions
 121  **/
 122 function optimiser_sansref($table, $id, $sel, $and = '') {
 123         $in = array();
 124         while ($row = sql_fetch($sel)) {
 125                 $in[$row['id']] = true;
 126         }
 127         sql_free($sel);
 128
 129         if ($in) {
 130                 sql_delete($table, sql_in($id, array_keys($in)) . ($and ? " AND $and" : ''));
 131                 spip_log("Numeros des entrees $id supprimees dans la table $table: " . implode(', ', array_keys($in)));
 132         }
 133
 134         return count($in);
 135 }
 136
 137
 138 /**
 139  * Suppression des liens morts entre tables
 140  *
 141  * Supprime des liens morts entre tables suite à la suppression d'articles,
 142  * d'auteurs, etc...
 143  *
 144  * @note
 145  *     Maintenant que MySQL 5 a des Cascades on pourrait faire autrement
 146  *     mais on garde la compatibilité avec les versions précédentes.
 147  *
 148  * @pipeline_appel optimiser_base_disparus
 149  *
 150  * @param int $attente
 151  *     Attente entre 2 exécutions de la tache en secondes
 152  * @return void
 153  **/
 154 function optimiser_base_disparus($attente = 86400) {
 155
 156         # format = 20060610110141, si on veut forcer une optimisation tout de suite
 157         $mydate = sql_quote(date("Y-m-d H:i:s", time() - $attente));
 158
 159         $n = 0;
 160
 161         //
 162         // Rubriques
 163         //
 164
 165         # les articles qui sont dans une id_rubrique inexistante
 166         # attention on controle id_rubrique>0 pour ne pas tuer les articles
 167         # specialement affectes a une rubrique non-existante (plugin,
 168         # cf. https://core.spip.net/issues/1549 )
 169         $res = sql_select("A.id_article AS id",
 170                 "spip_articles AS A
 171                         LEFT JOIN spip_rubriques AS R
 172                           ON A.id_rubrique=R.id_rubrique",
 173                 "A.id_rubrique > 0
 174                          AND R.id_rubrique IS NULL
 175                          AND A.maj < $mydate");
 176
 177         $n += optimiser_sansref('spip_articles', 'id_article', $res);
 178
 179         // les articles a la poubelle
 180         sql_delete("spip_articles", "statut='poubelle' AND maj < $mydate");
 181
 182         //
 183         // Auteurs
 184         //
 185
 186         include_spip('action/editer_liens');
 187         // optimiser les liens de tous les auteurs vers des objets effaces
 188         // et depuis des auteurs effaces
 189         $n += objet_optimiser_liens(array('auteur' => '*'), '*');
 190
 191         # effacer les auteurs poubelle qui ne sont lies a rien
 192         $res = sql_select("A.id_auteur AS id",
 193                 "spip_auteurs AS A
 194                         LEFT JOIN spip_auteurs_liens AS L
 195                           ON L.id_auteur=A.id_auteur",
 196                 "L.id_auteur IS NULL
 197                         AND A.statut='5poubelle' AND A.maj < $mydate");
 198
 199         $n += optimiser_sansref('spip_auteurs', 'id_auteur', $res);
 200
 201         # supprimer les auteurs 'nouveau' qui n'ont jamais donne suite
 202         # au mail de confirmation (45 jours pour repondre, ca devrait suffire)
 203         sql_delete("spip_auteurs", "statut='nouveau' AND maj < " . sql_quote(date('Y-m-d', time() - 45 * 24 * 3600)));
 204
 205         /**
 206          * Permet aux plugins de compléter l'optimisation suite aux éléments disparus
 207          *
 208          * L'index 'data' est un entier indiquant le nombre d'optimisations
 209          * qui ont été réalisées (par exemple le nombre de suppressions faites)
 210          * et qui doit être incrémenté par les fonctions
 211          * utilisant ce pipeline si elles suppriment des éléments.
 212          *
 213          * @pipeline_appel optimiser_base_disparus
 214          */
 215         $n = pipeline('optimiser_base_disparus', array(
 216                 'args' => array(
 217                         'attente' => $attente,
 218                         'date' => $mydate
 219                 ),
 220                 'data' => $n
 221         ));
 222
 223         if (!$n) {
 224                 spip_log("Optimisation des tables: aucun lien mort");
 225         }
 226 }