Projet

Général

Profil

Scripts et taches planifiees » Historique » Version 78

Julien Enselme, 06/08/2013 21:20
Liste des scripts à disposition : explication des imports

1 1 Julien Enselme
Afin de gagner du temps et d'éviter les erreurs humaines, des scripts ont été écrits tout au long du projet. Certains sont même exécutés automatiquement toutes les semaines.
2 1 Julien Enselme
3 13 Florent Torregrosa
{{>toc}}
4 1 Julien Enselme
5 1 Julien Enselme
h1. Les tâches planifiées
6 1 Julien Enselme
7 26 Florent Torregrosa
h2. Crontab
8 26 Florent Torregrosa
9 3 Julien Enselme
Pour exécuter ces tâches régulièrement, on utilise le "crontab":http://fr.wikipedia.org/wiki/Crontab. Il s'agit d'un programme installé sur notre serveur.
10 1 Julien Enselme
11 3 Julien Enselme
Pour voir et modifier la liste des actions :
12 3 Julien Enselme
# se connecter au serveur : <code>ssh assos@sas1.centrale-marseille</code>
13 3 Julien Enselme
# taper la commande pour voir le crontab <code>crontab -l</code>
14 47 Julien Enselme
# taper la commande pour modifier le crontab <code>crontab -e</code>.
15 1 Julien Enselme
16 47 Julien Enselme
{{important(Ne pas effectuer cette opération avant de s'être renseigné sur "vi":http://fr.wikipedia.org/wiki/Vi (l'éditeur de texte utilisé qui n'est pas vraiment intuitif :p) et sur "la syntaxe du crontab":http://fr.wikipedia.org/wiki/Crontab#Modification !
17 47 Julien Enselme
Les scripts doivent si possible s’exécuter avant le club Drupal pour que les problèmes éventuels y soient réglés)}}
18 47 Julien Enselme
19 69 Julien Enselme
{{tip(
20 69 Julien Enselme
* Pour utiliser un autre éditeur que vi taper : export EDITOR=editor_name exemple : vim, nano.
21 74 Florent Torregrosa
)}}
22 74 Florent Torregrosa
23 74 Florent Torregrosa
{{important(
24 74 Florent Torregrosa
* d7-all-update-contrib.sh fait des sauvegardes automatiques individuelles pour les sites Drupal 7 en faisant appel à d7-all-dump-indiviual.sh auto
25 74 Florent Torregrosa
* C'est pour cela que d7-all-dump-individual.sh auto n'est pas appelé dans le crontab.
26 74 Florent Torregrosa
)}}
27 26 Florent Torregrosa
28 26 Florent Torregrosa
<pre>
29 26 Florent Torregrosa
<code class="php">
30 42 Florent Torregrosa
######## How to use
31 42 Florent Torregrosa
# mm hh jj MMM JJJ task
32 42 Florent Torregrosa
# minutes hour day_month month day_week
33 42 Florent Torregrosa
# for more informations : https://fr.wikipedia.org/wiki/Crontab#Notation
34 42 Florent Torregrosa
######## End how to
35 42 Florent Torregrosa
36 1 Julien Enselme
37 1 Julien Enselme
### Cleaning
38 67 Julien Enselme
00 5 * * * /users/guest/assos/bin/all-reset-permissions.sh > /dev/null 2>&1
39 67 Julien Enselme
00 6 * * * /users/guest/assos/bin/delete-temporary-files.sh > /dev/null 2>&1
40 1 Julien Enselme
41 1 Julien Enselme
42 67 Julien Enselme
### Traqu-heure
43 67 Julien Enselme
00 7 * * * /users/guest/assos/bin/traqu_heure/script-restitution.sh > /dev/null 2>&1
44 68 Florent Torregrosa
0 * * * *  /users/guest/assos/bin/traqu_heure/script-traque.sh > /dev/null 2>&1
45 67 Julien Enselme
46 67 Julien Enselme
47 1 Julien Enselme
### Databases
48 1 Julien Enselme
# Create backup
49 67 Julien Enselme
00 8 1,15 * * /users/guest/assos/bin/d7-all-dump-full.sh > /dev/null 2>&1
50 68 Florent Torregrosa
00 1 * * 2    /users/guest/assos/bin/d6-all-dump-full.sh > /dev/null 2>&1
51 43 Florent Torregrosa
52 43 Florent Torregrosa
# flush backup
53 67 Julien Enselme
00 8 2,16 * * /users/guest/assos/bin/flush-full-databases-backups.sh d7 > /dev/null 2>&1
54 68 Florent Torregrosa
00 22 * * 2   /users/guest/assos/bin/flush-full-databases-backups.sh d6 > /dev/null 2>&1
55 68 Florent Torregrosa
00 23 * * 2   /users/guest/assos/bin/flush-individual-databases-backups.sh auto d7 > /dev/null 2>&1
56 68 Florent Torregrosa
00 1 * * 3    /users/guest/assos/bin/flush-individual-databases-backups.sh manual d7 > /dev/null 2>&1
57 42 Florent Torregrosa
58 43 Florent Torregrosa
59 67 Julien Enselme
### Drupal 7
60 56 Julien Enselme
00 22 * * 3 /users/guest/assos/bin/d7-all-update-contrib.sh | mail -s "d7-all-update-contrib.sh" assos
61 68 Florent Torregrosa
00 1 * * 4  /users/guest/assos/bin/d7-all-update-localisation.sh | mail -s "d7-all-update-localisation.sh" assos
62 68 Florent Torregrosa
00 2 * * 4  /users/guest/assos/bin/d7-all-security-review.sh
63 68 Florent Torregrosa
00 3 * * 4  /users/guest/assos/bin/d7-all-reset-variables.sh > /dev/null 2>&1
64 68 Florent Torregrosa
00 4 * * 4  /users/guest/assos/bin/d7-all-releases-info.sh | mail -s "d7-all-releases-info.sh" assos
65 42 Florent Torregrosa
66 67 Julien Enselme
67 43 Florent Torregrosa
### Drupal 6
68 67 Julien Enselme
00 22 * * 6 /users/guest/assos/bin/d6-all-update-contrib.sh > /dev/null 2>&1
69 42 Florent Torregrosa
00 23 * * 6 /users/guest/assos/bin/d6-all-reset-variables.sh > /dev/null 2>&1
70 43 Florent Torregrosa
71 67 Julien Enselme
# Launch drush cron on fellowings
72 68 Florent Torregrosa
45 17 * * *  /users/guest/assos/bin/drushcronone assos.centrale-marseille.fr.ginfo > /dev/null 2>&1
73 68 Florent Torregrosa
*/15 * * * * /users/guest/assos/bin/drushcronone assos.centrale-marseille.fr.clubfinance > /dev/null 2>&1
74 68 Florent Torregrosa
45 3 * * *   /users/guest/assos/bin/drushcronone default > /dev/null 2>&1
75 68 Florent Torregrosa
35 00 * * *  /users/guest/assos/bin/drushcronone assos.centrale-marseille.fr.cac13 > /dev/null 2>&1
76 68 Florent Torregrosa
*/45 * * * * /users/guest/assos/bin/drushcronone assos.centrale-marseille.fr.expat > /dev/null 2>&1
77 68 Florent Torregrosa
*/10 * * * * /users/guest/assos/bin/drushcronone forum.centrale-marseille.fr > /dev/null 2>&1
78 67 Julien Enselme
79 1 Julien Enselme
00 22 * * 7 /users/guest/assos/bin/disk-usage.sh | mail -s "disk-usage.sh" assos 
80 1 Julien Enselme
</code>
81 25 Florent Torregrosa
</pre>
82 1 Julien Enselme
83 67 Julien Enselme
La liste des tâches effectuées régulièrement est ci-dessous.
84 3 Julien Enselme
85 25 Florent Torregrosa
h2. La réinitialisation des variables
86 25 Florent Torregrosa
87 1 Julien Enselme
Cette tâche consiste à réinitialiser certaines variables qui donnent des droits considérés comme trop permissifs donc dangereux aux administrateurs des sites ou nécessaire pour d'autres scripts tels que piwik ou security_review.
88 1 Julien Enselme
89 25 Florent Torregrosa
En voici quelques exemples :
90 1 Julien Enselme
91 1 Julien Enselme
<pre>
92 1 Julien Enselme
<code class="bash">
93 25 Florent Torregrosa
drush -y vset error_level 0
94 25 Florent Torregrosa
</code>
95 1 Julien Enselme
</pre>
96 21 Florent Torregrosa
97 25 Florent Torregrosa
Cette commande permet de ne pas afficher les messages d'erreurs. En effet, ils contiennent parfois des informations sensibles sur l'installation et ne doivent donc pas être divulgués à n'importe qui.
98 25 Florent Torregrosa
99 3 Julien Enselme
<pre>
100 1 Julien Enselme
<code class="php">
101 1 Julien Enselme
drush -y vset --always-set reverse_proxy TRUE
102 25 Florent Torregrosa
drush -y vset --always-set --format=json reverse_proxy_addresses '["147.94.19.16","147.94.19.17"]'
103 1 Julien Enselme
</code>
104 3 Julien Enselme
</pre>
105 1 Julien Enselme
106 70 Julien Enselme
Ces commandes permettent de déclarer à Drupal les serveurs proxy du CRI afin d'éviter qu'il ne répertorie tous les visiteurs comme ayant l'adresse des serveurs sus-cités. **Pas fini : voir http://assos.centrale-marseille.fr/lessive/content/t%C3%A2che/rendre-les-settingsphp-conformes-%C3%A0-la-version-712-de-drupal**
107 1 Julien Enselme
108 6 Julien Enselme
h2. La sauvegarde des bases de données
109 1 Julien Enselme
110 3 Julien Enselme
Sur les installations d6 et d7 : une fois par semaine
111 1 Julien Enselme
112 73 Julien Enselme
On utilise les scripts de sauvegardes :
113 73 Julien Enselme
114 73 Julien Enselme
* [[Scripts_et_taches_planifiees#d6-all-dump-fullsh|d6-all-dump-full.sh]]
115 73 Julien Enselme
* [[Scripts_et_taches_planifiees#d6-dump-individualsh|d6-dump-individual.sh]]
116 73 Julien Enselme
* [[Scripts_et_taches_planifiees#d7-all-dump-fullsh|d7-all-dump-full.sh]]
117 73 Julien Enselme
* [[Scripts_et_taches_planifiees#d7-all-dump-individualsh|d7-all-dump-individual.sh]].
118 1 Julien Enselme
119 72 Julien Enselme
h2. La purge des sauvegardes de bases de données
120 1 Julien Enselme
121 1 Julien Enselme
Sur les installations d6 et d7 : toutes les semaines
122 1 Julien Enselme
123 72 Julien Enselme
Cette tâche utilise les scripts de purges des sauvegardes ([[Scripts_et_taches_planifiees#flush-full-databases-backupssh|flush-full-databases-backups.sh]] et [[Scripts_et_taches_planifiees#flush-individual-databases-backupssh|flush-individual-databases-backups.sh]]) afin de libérer de l'espace disque en supprimant les sauvegardes de bdd les plus vieilles.
124 1 Julien Enselme
125 1 Julien Enselme
h1. Liste des scripts à disposition
126 21 Florent Torregrosa
127 75 Julien Enselme
Les scripts utilisés sont hébergés dans le répertoire bin du compte assos. Ce dossier est dans le PATH l'utilisateur assos ce qui permet d'utiliser les scripts comme les commandes ususelles du shell. Les script doivent exécutales pour fonctionner ainsi. Le script @all-reset-permissions.sh@ remet les bonnes permissions sur ce dossier.
128 75 Julien Enselme
129 75 Julien Enselme
Le PATH est par sécurité entièrement récrit dans @scripts-config.sh@ (on est certain que les commandes seront trouvées même si on ne les appelle pas avec leur chemin absolu). Le PATH contient alors les chemins vers les dossiers contenant les exécutales du système ainsi que les dossiers bin de assos.
130 21 Florent Torregrosa
131 78 Julien Enselme
La plupart des scripts ont besoin d’importer un des scripts de configuration. L’import se fait grâce à la commande @. SCRIPT@. Ces scripts doivent être importés explicitement. On réalise un test en début de script. Ce test permet de savoir si le script importé a besoin de l’import d’un autre script. Si ce n’est pas le cas, on affiche un message d’avertissement et on arrête l’exécution.
132 78 Julien Enselme
133 53 Julien Enselme
h2. Configuration et utilitaires
134 1 Julien Enselme
135 53 Julien Enselme
h3. scripts-config.sh
136 53 Julien Enselme
137 76 Julien Enselme
Ce script contient toutes les variables indispensables à l’exécution des autres scripts (adresse du serveur de la base de données, emplacement des sauvegardes,…). Ce script a été créé de façon a pouvoir rendre les scripts les plus indépendants possible de la configuration actuelle et de façon à pouvoir la modifier facilement sans avoir à réécrire les scripts et à les vérifier. *Ces variables doivent donc être utilisées dans les scripts.*
138 76 Julien Enselme
139 53 Julien Enselme
<pre>
140 53 Julien Enselme
<code class="php">
141 53 Julien Enselme
#!/bin/sh
142 53 Julien Enselme
143 53 Julien Enselme
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/games:/usr/local/sbin:/usr/local/bin:/users/guest/assos/bin
144 53 Julien Enselme
PATH=$PATH:/usr/guest/assos/bin
145 53 Julien Enselme
146 53 Julien Enselme
scripts_config='imported'
147 53 Julien Enselme
148 53 Julien Enselme
email_multi_assos="assos@centrale-marseille.fr"
149 53 Julien Enselme
150 53 Julien Enselme
dir_multi_assos='/users/guest/assos'
151 53 Julien Enselme
dir_scripts="$dir_multi_assos/bin"
152 53 Julien Enselme
dir_template="$dir_multi_assos/template"
153 53 Julien Enselme
154 53 Julien Enselme
###### Database
155 53 Julien Enselme
db_server="myassos.serv.int"
156 53 Julien Enselme
db_user="assos"
157 53 Julien Enselme
dir_log="$dir_multi_assos/log"
158 53 Julien Enselme
159 53 Julien Enselme
###### Backup
160 53 Julien Enselme
db_full_backup_number=3
161 63 Julien Enselme
db_individual_manual_backup_number=2
162 53 Julien Enselme
db_individual_auto_backup_number=3
163 53 Julien Enselme
164 53 Julien Enselme
dir_backup="$dir_multi_assos/backup"
165 53 Julien Enselme
dir_full_backup="$dir_backup/full"
166 53 Julien Enselme
dir_individual_backup="$dir_backup/individual"
167 1 Julien Enselme
dir_individual_manual_backup="$dir_individual_backup/manual"
168 1 Julien Enselme
dir_individual_auto_backup="$dir_individual_backup/auto"
169 1 Julien Enselme
170 1 Julien Enselme
171 1 Julien Enselme
###### D7 variables
172 1 Julien Enselme
d7_dir="$dir_multi_assos/htmltest"
173 1 Julien Enselme
d7_dir_sites="$d7_dir/sites"
174 1 Julien Enselme
175 1 Julien Enselme
### Log
176 1 Julien Enselme
d7_dir_log="$dir_log/d7"
177 1 Julien Enselme
178 1 Julien Enselme
### Backup
179 1 Julien Enselme
d7_dir_full_backup="$dir_full_backup/d7"
180 1 Julien Enselme
d7_dir_individual_manual_backup="$dir_individual_manual_backup/d7"
181 1 Julien Enselme
d7_dir_individual_auto_backup="$dir_individual_auto_backup/d7"
182 1 Julien Enselme
183 1 Julien Enselme
### Template
184 1 Julien Enselme
d7_settings_template_name="settings-D7-bddinde-template.php"
185 1 Julien Enselme
d7_settings_template="$dir_template/$d7_settings_template_name"
186 1 Julien Enselme
187 1 Julien Enselme
188 1 Julien Enselme
###### D6 variables
189 1 Julien Enselme
d6_dir="$dir_multi_assos/html"
190 1 Julien Enselme
d6_dir_sites="$d6_dir/sites"
191 1 Julien Enselme
192 1 Julien Enselme
### Backup
193 1 Julien Enselme
d6_dir_full_backup="$dir_full_backup/d6"
194 1 Julien Enselme
d6_dir_individual_manual_backup="$dir_individual_manual_backup/d6"
195 1 Julien Enselme
d6_dir_individual_auto_backup="$dir_individual_auto_backup/d6"
196 64 Julien Enselme
</code>
197 64 Julien Enselme
</pre>
198 64 Julien Enselme
199 64 Julien Enselme
h3. scripts-config-site.sh
200 64 Julien Enselme
201 77 Julien Enselme
Ce script est complémentaire du précédent. Il permet d’initialiser les variables spécifiques à un site. Il prend le nom du site en question comme argument. *Il doit être utilisé pour les mêmes raisons que le précédent*.
202 77 Julien Enselme
203 77 Julien Enselme
La commande @check_arguments@ n’est pas utilisée afin de ne pas avoir à importer @scripts-utils.sh@ et ainsi éviter des imports multiples.
204 77 Julien Enselme
205 64 Julien Enselme
<pre>
206 64 Julien Enselme
<code class="php">
207 64 Julien Enselme
#!/bin/sh
208 64 Julien Enselme
209 64 Julien Enselme
# Sets useful variables of a site.
210 64 Julien Enselme
# ARGS: site_name
211 64 Julien Enselme
# Requires scripts-config.sh
212 64 Julien Enselme
213 64 Julien Enselme
# Check if scripts-config.sh is imported.
214 64 Julien Enselme
if [ -z $scripts_config ] ; then
215 64 Julien Enselme
    echo "Import of scripts-config.sh required."
216 64 Julien Enselme
    exit 1
217 64 Julien Enselme
fi
218 64 Julien Enselme
219 64 Julien Enselme
if [ -z $1 ] ; then
220 64 Julien Enselme
    echo "This script needs a site name as argument."
221 64 Julien Enselme
    exit 1
222 64 Julien Enselme
fi
223 64 Julien Enselme
224 64 Julien Enselme
scripts_config_site='imported'
225 64 Julien Enselme
226 64 Julien Enselme
d7_site_name=$1
227 64 Julien Enselme
d7_site_dir="$d7_dir_sites/assos.centrale-marseille.fr.$d7_site_name"
228 64 Julien Enselme
d7_site_settings="$d7_site_dir/settings.php"
229 53 Julien Enselme
</code>
230 53 Julien Enselme
</pre>
231 53 Julien Enselme
232 53 Julien Enselme
h3. scripts-utils.sh
233 53 Julien Enselme
234 53 Julien Enselme
<pre>
235 53 Julien Enselme
<code class="php">
236 53 Julien Enselme
#!/bin/sh
237 53 Julien Enselme
238 53 Julien Enselme
# This script contains useful functions for other scripts.
239 53 Julien Enselme
240 53 Julien Enselme
# Check if scripts-config.sh is imported.
241 53 Julien Enselme
if [ -z $scripts_config ] ; then
242 53 Julien Enselme
    echo "Import of scripts-config.sh required."
243 58 Julien Enselme
    . scripts-config.sh
244 53 Julien Enselme
fi
245 53 Julien Enselme
246 53 Julien Enselme
scripts_utils='imported'
247 53 Julien Enselme
248 53 Julien Enselme
ask_password() {
249 53 Julien Enselme
    # read -s doesn't work with sh.
250 53 Julien Enselme
    # usage: pass=`ask_password "password please:"`
251 53 Julien Enselme
    echo $1 >&2
252 53 Julien Enselme
    echo -n ">" >&2
253 53 Julien Enselme
    stty_avant=`stty -g`
254 53 Julien Enselme
    stty -echo
255 53 Julien Enselme
    read password
256 53 Julien Enselme
    stty $stty_avant
257 53 Julien Enselme
    echo "$password"
258 53 Julien Enselme
    unset password
259 53 Julien Enselme
}
260 53 Julien Enselme
261 53 Julien Enselme
ask_password_db() {
262 53 Julien Enselme
    # ARGS: server_name, user_name
263 53 Julien Enselme
    local db_password="pour_boucler"
264 53 Julien Enselme
    # empty db request to validate password
265 53 Julien Enselme
    while ! mysql -h $1 -u $2 -p$db_password -e "" 2>/dev/null ; do
266 53 Julien Enselme
        db_password=`ask_password "database password:"`
267 53 Julien Enselme
    done
268 53 Julien Enselme
    echo $db_password
269 53 Julien Enselme
}
270 53 Julien Enselme
271 53 Julien Enselme
generate_password(){
272 53 Julien Enselme
    # ARGS: [password_length]
273 53 Julien Enselme
    # The password contains special characters. '/' must be excluded to avoid sed malfunction.
274 53 Julien Enselme
275 53 Julien Enselme
    local site_password='/'
276 53 Julien Enselme
277 53 Julien Enselme
    if [ -z $1 ] ; then
278 53 Julien Enselme
        local password_length=20
279 53 Julien Enselme
    else
280 53 Julien Enselme
        local password_length=$1
281 53 Julien Enselme
    fi
282 53 Julien Enselme
283 53 Julien Enselme
    while echo "$site_password" | grep -Fq '/' ; do
284 53 Julien Enselme
        site_password=`dd if=/dev/urandom count=1 | uuencode -m - | head -n 2 | tail -n 1 | cut -c-$password_length`
285 53 Julien Enselme
    done
286 53 Julien Enselme
287 53 Julien Enselme
    echo $site_password
288 53 Julien Enselme
}
289 53 Julien Enselme
290 53 Julien Enselme
count_d7_sites(){
291 53 Julien Enselme
    find $d7_dir_sites -type d ! -name all -maxdepth 1 | wc -l
292 53 Julien Enselme
}
293 53 Julien Enselme
294 53 Julien Enselme
check_arguments() {
295 65 Julien Enselme
    # ARGS: number of arguments passed to script, number of arguments required, [help text]
296 53 Julien Enselme
    if [ $1 -lt $2  ] ; then
297 1 Julien Enselme
        echo "Number of arguments insuffisant."
298 65 Julien Enselme
	echo $3
299 53 Julien Enselme
        exit 1
300 53 Julien Enselme
    fi
301 53 Julien Enselme
}
302 53 Julien Enselme
</code>
303 53 Julien Enselme
</pre>
304 53 Julien Enselme
305 53 Julien Enselme
h2. Scripts généraux
306 53 Julien Enselme
307 53 Julien Enselme
h3. all-reset-permissions.sh
308 53 Julien Enselme
309 53 Julien Enselme
<pre>
310 53 Julien Enselme
<code class="php">
311 53 Julien Enselme
#!/bin/sh
312 53 Julien Enselme
313 21 Florent Torregrosa
. scripts-config.sh
314 21 Florent Torregrosa
315 21 Florent Torregrosa
# This script puts the correct permissions to sites folders, settings.php and scripts.
316 21 Florent Torregrosa
317 21 Florent Torregrosa
######### drupal 6
318 21 Florent Torregrosa
for dir in `find $d6_dir_sites -type d -maxdepth 1 -mindepth 1 ! -name all ! -name images ! -name languages` ; do
319 21 Florent Torregrosa
    chmod 755 $dir
320 21 Florent Torregrosa
    chmod 400 $dir/settings.php
321 35 Florent Torregrosa
done
322 35 Florent Torregrosa
323 35 Florent Torregrosa
######### drupal 7
324 35 Florent Torregrosa
for dir in `find $d7_dir_sites -type d -maxdepth 1 -mindepth 1 ! -name all` ; do
325 35 Florent Torregrosa
    chmod 755 $dir
326 35 Florent Torregrosa
    chmod 400 $dir/settings.php
327 21 Florent Torregrosa
done
328 21 Florent Torregrosa
329 1 Julien Enselme
####### bin
330 21 Florent Torregrosa
chmod -R 700 $dir_scripts
331 21 Florent Torregrosa
332 21 Florent Torregrosa
####### backup
333 21 Florent Torregrosa
chmod -R 700 $dir_backup
334 21 Florent Torregrosa
335 21 Florent Torregrosa
####### log
336 21 Florent Torregrosa
chmod -R 700 $dir_log
337 21 Florent Torregrosa
</code>
338 1 Julien Enselme
</pre>
339 21 Florent Torregrosa
340 53 Julien Enselme
h3. contrib-usage.sh
341 29 Florent Torregrosa
342 21 Florent Torregrosa
<pre>
343 21 Florent Torregrosa
<code class="php">
344 21 Florent Torregrosa
#!/bin/sh
345 21 Florent Torregrosa
346 21 Florent Torregrosa
. scripts-config.sh
347 21 Florent Torregrosa
. scripts-utils.sh
348 21 Florent Torregrosa
349 66 Julien Enselme
help="# ARGS: Drupal_version, project_status, project_name\n
350 66 Julien Enselme
# List sites that have the project_name with the corresponding project_status.\n
351 66 Julien Enselme
# project status: enabled or disabled"
352 21 Florent Torregrosa
353 66 Julien Enselme
check_arguments $# 3 "$help"
354 21 Florent Torregrosa
355 21 Florent Torregrosa
if [ $1 = d6 ] ; then
356 21 Florent Torregrosa
    cd $d6_dir_sites
357 21 Florent Torregrosa
else
358 21 Florent Torregrosa
    cd $d7_dir_sites
359 21 Florent Torregrosa
fi
360 29 Florent Torregrosa
361 21 Florent Torregrosa
for dir in `find . -maxdepth 1 -mindepth 1 -type d ! -name all ! -name languages ! -name images | sort ` ; do
362 21 Florent Torregrosa
    # List non-core projects that correspond to the status.
363 21 Florent Torregrosa
    # Keep project_name if listed.
364 21 Florent Torregrosa
    # Count line result. 0 if not listed or 1 if listed.
365 1 Julien Enselme
	# Print site_dir if listed.
366 21 Florent Torregrosa
367 21 Florent Torregrosa
    cd $dir;
368 21 Florent Torregrosa
	if [ 1 -eq `drush pml --no-core --status=$2 | grep $3 | wc -l` ] ; then
369 21 Florent Torregrosa
        echo $dir; 
370 21 Florent Torregrosa
    fi
371 21 Florent Torregrosa
    cd -
372 21 Florent Torregrosa
done
373 1 Julien Enselme
</code>
374 21 Florent Torregrosa
</pre>
375 21 Florent Torregrosa
376 53 Julien Enselme
h3. delete-temporary-files.sh
377 21 Florent Torregrosa
378 41 Florent Torregrosa
<pre>
379 21 Florent Torregrosa
<code class="php">
380 1 Julien Enselme
#!/bin/sh
381 1 Julien Enselme
382 1 Julien Enselme
. scripts-config.sh
383 53 Julien Enselme
384 53 Julien Enselme
find $dir_multi_assos -name '*~' -delete
385 53 Julien Enselme
</code>
386 53 Julien Enselme
</pre>
387 53 Julien Enselme
388 53 Julien Enselme
h3. disk-usage.sh
389 53 Julien Enselme
390 53 Julien Enselme
<pre>
391 53 Julien Enselme
<code class="php">
392 53 Julien Enselme
#!/bin/sh
393 53 Julien Enselme
394 53 Julien Enselme
. scripts-config.sh
395 53 Julien Enselme
396 53 Julien Enselme
echo -e "Quotas: 9.1 GB\n"
397 53 Julien Enselme
398 53 Julien Enselme
echo "Assos:"
399 53 Julien Enselme
du -hcs $dir_multi_assos | grep total
400 53 Julien Enselme
echo -e "\n"
401 53 Julien Enselme
402 53 Julien Enselme
echo "D6:"
403 53 Julien Enselme
cd $d6_dir_sites
404 53 Julien Enselme
du -h -d 1
405 53 Julien Enselme
echo -e "\n"
406 53 Julien Enselme
407 53 Julien Enselme
echo "D7:"
408 53 Julien Enselme
cd $d7_dir_sites
409 53 Julien Enselme
du -h -d 1
410 53 Julien Enselme
echo -e "\n"
411 53 Julien Enselme
412 53 Julien Enselme
echo "Logs:"
413 53 Julien Enselme
du -hcs $dir_log | grep total
414 53 Julien Enselme
echo -e "\n"
415 53 Julien Enselme
416 53 Julien Enselme
echo "Backups:"
417 53 Julien Enselme
cd $dir_backup
418 53 Julien Enselme
du -h -d 2
419 53 Julien Enselme
</code>
420 53 Julien Enselme
</pre>
421 53 Julien Enselme
422 53 Julien Enselme
h3. drushcronone
423 53 Julien Enselme
424 53 Julien Enselme
<pre>
425 53 Julien Enselme
<code class="php">
426 53 Julien Enselme
#!/bin/sh
427 53 Julien Enselme
428 53 Julien Enselme
. scripts-config.sh
429 53 Julien Enselme
430 53 Julien Enselme
if [ $# -lt 1 ]; then
431 53 Julien Enselme
  echo "usage: $0 <site's folder name>"
432 53 Julien Enselme
  exit 1
433 53 Julien Enselme
fi
434 53 Julien Enselme
435 53 Julien Enselme
cd "$d6_sites_dir/$*"
436 53 Julien Enselme
pwd;
437 53 Julien Enselme
drush cron;
438 53 Julien Enselme
</code>
439 53 Julien Enselme
</pre>
440 53 Julien Enselme
441 53 Julien Enselme
h3. flush-files.sh
442 53 Julien Enselme
443 53 Julien Enselme
<pre>
444 53 Julien Enselme
<code class="php">
445 53 Julien Enselme
#!/bin/sh
446 53 Julien Enselme
447 66 Julien Enselme
help="# ARGS: number of files to keep, [email address]\n
448 66 Julien Enselme
# usage: flush files from a folder except a number equal to argument."
449 53 Julien Enselme
450 53 Julien Enselme
# Check if scripts-config.sh is imported.
451 53 Julien Enselme
if [ -z $scripts_utils ] ; then
452 53 Julien Enselme
    echo "Import of scripts-utils.sh required."
453 57 Julien Enselme
    . scripts-utils.sh
454 53 Julien Enselme
fi
455 53 Julien Enselme
456 66 Julien Enselme
check_arguments $# 1 "$help"
457 53 Julien Enselme
458 53 Julien Enselme
backups_number=`ls | wc -l`
459 60 Julien Enselme
let "number_of_backups_to_delete = backups_number - $1" > /dev/null
460 53 Julien Enselme
461 1 Julien Enselme
if [ $number_of_backups_to_delete -gt 0 ] ; then
462 1 Julien Enselme
    ls | head -$number_of_backups_to_delete | xargs rm
463 53 Julien Enselme
else
464 60 Julien Enselme
    if [ ! -z $2 ] ; then
465 60 Julien Enselme
        dir=`pwd`
466 60 Julien Enselme
        echo "There are not enough files in $dir to Flush it. Check if backup script works fine." | mail -s "[db] $dir has a backup problem" $2
467 60 Julien Enselme
    fi
468 53 Julien Enselme
fi
469 53 Julien Enselme
</code>
470 53 Julien Enselme
</pre>
471 53 Julien Enselme
472 53 Julien Enselme
h3. flush-full-databases-backups.sh
473 53 Julien Enselme
474 53 Julien Enselme
<pre>
475 53 Julien Enselme
<code class="php">
476 53 Julien Enselme
#!/bin/sh
477 53 Julien Enselme
478 53 Julien Enselme
. scripts-config.sh
479 53 Julien Enselme
480 53 Julien Enselme
# ARGS: Drupal version
481 53 Julien Enselme
482 53 Julien Enselme
cd $dir_full_backup/$1
483 53 Julien Enselme
484 53 Julien Enselme
for dir in `ls` ; do
485 53 Julien Enselme
    cd $dir
486 53 Julien Enselme
    flush-files.sh $db_full_backup_number $email_multi_assos
487 53 Julien Enselme
    cd -
488 53 Julien Enselme
done
489 53 Julien Enselme
</code>
490 53 Julien Enselme
</pre>
491 53 Julien Enselme
492 53 Julien Enselme
h3. flush-individual-databases-backups.sh
493 53 Julien Enselme
494 53 Julien Enselme
<pre>
495 53 Julien Enselme
<code class="php">
496 53 Julien Enselme
#!/bin/sh
497 53 Julien Enselme
498 53 Julien Enselme
. scripts-config.sh
499 53 Julien Enselme
500 53 Julien Enselme
# ARGS: manual or auto, Drupal version
501 53 Julien Enselme
502 53 Julien Enselme
cd $dir_individual_backup/$1/$2
503 53 Julien Enselme
504 53 Julien Enselme
for dir in `ls` ; do
505 53 Julien Enselme
    cd $dir
506 53 Julien Enselme
    if [ $1 = 'auto' ] ; then
507 53 Julien Enselme
        flush-files.sh $db_individual_auto_backup_number $email_multi_assos
508 53 Julien Enselme
    else
509 61 Julien Enselme
        flush-files.sh $db_individual_manual_backup_number
510 53 Julien Enselme
    fi
511 53 Julien Enselme
    cd -
512 53 Julien Enselme
done
513 53 Julien Enselme
</code>
514 53 Julien Enselme
</pre>
515 53 Julien Enselme
516 53 Julien Enselme
h2. Scripts Drupal 6
517 53 Julien Enselme
518 53 Julien Enselme
h3. d6-all-drush.sh
519 53 Julien Enselme
520 53 Julien Enselme
<pre>
521 53 Julien Enselme
<code class="php">
522 53 Julien Enselme
#!/bin/sh
523 53 Julien Enselme
524 53 Julien Enselme
. scripts-config.sh
525 21 Florent Torregrosa
. scripts-utils.sh
526 21 Florent Torregrosa
527 66 Julien Enselme
help="# ARGS: drush_command"
528 21 Florent Torregrosa
529 66 Julien Enselme
check_arguments $# 1 "$help"
530 21 Florent Torregrosa
531 21 Florent Torregrosa
for dir in `find $d6_dir_sites -maxdepth 1 -mindepth 1 -type d ! -name all ! -name languages ! -name images | sort` ; do
532 21 Florent Torregrosa
    cd $dir
533 21 Florent Torregrosa
    echo $dir
534 21 Florent Torregrosa
    drush $*
535 1 Julien Enselme
done
536 21 Florent Torregrosa
</code>
537 45 Florent Torregrosa
</pre>
538 21 Florent Torregrosa
539 53 Julien Enselme
h3. d6-all-dump-full.sh
540 45 Florent Torregrosa
541 37 Florent Torregrosa
<pre>
542 37 Florent Torregrosa
<code class="php">
543 37 Florent Torregrosa
#!/bin/sh
544 37 Florent Torregrosa
545 37 Florent Torregrosa
. scripts-config.sh
546 37 Florent Torregrosa
547 37 Florent Torregrosa
current_date=`date "+%Y-%m-%d-%Hh%Mm%Ss"`
548 37 Florent Torregrosa
549 37 Florent Torregrosa
# Dump D6 database with webassos user.
550 37 Florent Torregrosa
mysqldump --single-transaction webassos -h myweb.serv.int -u webassos --password=password > $d6_dir_full_backup/webassos/$current_date.webassos.sql
551 41 Florent Torregrosa
552 1 Julien Enselme
# Dump D6 form database with forum user.
553 37 Florent Torregrosa
mysqldump forum -h myweb.serv.int -u forum --password=password > $d6_dir_full_backup/forum/$current_date.forum.sql
554 37 Florent Torregrosa
</code>
555 39 Florent Torregrosa
</pre>
556 1 Julien Enselme
557 53 Julien Enselme
h3. d6-all-reset-variables.sh
558 21 Florent Torregrosa
559 21 Florent Torregrosa
<pre>
560 21 Florent Torregrosa
<code class="php">
561 21 Florent Torregrosa
#!/bin/sh
562 21 Florent Torregrosa
563 21 Florent Torregrosa
. scripts-config.sh
564 21 Florent Torregrosa
565 21 Florent Torregrosa
cd $d6_dir_sites
566 1 Julien Enselme
d6-all-drush.sh vset --always-set reverse_proxy TRUE
567 21 Florent Torregrosa
d6-all-drush.sh vset --always-set --format=json reverse_proxy_addresses '["147.94.19.16","147.94.19.17"]'
568 21 Florent Torregrosa
drush @sites -y ev "variable_set('update_notify_emails', array('@email_multi_assos'));"
569 21 Florent Torregrosa
</code>
570 21 Florent Torregrosa
</pre>
571 21 Florent Torregrosa
572 53 Julien Enselme
h3. d6-all-update-contrib.sh
573 21 Florent Torregrosa
574 21 Florent Torregrosa
<pre>
575 21 Florent Torregrosa
<code class="php">
576 21 Florent Torregrosa
#!/bin/sh
577 21 Florent Torregrosa
578 21 Florent Torregrosa
. scripts-config.sh
579 21 Florent Torregrosa
580 21 Florent Torregrosa
d6-all-drush.sh -y en update
581 1 Julien Enselme
# Launch cron to check for updates.
582 21 Florent Torregrosa
d6-all-drush.sh -q cron
583 21 Florent Torregrosa
584 21 Florent Torregrosa
d6-all-drush.sh cc all
585 21 Florent Torregrosa
d6-all-dump-full.sh
586 21 Florent Torregrosa
587 21 Florent Torregrosa
d6-all-drush.sh -y upc --no-core
588 1 Julien Enselme
d6-all-drush.sh -y updb
589 1 Julien Enselme
590 1 Julien Enselme
d6-all-drush.sh -y dis update
591 1 Julien Enselme
592 1 Julien Enselme
d6-all-drush.sh cron
593 1 Julien Enselme
</code>
594 1 Julien Enselme
</pre>
595 41 Florent Torregrosa
596 53 Julien Enselme
h3. d6-dump-individual.sh
597 41 Florent Torregrosa
598 41 Florent Torregrosa
<pre>
599 41 Florent Torregrosa
<code class="php">
600 41 Florent Torregrosa
#!/bin/sh
601 41 Florent Torregrosa
602 41 Florent Torregrosa
. scripts-config.sh
603 21 Florent Torregrosa
604 21 Florent Torregrosa
# ARGS: auto or manual, site_prefix
605 21 Florent Torregrosa
# WARNING : backup are regularly flushed, put your backup in a safe place.
606 21 Florent Torregrosa
607 21 Florent Torregrosa
cd $dir_individual_backup
608 1 Julien Enselme
609 1 Julien Enselme
#!/bin/sh
610 1 Julien Enselme
611 1 Julien Enselme
. scripts-config.sh
612 21 Florent Torregrosa
613 1 Julien Enselme
# ARGS: auto or manual, site_prefix
614 21 Florent Torregrosa
# WARNING : backup are regularly flushed, put your backup in a safe place.
615 21 Florent Torregrosa
616 21 Florent Torregrosa
cd $dir_individual_backup
617 21 Florent Torregrosa
618 41 Florent Torregrosa
#récupération des tables du site dans le fichier liste_tables.temp
619 41 Florent Torregrosa
tables='_%'
620 41 Florent Torregrosa
liste="$1$tables"
621 41 Florent Torregrosa
622 21 Florent Torregrosa
mysql -h myweb.serv.int -u webassos --password=HBVH2ljgyZCA0AP251DY -BNe "show tables like '"$liste"'" webassos | tr '\r\n' ' ' > liste_tables.temp
623 21 Florent Torregrosa
624 21 Florent Torregrosa
#transformation de cette liste en une variable
625 21 Florent Torregrosa
var=$(cat liste_tables.temp)
626 21 Florent Torregrosa
627 1 Julien Enselme
#sauvegarde de toutes ces tables
628 21 Florent Torregrosa
current_date=`date "+%Y-%m-%d-%Hh%Mm%Ss"`
629 21 Florent Torregrosa
suffixe="_dump$current_date.sql"
630 21 Florent Torregrosa
fichier="$1$suffixe"
631 21 Florent Torregrosa
632 1 Julien Enselme
if [ $1 = 'auto' ] ; then
633 21 Florent Torregrosa
    mysqldump webassos -h myweb.serv.int -u webassos --password=HBVH2ljgyZCA0AP251DY $var > $d6_dir_individual_auto_backup/$fichier
634 21 Florent Torregrosa
else
635 1 Julien Enselme
    mysqldump webassos -h myweb.serv.int -u webassos --password=HBVH2ljgyZCA0AP251DY $var > $d6_dir_individual_manual_backup/$fichier
636 21 Florent Torregrosa
fi
637 1 Julien Enselme
638 1 Julien Enselme
#suppression du fichier temporaire utilisé
639 21 Florent Torregrosa
rm liste_tables.temp
640 21 Florent Torregrosa
</code>
641 21 Florent Torregrosa
</pre>
642 21 Florent Torregrosa
643 53 Julien Enselme
h2. Scripts Drupal 7
644 30 Florent Torregrosa
645 53 Julien Enselme
h3. d7-all-drush-logged.sh
646 53 Julien Enselme
647 1 Julien Enselme
<pre>
648 30 Florent Torregrosa
<code class="php">
649 30 Florent Torregrosa
#!/bin/sh
650 30 Florent Torregrosa
651 21 Florent Torregrosa
. scripts-config.sh
652 30 Florent Torregrosa
. scripts-utils.sh
653 30 Florent Torregrosa
654 66 Julien Enselme
help="# ARGS: drush_command"
655 21 Florent Torregrosa
656 66 Julien Enselme
check_arguments $# 1 "$help"
657 1 Julien Enselme
658 21 Florent Torregrosa
cd $d7_dir_sites
659 1 Julien Enselme
660 21 Florent Torregrosa
for dir in `find . -maxdepth 1 -mindepth 1 -type d ! -name all | sort` ; do
661 21 Florent Torregrosa
    cd $dir
662 21 Florent Torregrosa
    current_date=`date "+%Y-%m-%d_%Hh:%Mm"`
663 21 Florent Torregrosa
    echo "======$current_date======" >> $d7_dir_log/$dir.log
664 1 Julien Enselme
    echo "Arguments are: $* " >> $d7_dir_log/$dir.log
665 21 Florent Torregrosa
    drush $* >> $d7_dir_log/$dir.log
666 21 Florent Torregrosa
    #To have the same caracters limit we needed 'end' that have 4 caracters, we used the Croate language for this ! LOL 
667 21 Florent Torregrosa
    echo -e "=============KRAJ=============\n" >> $d7_dir_log/$dir.log
668 21 Florent Torregrosa
    cd -
669 21 Florent Torregrosa
done
670 21 Florent Torregrosa
</code>
671 21 Florent Torregrosa
</pre>
672 41 Florent Torregrosa
673 53 Julien Enselme
h3. d7-all-drush.sh
674 21 Florent Torregrosa
675 21 Florent Torregrosa
<pre>
676 21 Florent Torregrosa
<code class="php">
677 21 Florent Torregrosa
#!/bin/sh
678 21 Florent Torregrosa
679 21 Florent Torregrosa
. scripts-config.sh
680 1 Julien Enselme
. scripts-utils.sh
681 21 Florent Torregrosa
682 66 Julien Enselme
help="# ARGS: drush_command"
683 21 Florent Torregrosa
684 66 Julien Enselme
check_arguments $# 1 "$help"
685 21 Florent Torregrosa
686 21 Florent Torregrosa
for dir in `find $d7_dir_sites -maxdepth 1 -mindepth 1 -type d ! -name all | sort` ; do
687 21 Florent Torregrosa
    cd $dir
688 21 Florent Torregrosa
    echo $dir
689 21 Florent Torregrosa
    drush $*
690 21 Florent Torregrosa
done
691 21 Florent Torregrosa
</code>
692 21 Florent Torregrosa
</pre>
693 21 Florent Torregrosa
694 53 Julien Enselme
h3. d7-all-dump-full.sh
695 21 Florent Torregrosa
696 45 Florent Torregrosa
<pre>
697 21 Florent Torregrosa
<code class="php">
698 1 Julien Enselme
#!/bin/sh
699 21 Florent Torregrosa
700 21 Florent Torregrosa
. scripts-config.sh
701 21 Florent Torregrosa
702 21 Florent Torregrosa
current_date=`date "+%Y-%m-%d-%Hh%Mm%Ss"`
703 21 Florent Torregrosa
704 21 Florent Torregrosa
# Dump D7 databases at once.
705 21 Florent Torregrosa
mysqldump -h $db_server -u $db_user -ppassword --all-databases > $d7_dir_full_backup/myassos/$current_date.d7_full.sql
706 41 Florent Torregrosa
</code>
707 41 Florent Torregrosa
</pre>
708 41 Florent Torregrosa
709 53 Julien Enselme
h3. d7-all-dump-individual.sh
710 21 Florent Torregrosa
711 21 Florent Torregrosa
<pre>
712 41 Florent Torregrosa
<code class="php">
713 41 Florent Torregrosa
#!/bin/sh
714 41 Florent Torregrosa
715 21 Florent Torregrosa
. scripts-config.sh
716 62 Julien Enselme
. scripts-utils.sh
717 21 Florent Torregrosa
718 66 Julien Enselme
help="# ARGS: auto or manual"
719 1 Julien Enselme
720 66 Julien Enselme
check_arguments $# 1 "$help"
721 21 Florent Torregrosa
722 21 Florent Torregrosa
current_date=`date "+%Y-%m-%d-%Hh%Mm%Ss"`
723 21 Florent Torregrosa
724 21 Florent Torregrosa
cd $d7_dir_sites
725 21 Florent Torregrosa
726 21 Florent Torregrosa
for dir in `find . -maxdepth 1 -mindepth 1 -type d ! -name all | cut -c3-` ; do
727 1 Julien Enselme
    cd $dir
728 21 Florent Torregrosa
    drush cc all
729 21 Florent Torregrosa
    if [ $1 = 'auto' ] ; then
730 21 Florent Torregrosa
        drush sql-dump --result-file="$d7_dir_individual_auto_backup/$dir/$current_date.$dir.sql"
731 21 Florent Torregrosa
    else
732 1 Julien Enselme
        drush sql-dump --result-file="$d7_dir_individual_manual_backup/$dir/$current_date.$dir.sql"
733 21 Florent Torregrosa
    fi
734 21 Florent Torregrosa
    cd -
735 21 Florent Torregrosa
done
736 21 Florent Torregrosa
</code>
737 21 Florent Torregrosa
</pre>
738 21 Florent Torregrosa
739 53 Julien Enselme
h3. d7-all-releases-info.sh
740 21 Florent Torregrosa
741 21 Florent Torregrosa
<pre>
742 21 Florent Torregrosa
<code class="php">
743 21 Florent Torregrosa
#!/bin/sh
744 1 Julien Enselme
745 1 Julien Enselme
. scripts-config.sh
746 1 Julien Enselme
747 1 Julien Enselme
# List version of a module or theme that exists in sites/all/*
748 1 Julien Enselme
# and all versions that are available for same project on drupal.org
749 1 Julien Enselme
750 1 Julien Enselme
# modules
751 1 Julien Enselme
cd $d7_dir_sites/all/modules
752 1 Julien Enselme
for dir in `ls -1` ; do
753 1 Julien Enselme
    if [ -d $dir ] ; then
754 1 Julien Enselme
        drush pm-releases $dir
755 1 Julien Enselme
    fi
756 1 Julien Enselme
done
757 1 Julien Enselme
758 1 Julien Enselme
# themes
759 1 Julien Enselme
cd $d7_dir_sites/all/themes
760 1 Julien Enselme
for dir in `ls -1` ; do
761 1 Julien Enselme
    if [ -d $dir ] ; then
762 1 Julien Enselme
        drush pm-releases $dir
763 1 Julien Enselme
    fi
764 21 Florent Torregrosa
done
765 21 Florent Torregrosa
</code>
766 21 Florent Torregrosa
</pre>
767 41 Florent Torregrosa
768 53 Julien Enselme
h3. d7-all-reset-variables.sh
769 41 Florent Torregrosa
770 1 Julien Enselme
<pre>
771 41 Florent Torregrosa
<code class="php">
772 41 Florent Torregrosa
#!/bin/sh
773 41 Florent Torregrosa
774 41 Florent Torregrosa
. scripts-config.sh
775 41 Florent Torregrosa
776 41 Florent Torregrosa
for dir in `find $d7_dir_sites -maxdepth 1 -mindepth 1 -type d ! -name all | sort` ; do
777 41 Florent Torregrosa
    cd $dir
778 41 Florent Torregrosa
    echo $dir
779 41 Florent Torregrosa
    d7-reset-variables.sh
780 41 Florent Torregrosa
done
781 41 Florent Torregrosa
</code>
782 1 Julien Enselme
</pre>
783 41 Florent Torregrosa
784 53 Julien Enselme
h3. d7-all-security-review.sh
785 41 Florent Torregrosa
786 41 Florent Torregrosa
<pre>
787 41 Florent Torregrosa
<code class="php">
788 1 Julien Enselme
#!/bin/sh
789 21 Florent Torregrosa
790 21 Florent Torregrosa
. scripts-config.sh
791 21 Florent Torregrosa
792 21 Florent Torregrosa
# grep -v success to keep site_name and error lines.
793 59 Florent Torregrosa
bash -c "d7-all-drush.sh security-review --store |& grep -v success | mail -s d7-all-security-review.sh $email_multi_assos"
794 21 Florent Torregrosa
</code>
795 21 Florent Torregrosa
</pre>
796 21 Florent Torregrosa
797 53 Julien Enselme
h3. d7-all-update-contrib.sh
798 21 Florent Torregrosa
799 21 Florent Torregrosa
<pre>
800 21 Florent Torregrosa
<code class="php">
801 21 Florent Torregrosa
#!/bin/sh
802 21 Florent Torregrosa
803 21 Florent Torregrosa
. scripts-config.sh
804 1 Julien Enselme
805 21 Florent Torregrosa
d7-all-drush.sh -y en update
806 21 Florent Torregrosa
# Launch cron to check for updates.
807 21 Florent Torregrosa
d7-all-drush.sh -q cron
808 21 Florent Torregrosa
809 21 Florent Torregrosa
d7-all-dump-individual.sh auto
810 21 Florent Torregrosa
811 1 Julien Enselme
d7-all-drush-logged.sh -y upc --no-core
812 21 Florent Torregrosa
d7-all-drush.sh -y updb
813 21 Florent Torregrosa
814 21 Florent Torregrosa
d7-all-drush.sh -y dis update
815 21 Florent Torregrosa
816 21 Florent Torregrosa
d7-all-drush.sh cron
817 21 Florent Torregrosa
</code>
818 1 Julien Enselme
</pre>
819 21 Florent Torregrosa
820 53 Julien Enselme
h3. d7-all-update-localisation.sh
821 21 Florent Torregrosa
822 21 Florent Torregrosa
<pre>
823 21 Florent Torregrosa
<code class="php">
824 21 Florent Torregrosa
#!/bin/sh
825 21 Florent Torregrosa
826 21 Florent Torregrosa
. scripts-config.sh
827 21 Florent Torregrosa
828 21 Florent Torregrosa
d7-all-drush.sh -y en l10n_update
829 21 Florent Torregrosa
d7-all-drush.sh l10n-update-refresh
830 21 Florent Torregrosa
d7-all-drush.sh l10n-update
831 21 Florent Torregrosa
d7-all-drush.sh -y dis l10n_update
832 21 Florent Torregrosa
</code>
833 21 Florent Torregrosa
</pre>
834 41 Florent Torregrosa
835 53 Julien Enselme
h3. d7-create-site.sh
836 1 Julien Enselme
837 21 Florent Torregrosa
<pre>
838 21 Florent Torregrosa
<code class="php">
839 21 Florent Torregrosa
#!/bin/sh
840 1 Julien Enselme
841 21 Florent Torregrosa
. scripts-config.sh
842 21 Florent Torregrosa
. scripts-config-site.sh $1
843 21 Florent Torregrosa
. scripts-utils.sh
844 21 Florent Torregrosa
845 66 Julien Enselme
help="# ARGS: site name"
846 21 Florent Torregrosa
847 21 Florent Torregrosa
######## Exceptions
848 66 Julien Enselme
check_arguments $# 1 "$help"
849 21 Florent Torregrosa
850 21 Florent Torregrosa
# "-" is forbidden because it provokes database error.
851 21 Florent Torregrosa
if [ `echo $1 | grep -` ] ; then
852 21 Florent Torregrosa
    echo '"-" is forbidden in the site name'
853 21 Florent Torregrosa
    exit 1
854 21 Florent Torregrosa
fi
855 21 Florent Torregrosa
856 21 Florent Torregrosa
# Site name length must be lower or equal to 16 due to database limitations.
857 21 Florent Torregrosa
if [`echo $1 | wc -c` -gt 16 ] ; then
858 41 Florent Torregrosa
    echo "site name can't have more than 16 characters"
859 21 Florent Torregrosa
    exit 1
860 21 Florent Torregrosa
fi
861 21 Florent Torregrosa
862 1 Julien Enselme
###### Initialisation
863 21 Florent Torregrosa
cd $d7_dir
864 21 Florent Torregrosa
db_password=`ask_password_db $db_server $db_user`
865 21 Florent Torregrosa
site_password=`generate_password`
866 21 Florent Torregrosa
867 21 Florent Torregrosa
# Check if site database already exists.
868 21 Florent Torregrosa
if mysql -h $db_server -u $db_user -e "USE $d7_site_name" -p$db_password 2>/dev/null ; then
869 21 Florent Torregrosa
    echo "Database $d7_site_name already exists"
870 21 Florent Torregrosa
    exit 1
871 21 Florent Torregrosa
fi
872 21 Florent Torregrosa
873 21 Florent Torregrosa
# Check if site folder already exists.
874 21 Florent Torregrosa
if [ -d $d7_site_dir ] ; then
875 21 Florent Torregrosa
    echo "Folder $d7_site_dir already exists"
876 21 Florent Torregrosa
    exit 1
877 21 Florent Torregrosa
fi
878 21 Florent Torregrosa
879 21 Florent Torregrosa
###### Main
880 21 Florent Torregrosa
mkdir $d7_site_dir
881 21 Florent Torregrosa
dir_site_name="assos.centrale-marseille.fr.$d7_site_name"
882 21 Florent Torregrosa
883 21 Florent Torregrosa
# Backup requirements
884 1 Julien Enselme
mkdir $d7_dir_individual_auto_backup/$dir_site_name
885 21 Florent Torregrosa
mkdir $d7_dir_individual_manual_backup/$dir_site_name
886 21 Florent Torregrosa
current_date=`date "+%Y-%m-%d-%Hh%Mm%Ss"`
887 21 Florent Torregrosa
888 21 Florent Torregrosa
# NB : ls sort by considering the 1st characters
889 21 Florent Torregrosa
touch $d7_dir_individual_auto_backup/$dir_site_name/$current_date.$dir_site_name.sql
890 21 Florent Torregrosa
touch $d7_dir_individual_auto_backup/$dir_site_name/$current_date.$dir_site_name.sql2
891 21 Florent Torregrosa
touch $d7_dir_individual_auto_backup/$dir_site_name/$current_date.$dir_site_name.sql3
892 1 Julien Enselme
893 21 Florent Torregrosa
# Create and grant privileges on database
894 21 Florent Torregrosa
mysql -h $db_server -u $db_user -e "CREATE DATABASE $d7_site_name" -p$db_password
895 21 Florent Torregrosa
mysql -h $db_server -u $db_user -e "GRANT ALL PRIVILEGES ON $d7_site_name.* TO '$d7_site_name'@'%' IDENTIFIED BY '$site_password'" -p$db_password
896 21 Florent Torregrosa
897 21 Florent Torregrosa
# Create settings.php
898 21 Florent Torregrosa
sed "s/\%\%DBUSER\%\%/$d7_site_name/ ; s/\%\%DBNAME\%\%/$d7_site_name/ ; s/\%\%DBPASS\%\%/$site_password/ ; s/\%\%nomsite\%\%/$d7_site_name/" < $d7_settings_template > $d7_site_settings
899 21 Florent Torregrosa
900 21 Florent Torregrosa
# Create symbolic link
901 21 Florent Torregrosa
cd $d7_dir
902 21 Florent Torregrosa
ln -s . $d7_site_name
903 21 Florent Torregrosa
904 21 Florent Torregrosa
# Next Instructions
905 21 Florent Torregrosa
echo "Go to http://assos.centrale-marseille.fr/$d7_site_name/install.php to continue."
906 21 Florent Torregrosa
echo "Press enter when ready to go on."
907 1 Julien Enselme
read key
908 41 Florent Torregrosa
909 21 Florent Torregrosa
# Init variables
910 21 Florent Torregrosa
d7-reset-variables.sh $d7_site_name
911 21 Florent Torregrosa
912 21 Florent Torregrosa
# Permissions
913 21 Florent Torregrosa
chmod -R 755 $d7_site_dir
914 21 Florent Torregrosa
chmod 400 $d7_site_settings
915 21 Florent Torregrosa
916 21 Florent Torregrosa
# Last instructions
917 21 Florent Torregrosa
echo "Last instructions:"
918 21 Florent Torregrosa
echo "- Advice the webmaster to close account creation on the website"
919 21 Florent Torregrosa
echo "- Give the webmaster a link to the club Drupal's tutorials "
920 21 Florent Torregrosa
echo "- Create a node of type \"Site\" on default"
921 21 Florent Torregrosa
echo "- Register the webmaster on webmasters@listes.centrale-marseille.fr"
922 21 Florent Torregrosa
</code>
923 21 Florent Torregrosa
</pre>
924 21 Florent Torregrosa
925 53 Julien Enselme
h3. d7-delete-site.sh
926 21 Florent Torregrosa
927 21 Florent Torregrosa
<pre>
928 21 Florent Torregrosa
<code class="php">
929 21 Florent Torregrosa
#!/bin/sh
930 21 Florent Torregrosa
931 21 Florent Torregrosa
. scripts-config.sh
932 21 Florent Torregrosa
. scripts-config-site.sh $1
933 21 Florent Torregrosa
. scripts-utils.sh
934 21 Florent Torregrosa
935 66 Julien Enselme
help="# ARGS: site name."
936 21 Florent Torregrosa
937 66 Julien Enselme
check_arguments $# 1 "$help"
938 21 Florent Torregrosa
939 21 Florent Torregrosa
db_password=`ask_password_db $db_server $db_user`
940 21 Florent Torregrosa
941 21 Florent Torregrosa
# Delete database.
942 21 Florent Torregrosa
mysql -h $db_server -u $db_user -p$db_password -e "DROP DATABASE $d7_site_name"
943 21 Florent Torregrosa
944 21 Florent Torregrosa
# Delete MYSQL user.
945 1 Julien Enselme
mysql -h $db_server -u $db_user -p$db_password -e "DROP USER '$d7_site_name'@'%'"
946 21 Florent Torregrosa
947 21 Florent Torregrosa
# Delete site's folder.
948 21 Florent Torregrosa
chmod -R 700 $d7_site_dir
949 21 Florent Torregrosa
rm -r $d7_site_dir
950 21 Florent Torregrosa
951 1 Julien Enselme
# Delete symbolic link.
952 21 Florent Torregrosa
rm $d7_dir/$d7_site_name
953 21 Florent Torregrosa
954 21 Florent Torregrosa
# Delete database backups.
955 1 Julien Enselme
rm -r $d7_dir_individual_auto_backup/assos.centrale-marseille.fr.$d7_site_name
956 1 Julien Enselme
rm -r $d7_dir_individual_manual_backup/assos.centrale-marseille.fr.$d7_site_name
957 21 Florent Torregrosa
958 21 Florent Torregrosa
echo "Don't forget to:"
959 21 Florent Torregrosa
echo "- Refresh node site on default"
960 21 Florent Torregrosa
echo "- Check particular behavior (normally detailed on site node)"
961 21 Florent Torregrosa
</code>
962 21 Florent Torregrosa
</pre>
963 21 Florent Torregrosa
964 53 Julien Enselme
h3. d7-reset-variables.sh
965 1 Julien Enselme
966 21 Florent Torregrosa
<pre>
967 21 Florent Torregrosa
<code class="php">
968 21 Florent Torregrosa
#!/bin/sh
969 21 Florent Torregrosa
970 21 Florent Torregrosa
. scripts-config.sh
971 21 Florent Torregrosa
972 21 Florent Torregrosa
# ARGS: [site_name]
973 21 Florent Torregrosa
974 21 Florent Torregrosa
if [ ! -z $1 ] ; then
975 21 Florent Torregrosa
    . scripts-config-site.sh $1
976 21 Florent Torregrosa
    cd $d7_site_dir
977 21 Florent Torregrosa
fi
978 1 Julien Enselme
979 41 Florent Torregrosa
current_timestamp=`date "+%s"`
980 21 Florent Torregrosa
981 41 Florent Torregrosa
random_1=`dd if=/dev/urandom count=1 2> /dev/null | cksum | cut -f1 -d" "`
982 41 Florent Torregrosa
random_2=`dd if=/dev/urandom count=1 2> /dev/null | cksum | cut -f1 -d" "`
983 21 Florent Torregrosa
984 21 Florent Torregrosa
####### General variables
985 21 Florent Torregrosa
drush -y vset --always-set reverse_proxy TRUE
986 21 Florent Torregrosa
drush -y vset --always-set --format=json reverse_proxy_addresses '["147.94.19.16","147.94.19.17"]'
987 21 Florent Torregrosa
drush -y ev "variable_set('update_notify_emails', array('@email_multi_assos'));"
988 21 Florent Torregrosa
drush -y vset error_level 0
989 21 Florent Torregrosa
drush -y vset dblog_row_limit 1000
990 21 Florent Torregrosa
991 1 Julien Enselme
###### Hidden captcha
992 41 Florent Torregrosa
drush -y en hidden_captcha
993 21 Florent Torregrosa
# Log wrong answers.
994 21 Florent Torregrosa
drush -y vset captcha_log_wrong_responses 1
995 21 Florent Torregrosa
# Use hidden captcha for all forms.
996 21 Florent Torregrosa
drush -y sqlq --db-prefix "UPDATE {captcha_points} SET module = 'hidden_captcha', captcha_type = 'Hidden CAPTCHA' WHERE module is NULL;"
997 21 Florent Torregrosa
# Flush captcha cache.
998 21 Florent Torregrosa
drush -y vdel captcha_placement_map_cache
999 21 Florent Torregrosa
# Randomely generate a math question as the label of the hidden captcha field.
1000 21 Florent Torregrosa
drush -y vset hidden_captcha_label "$random_1 + $random_2"
1001 21 Florent Torregrosa
1002 21 Florent Torregrosa
1003 21 Florent Torregrosa
####### Piwik
1004 21 Florent Torregrosa
drush -y en piwik
1005 21 Florent Torregrosa
drush -y vset piwik_site_id "101"
1006 41 Florent Torregrosa
drush -y vset piwik_url_http "http://piwik.centrale-marseille.fr/"
1007 21 Florent Torregrosa
drush -y vset piwik_url_https "https://piwik.centrale-marseille.fr/"
1008 21 Florent Torregrosa
# Piwik cache.
1009 21 Florent Torregrosa
drush -y vset piwik_cache 1
1010 21 Florent Torregrosa
drush -y vset piwik_visibility_roles "1"
1011 21 Florent Torregrosa
# Piwik is enable for everyone except the administrator
1012 21 Florent Torregrosa
drush -y vset --format=json piwik_roles '[3]'
1013 21 Florent Torregrosa
drush -y vset piwik_page_title_hierarchy 1
1014 21 Florent Torregrosa
# Activate local search.
1015 21 Florent Torregrosa
drush -y vset piwik_site_search 1
1016 21 Florent Torregrosa
1017 21 Florent Torregrosa
1018 21 Florent Torregrosa
###### Security review
1019 21 Florent Torregrosa
# For untrusted roles:
1020 41 Florent Torregrosa
# 1: anonymous user
1021 21 Florent Torregrosa
# 2: authenticated user
1022 21 Florent Torregrosa
# 3: administrator
1023 21 Florent Torregrosa
drush -y en security_review
1024 11 Julien Enselme
drush -y ev "variable_set('security_review_untrusted_roles', array('1'));"
1025 54 Florent Torregrosa
# Used to initialise entries in the database schema.
1026 54 Florent Torregrosa
drush security-review --store
1027 54 Florent Torregrosa
# Security review can't check for files permissions on multi_assos if launched within the web interface.
1028 54 Florent Torregrosa
drush -y sqlq --db-prefix "UPDATE {security_review} SET skip = '1', skiptime = $current_timestamp, skipuid = '1' WHERE reviewcheck IN ('file_perms');"
1029 54 Florent Torregrosa
drush -y sqlq --db-prefix "UPDATE {security_review} SET skip = '0', skiptime = '0', skipuid = NULL WHERE reviewcheck NOT IN ('file_perms');"
1030 1 Julien Enselme
</code>
1031 1 Julien Enselme
</pre>