Project

General

Profile

Scripts et taches planifiees » History » Version 48

Julien Enselme, 08/05/2013 04:33 PM
d7-all-update-contrib.sh : d7-all-dump-individual.sh flushes caches. No need for that here.

1 1 Julien Enselme
Afin de gagner du temps et d'éviter les erreurs humaines, des scripts ont été écrits tout au long du projet. Certains sont même exécutés automatiquement toutes les semaines.
2 1 Julien Enselme
3 13 Florent Torregrosa
{{>toc}}
4 1 Julien Enselme
5 1 Julien Enselme
h1. Les tâches planifiées
6 1 Julien Enselme
7 26 Florent Torregrosa
h2. Crontab
8 26 Florent Torregrosa
9 3 Julien Enselme
Pour exécuter ces tâches régulièrement, on utilise le "crontab":http://fr.wikipedia.org/wiki/Crontab. Il s'agit d'un programme installé sur notre serveur.
10 1 Julien Enselme
11 3 Julien Enselme
Pour voir et modifier la liste des actions :
12 3 Julien Enselme
# se connecter au serveur : <code>ssh assos@sas1.centrale-marseille</code>
13 3 Julien Enselme
# taper la commande pour voir le crontab <code>crontab -l</code>
14 47 Julien Enselme
# taper la commande pour modifier le crontab <code>crontab -e</code>.
15 1 Julien Enselme
16 47 Julien Enselme
{{important(Ne pas effectuer cette opération avant de s'être renseigné sur "vi":http://fr.wikipedia.org/wiki/Vi (l'éditeur de texte utilisé qui n'est pas vraiment intuitif :p) et sur "la syntaxe du crontab":http://fr.wikipedia.org/wiki/Crontab#Modification !
17 47 Julien Enselme
Les scripts doivent si possible s’exécuter avant le club Drupal pour que les problèmes éventuels y soient réglés)}}
18 47 Julien Enselme
19 47 Julien Enselme
{{tip(Pour utiliser un autre éditeur que vi taper : export EDITOR=editor_name exemple : vim, nano)}}
20 26 Florent Torregrosa
21 26 Florent Torregrosa
<pre>
22 26 Florent Torregrosa
<code class="php">
23 42 Florent Torregrosa
######## How to use
24 42 Florent Torregrosa
# mm hh jj MMM JJJ task
25 42 Florent Torregrosa
# minutes hour day_month month day_week
26 42 Florent Torregrosa
# for more informations : https://fr.wikipedia.org/wiki/Crontab#Notation
27 42 Florent Torregrosa
######## End how to
28 42 Florent Torregrosa
29 43 Florent Torregrosa
### Traqu-heure
30 43 Florent Torregrosa
43 6 * * * /users/guest/assos/bin/traqu_heure/script-restitution.sh > /dev/null 2>&1 
31 43 Florent Torregrosa
0 * * * *  /users/guest/assos/bin/traqu_heure/script-traque.sh > /dev/null 2>&1 
32 1 Julien Enselme
33 1 Julien Enselme
34 43 Florent Torregrosa
### Cleaning
35 43 Florent Torregrosa
00 22 * * * /users/guest/assos/bin/all-reset-permissions.sh > /dev/null 2>&1
36 43 Florent Torregrosa
00 23 * * * /users/guest/assos/bin/delete-temporary-files.sh > /dev/null 2>&1
37 1 Julien Enselme
38 1 Julien Enselme
39 43 Florent Torregrosa
### Databases
40 43 Florent Torregrosa
# Create backup
41 43 Florent Torregrosa
00 21 * * 1 /users/guest/assos/bin/d7-all-dump-full.sh > /dev/null 2>&1
42 43 Florent Torregrosa
00 23 * * 1 /users/guest/assos/bin/d7-all-dump-individual.sh auto > /dev/null 2>&1
43 43 Florent Torregrosa
00 1 * * 2  /users/guest/assos/bin/d6-all-dump-full.sh > /dev/null 2>&1
44 42 Florent Torregrosa
45 43 Florent Torregrosa
# flush backup
46 43 Florent Torregrosa
00 21 * * 2 /users/guest/assos/bin/flush-full-databases-backups.sh d7 > /dev/null 2>&1
47 43 Florent Torregrosa
00 22 * * 2 /users/guest/assos/bin/flush-full-databases-backups.sh d6 > /dev/null 2>&1
48 43 Florent Torregrosa
00 23 * * 2 /users/guest/assos/bin/flush-individual-databases-backups.sh auto d7 > /dev/null 2>&1
49 43 Florent Torregrosa
00 1 * * 3  /users/guest/assos/bin/flush-individual-databases-backups.sh manual d7 > /dev/null 2>&1
50 42 Florent Torregrosa
51 42 Florent Torregrosa
52 43 Florent Torregrosa
### Updates for drupal 7
53 43 Florent Torregrosa
00 22 * * 3 /users/guest/assos/bin/d7-all-update-contrib.sh | mail -s "d7-all-update-contrib.sh" assos
54 43 Florent Torregrosa
00 1 * * 3  /users/guest/assos/bin/d7-all-update-localidation.sh | mail -s "d7-all-update-localidation.sh" assos
55 43 Florent Torregrosa
00 3 * * 3  /users/guest/assos/bin/d7-all-reset-variables.sh > /dev/null 2>&1  
56 42 Florent Torregrosa
57 44 Florent Torregrosa
00 5 * * 3  /users/guest/assos/bin/d7-all-releases-info.sh | mail -s "d7-all-releases-info.sh" assos
58 43 Florent Torregrosa
00 23 * * 4 /users/guest/assos/bin/d7-all-security-review.sh
59 42 Florent Torregrosa
60 42 Florent Torregrosa
61 43 Florent Torregrosa
# Updates for drupal 6
62 43 Florent Torregrosa
00 22 * * 6 /users/guest/assos/bin/d6-all-update-contrib.sh > /dev/null 2>&1
63 43 Florent Torregrosa
00 23 * * 6 /users/guest/assos/bin/d6-all-reset-variables.sh > /dev/null 2>&1 
64 42 Florent Torregrosa
65 43 Florent Torregrosa
# Launch drush cron on fellowings
66 43 Florent Torregrosa
45 17 * * *     /users/guest/assos/bin/drushcronone assos.centrale-marseille.fr.ginfo > /dev/null 2>&1 
67 43 Florent Torregrosa
*/15 * * * *    /users/guest/assos/bin/drushcronone assos.centrale-marseille.fr.clubfinance > /dev/null 2>&1
68 43 Florent Torregrosa
45 3 * * *      /users/guest/assos/bin/drushcronone default > /dev/null 2>&1 
69 43 Florent Torregrosa
35 00 * * *     /users/guest/assos/bin/drushcronone assos.centrale-marseille.fr.cac13 > /dev/null 2>&1 
70 43 Florent Torregrosa
*/45 * * * *    /users/guest/assos/bin/drushcronone assos.centrale-marseille.fr.expat > /dev/null 2>&1 
71 1 Julien Enselme
*/10 * * * *    /users/guest/assos/bin/drushcronone forum.centrale-marseille.fr > /dev/null 2>&1 
72 44 Florent Torregrosa
73 44 Florent Torregrosa
00 22 * * 7 /users/guest/assos/bin/disk-usage.sh | mail -s "disk-usage.sh" assos
74 1 Julien Enselme
75 1 Julien Enselme
</code>
76 25 Florent Torregrosa
</pre>
77 1 Julien Enselme
78 25 Florent Torregrosa
Voici la liste des tâches effectuées régulièrement.
79 3 Julien Enselme
80 25 Florent Torregrosa
h2. La réinitialisation des variables
81 25 Florent Torregrosa
82 1 Julien Enselme
Cette tâche consiste à réinitialiser certaines variables qui donnent des droits considérés comme trop permissifs donc dangereux aux administrateurs des sites ou nécessaire pour d'autres scripts tels que piwik ou security_review.
83 1 Julien Enselme
84 25 Florent Torregrosa
En voici quelques exemples :
85 1 Julien Enselme
86 1 Julien Enselme
<pre>
87 1 Julien Enselme
<code class="bash">
88 25 Florent Torregrosa
drush -y vset error_level 0
89 25 Florent Torregrosa
</code>
90 1 Julien Enselme
</pre>
91 21 Florent Torregrosa
92 25 Florent Torregrosa
Cette commande permet de ne pas afficher les messages d'erreurs. En effet, ils contiennent parfois des informations sensibles sur l'installation et ne doivent donc pas être divulgués à n'importe qui.
93 25 Florent Torregrosa
94 3 Julien Enselme
<pre>
95 1 Julien Enselme
<code class="php">
96 1 Julien Enselme
drush -y vset --always-set reverse_proxy TRUE
97 25 Florent Torregrosa
drush -y vset --always-set --format=json reverse_proxy_addresses '["147.94.19.16","147.94.19.17"]'
98 1 Julien Enselme
</code>
99 3 Julien Enselme
</pre>
100 1 Julien Enselme
101 3 Julien Enselme
Ces commandes permettent de déclarer à Drupal les serveurs proxy du CRI afin d'éviter qu'il ne répertorie tous les visiteurs comme ayant l'adresse des serveurs sus-cités. **Pas fini : voir http://assos.centrale-marseille.fr/content/t%C3%A2che/d%C3%A9clarer-les-proxy-du-cri-%C3%A0-drupal**
102 1 Julien Enselme
103 6 Julien Enselme
h2. La sauvegarde des bases de données
104 1 Julien Enselme
105 3 Julien Enselme
Sur les installations d6 et d7 : une fois par semaine
106 1 Julien Enselme
107 3 Julien Enselme
On utilise les [[Scripts_et_taches_planifiees#Tout-sauvegarder|scripts de sauvegarde créés par le club Drupal]].
108 1 Julien Enselme
109 3 Julien Enselme
h2. La purge des sauvegardes de bdd
110 1 Julien Enselme
111 1 Julien Enselme
Sur les installations d6 et d7 : toutes les semaines
112 1 Julien Enselme
113 1 Julien Enselme
Cette tâche utilise le script de [[Scripts_et_taches_planifiees#purge_des_sauvegardes.sh|purge des sauvegardes]] afin de libérer de l'espace disque en supprimant les sauvegardes de bdd les plus vieilles.
114 1 Julien Enselme
115 1 Julien Enselme
h1. Liste des scripts à disposition
116 21 Florent Torregrosa
117 21 Florent Torregrosa
Les scripts utilisés sont hébergés dans le répertoire bin du compte assos.
118 21 Florent Torregrosa
119 21 Florent Torregrosa
h2. all-reset-permissions.sh
120 21 Florent Torregrosa
121 21 Florent Torregrosa
<pre>
122 21 Florent Torregrosa
<code class="php">
123 21 Florent Torregrosa
#!/bin/sh
124 21 Florent Torregrosa
125 21 Florent Torregrosa
. scripts-config.sh
126 21 Florent Torregrosa
127 21 Florent Torregrosa
# This script puts the correct permissions to sites folders, settings.php and scripts.
128 21 Florent Torregrosa
129 21 Florent Torregrosa
######### drupal 6
130 21 Florent Torregrosa
for dir in `find $d6_dir_sites -type d -maxdepth 1 -mindepth 1 ! -name all ! -name images ! -name languages` ; do
131 21 Florent Torregrosa
    chmod 755 $dir
132 21 Florent Torregrosa
    chmod 400 $dir/settings.php
133 21 Florent Torregrosa
done
134 21 Florent Torregrosa
135 21 Florent Torregrosa
######### drupal 7
136 21 Florent Torregrosa
for dir in `find $d7_dir_sites -type d -maxdepth 1 -mindepth 1 ! -name all` ; do
137 21 Florent Torregrosa
    chmod 755 $dir
138 21 Florent Torregrosa
    chmod 400 $dir/settings.php
139 35 Florent Torregrosa
done
140 35 Florent Torregrosa
141 35 Florent Torregrosa
####### bin
142 35 Florent Torregrosa
chmod -R 700 $dir_scripts
143 35 Florent Torregrosa
144 35 Florent Torregrosa
####### backup
145 21 Florent Torregrosa
chmod -R 700 $dir_backup
146 21 Florent Torregrosa
147 21 Florent Torregrosa
####### log
148 1 Julien Enselme
chmod -R 700 $dir_log
149 21 Florent Torregrosa
</code>
150 21 Florent Torregrosa
</pre>
151 21 Florent Torregrosa
152 21 Florent Torregrosa
h2. contrib-usage.sh
153 21 Florent Torregrosa
154 21 Florent Torregrosa
<pre>
155 21 Florent Torregrosa
<code class="php">
156 21 Florent Torregrosa
#!/bin/sh
157 21 Florent Torregrosa
158 21 Florent Torregrosa
. scripts-config.sh
159 29 Florent Torregrosa
. scripts-utils.sh
160 21 Florent Torregrosa
161 21 Florent Torregrosa
# ARGS: Drupal_version, project_status, project_name
162 21 Florent Torregrosa
# List sites that have the project_name with the corresponding project_status.
163 21 Florent Torregrosa
# project status: enabled or disabled
164 21 Florent Torregrosa
165 21 Florent Torregrosa
check_arguments $# 3
166 21 Florent Torregrosa
167 21 Florent Torregrosa
if [ $1 = d6 ] ; then
168 21 Florent Torregrosa
    cd $d6_dir_sites
169 41 Florent Torregrosa
else
170 21 Florent Torregrosa
    cd $d7_dir_sites
171 21 Florent Torregrosa
fi
172 21 Florent Torregrosa
173 21 Florent Torregrosa
for dir in `find . -maxdepth 1 -mindepth 1 -type d ! -name all ! -name languages ! -name images | sort ` ; do
174 21 Florent Torregrosa
    # List non-core projects that correspond to the status.
175 21 Florent Torregrosa
    # Keep project_name if listed.
176 21 Florent Torregrosa
    # Count line result. 0 if not listed or 1 if listed.
177 21 Florent Torregrosa
	# Print site_dir if listed.
178 21 Florent Torregrosa
179 29 Florent Torregrosa
    cd $dir;
180 21 Florent Torregrosa
	if [ 1 -eq `drush pml --no-core --status=$2 | grep $3 | wc -l` ] ; then
181 21 Florent Torregrosa
        echo $dir; 
182 21 Florent Torregrosa
    fi
183 21 Florent Torregrosa
    cd -
184 1 Julien Enselme
done
185 21 Florent Torregrosa
</code>
186 21 Florent Torregrosa
</pre>
187 21 Florent Torregrosa
188 21 Florent Torregrosa
h2. d6-all-drush.sh
189 21 Florent Torregrosa
190 21 Florent Torregrosa
<pre>
191 21 Florent Torregrosa
<code class="php">
192 21 Florent Torregrosa
#!/bin/sh
193 21 Florent Torregrosa
194 21 Florent Torregrosa
. scripts-config.sh
195 21 Florent Torregrosa
. scripts-utils.sh
196 21 Florent Torregrosa
197 41 Florent Torregrosa
# ARGS: drush_command
198 21 Florent Torregrosa
199 21 Florent Torregrosa
check_arguments $# 1
200 21 Florent Torregrosa
201 21 Florent Torregrosa
for dir in `find $d6_dir_sites -maxdepth 1 -mindepth 1 -type d ! -name all ! -name languages ! -name images | sort` ; do
202 21 Florent Torregrosa
    cd $dir
203 21 Florent Torregrosa
    echo $dir
204 21 Florent Torregrosa
    drush $*
205 1 Julien Enselme
done
206 21 Florent Torregrosa
</code>
207 21 Florent Torregrosa
</pre>
208 21 Florent Torregrosa
209 21 Florent Torregrosa
h2. d6-all-dump-full.sh
210 21 Florent Torregrosa
211 21 Florent Torregrosa
<pre>
212 21 Florent Torregrosa
<code class="php">
213 21 Florent Torregrosa
#!/bin/sh
214 21 Florent Torregrosa
215 21 Florent Torregrosa
. scripts-config.sh
216 21 Florent Torregrosa
217 21 Florent Torregrosa
current_date=`date "+%Y-%m-%d-%Hh%Mm%Ss"`
218 21 Florent Torregrosa
219 21 Florent Torregrosa
# Dump D6 database with webassos user.
220 45 Florent Torregrosa
mysqldump --single-transaction webassos -h myweb.serv.int -u webassos --password=password > $d6_dir_full_backup/webassos/$current_date.webassos.sql
221 21 Florent Torregrosa
222 21 Florent Torregrosa
# Dump D6 form database with forum user.
223 45 Florent Torregrosa
mysqldump forum -h myweb.serv.int -u forum --password=password > $d6_dir_full_backup/forum/$current_date.forum.sql
224 37 Florent Torregrosa
</code>
225 37 Florent Torregrosa
</pre>
226 37 Florent Torregrosa
227 37 Florent Torregrosa
h2. d6-all-reset-variables.sh
228 37 Florent Torregrosa
229 37 Florent Torregrosa
<pre>
230 37 Florent Torregrosa
<code class="php">
231 37 Florent Torregrosa
#!/bin/sh
232 37 Florent Torregrosa
233 37 Florent Torregrosa
. scripts-config.sh
234 41 Florent Torregrosa
235 37 Florent Torregrosa
cd $d6_dir_sites
236 37 Florent Torregrosa
d6-all-drush.sh vset --always-set reverse_proxy TRUE
237 39 Florent Torregrosa
d6-all-drush.sh vset --always-set --format=json reverse_proxy_addresses '["147.94.19.16","147.94.19.17"]'
238 1 Julien Enselme
drush @sites -y ev "variable_set('update_notify_emails', array('@email_multi_assos'));"
239 21 Florent Torregrosa
</code>
240 21 Florent Torregrosa
</pre>
241 21 Florent Torregrosa
242 21 Florent Torregrosa
h2. d6-all-update-contrib.sh
243 21 Florent Torregrosa
244 21 Florent Torregrosa
<pre>
245 21 Florent Torregrosa
<code class="php">
246 21 Florent Torregrosa
#!/bin/sh
247 21 Florent Torregrosa
248 21 Florent Torregrosa
. scripts-config.sh
249 21 Florent Torregrosa
250 21 Florent Torregrosa
d6-all-drush.sh -y en update
251 21 Florent Torregrosa
# Launch cron to check for updates.
252 21 Florent Torregrosa
d6-all-drush.sh -q cron
253 21 Florent Torregrosa
254 21 Florent Torregrosa
d6-all-drush.sh cc all
255 21 Florent Torregrosa
d6-all-dump-full.sh
256 21 Florent Torregrosa
257 21 Florent Torregrosa
d6-all-drush.sh -y upc --no-core
258 21 Florent Torregrosa
d6-all-drush.sh -y updb
259 21 Florent Torregrosa
260 21 Florent Torregrosa
d6-all-drush.sh -y dis update
261 21 Florent Torregrosa
262 1 Julien Enselme
d6-all-drush.sh cron
263 21 Florent Torregrosa
</code>
264 21 Florent Torregrosa
</pre>
265 21 Florent Torregrosa
266 21 Florent Torregrosa
h2. d6-dump-individual.sh
267 21 Florent Torregrosa
268 21 Florent Torregrosa
<pre>
269 1 Julien Enselme
<code class="php">
270 1 Julien Enselme
#!/bin/sh
271 1 Julien Enselme
272 1 Julien Enselme
. scripts-config.sh
273 1 Julien Enselme
274 1 Julien Enselme
# ARGS: auto or manual, site_prefix
275 41 Florent Torregrosa
# WARNING : backup are regularly flushed, put your backup in a safe place.
276 41 Florent Torregrosa
277 41 Florent Torregrosa
cd $dir_individual_backup
278 41 Florent Torregrosa
279 41 Florent Torregrosa
#!/bin/sh
280 41 Florent Torregrosa
281 41 Florent Torregrosa
. scripts-config.sh
282 41 Florent Torregrosa
283 41 Florent Torregrosa
# ARGS: auto or manual, site_prefix
284 21 Florent Torregrosa
# WARNING : backup are regularly flushed, put your backup in a safe place.
285 21 Florent Torregrosa
286 21 Florent Torregrosa
cd $dir_individual_backup
287 21 Florent Torregrosa
288 21 Florent Torregrosa
#récupération des tables du site dans le fichier liste_tables.temp
289 1 Julien Enselme
tables='_%'
290 1 Julien Enselme
liste="$1$tables"
291 1 Julien Enselme
292 1 Julien Enselme
mysql -h myweb.serv.int -u webassos --password=HBVH2ljgyZCA0AP251DY -BNe "show tables like '"$liste"'" webassos | tr '\r\n' ' ' > liste_tables.temp
293 21 Florent Torregrosa
294 1 Julien Enselme
#transformation de cette liste en une variable
295 21 Florent Torregrosa
var=$(cat liste_tables.temp)
296 21 Florent Torregrosa
297 21 Florent Torregrosa
#sauvegarde de toutes ces tables
298 21 Florent Torregrosa
current_date=`date "+%Y-%m-%d-%Hh%Mm%Ss"`
299 41 Florent Torregrosa
suffixe="_dump$current_date.sql"
300 41 Florent Torregrosa
fichier="$1$suffixe"
301 41 Florent Torregrosa
302 41 Florent Torregrosa
if [ $1 = 'auto' ] ; then
303 21 Florent Torregrosa
    mysqldump webassos -h myweb.serv.int -u webassos --password=HBVH2ljgyZCA0AP251DY $var > $d6_dir_individual_auto_backup/$fichier
304 21 Florent Torregrosa
else
305 21 Florent Torregrosa
    mysqldump webassos -h myweb.serv.int -u webassos --password=HBVH2ljgyZCA0AP251DY $var > $d6_dir_individual_manual_backup/$fichier
306 21 Florent Torregrosa
fi
307 21 Florent Torregrosa
308 1 Julien Enselme
#suppression du fichier temporaire utilisé
309 21 Florent Torregrosa
rm liste_tables.temp
310 21 Florent Torregrosa
</code>
311 21 Florent Torregrosa
</pre>
312 21 Florent Torregrosa
313 1 Julien Enselme
h2. d7-all-drush-logged.sh
314 21 Florent Torregrosa
315 21 Florent Torregrosa
<pre>
316 21 Florent Torregrosa
<code class="php">
317 21 Florent Torregrosa
#!/bin/sh
318 21 Florent Torregrosa
319 21 Florent Torregrosa
. scripts-config.sh
320 21 Florent Torregrosa
. scripts-utils.sh
321 21 Florent Torregrosa
322 30 Florent Torregrosa
# ARGS: drush_command
323 30 Florent Torregrosa
324 41 Florent Torregrosa
check_arguments $# 1
325 1 Julien Enselme
326 1 Julien Enselme
cd $d7_dir_sites
327 30 Florent Torregrosa
328 30 Florent Torregrosa
for dir in `find . -maxdepth 1 -mindepth 1 -type d ! -name all | sort` ; do
329 30 Florent Torregrosa
    cd $dir
330 21 Florent Torregrosa
    current_date=`date "+%Y-%m-%d_%Hh:%Mm"`
331 30 Florent Torregrosa
    echo "======$current_date======" >> $d7_dir_log/$dir.log
332 30 Florent Torregrosa
    echo "Arguments are: $* " >> $d7_dir_log/$dir.log
333 21 Florent Torregrosa
    drush $* >> $d7_dir_log/$dir.log
334 21 Florent Torregrosa
    #To have the same caracters limit we needed 'end' that have 4 caracters, we used the Croate language for this ! LOL 
335 21 Florent Torregrosa
    echo -e "=============KRAJ=============\n" >> $d7_dir_log/$dir.log
336 1 Julien Enselme
    cd -
337 21 Florent Torregrosa
done
338 1 Julien Enselme
</code>
339 21 Florent Torregrosa
</pre>
340 21 Florent Torregrosa
341 21 Florent Torregrosa
h2. d7-all-drush.sh
342 21 Florent Torregrosa
343 21 Florent Torregrosa
<pre>
344 21 Florent Torregrosa
<code class="php">
345 21 Florent Torregrosa
#!/bin/sh
346 21 Florent Torregrosa
347 21 Florent Torregrosa
. scripts-config.sh
348 21 Florent Torregrosa
. scripts-utils.sh
349 21 Florent Torregrosa
350 41 Florent Torregrosa
# ARGS: drush_command
351 21 Florent Torregrosa
352 21 Florent Torregrosa
check_arguments $# 1
353 21 Florent Torregrosa
354 21 Florent Torregrosa
for dir in `find $d7_dir_sites -maxdepth 1 -mindepth 1 -type d ! -name all | sort` ; do
355 21 Florent Torregrosa
    cd $dir
356 21 Florent Torregrosa
    echo $dir
357 21 Florent Torregrosa
    drush $*
358 1 Julien Enselme
done
359 21 Florent Torregrosa
</code>
360 21 Florent Torregrosa
</pre>
361 21 Florent Torregrosa
362 21 Florent Torregrosa
h2. d7-all-dump-full.sh
363 21 Florent Torregrosa
364 21 Florent Torregrosa
<pre>
365 21 Florent Torregrosa
<code class="php">
366 21 Florent Torregrosa
#!/bin/sh
367 21 Florent Torregrosa
368 21 Florent Torregrosa
. scripts-config.sh
369 21 Florent Torregrosa
370 21 Florent Torregrosa
current_date=`date "+%Y-%m-%d-%Hh%Mm%Ss"`
371 21 Florent Torregrosa
372 21 Florent Torregrosa
# Dump D7 databases at once.
373 45 Florent Torregrosa
mysqldump -h $db_server -u $db_user -ppassword --all-databases > $d7_dir_full_backup/myassos/$current_date.d7_full.sql
374 21 Florent Torregrosa
</code>
375 21 Florent Torregrosa
</pre>
376 21 Florent Torregrosa
377 21 Florent Torregrosa
h2. d7-all-dump-individual.sh
378 21 Florent Torregrosa
379 21 Florent Torregrosa
<pre>
380 21 Florent Torregrosa
<code class="php">
381 21 Florent Torregrosa
#!/bin/sh
382 21 Florent Torregrosa
383 21 Florent Torregrosa
. scripts-config.sh
384 21 Florent Torregrosa
385 34 Florent Torregrosa
# ARGS: auto or manual
386 34 Florent Torregrosa
387 34 Florent Torregrosa
current_date=`date "+%Y-%m-%d-%Hh%Mm%Ss"`
388 21 Florent Torregrosa
389 21 Florent Torregrosa
cd $d7_dir_sites
390 21 Florent Torregrosa
391 21 Florent Torregrosa
for dir in `find . -maxdepth 1 -mindepth 1 -type d ! -name all | cut -c3-` ; do
392 21 Florent Torregrosa
    cd $dir
393 40 Florent Torregrosa
    drush cc all
394 1 Julien Enselme
    if [ $1 = 'auto' ] ; then
395 34 Florent Torregrosa
        drush sql-dump --result-file="$d7_dir_individual_auto_backup/$dir/$current_date.$dir.sql"
396 21 Florent Torregrosa
    else
397 21 Florent Torregrosa
        drush sql-dump --result-file="$d7_dir_individual_manual_backup/$dir/$current_date.$dir.sql"
398 21 Florent Torregrosa
    fi
399 21 Florent Torregrosa
    cd -
400 1 Julien Enselme
done
401 21 Florent Torregrosa
</code>
402 21 Florent Torregrosa
</pre>
403 21 Florent Torregrosa
404 21 Florent Torregrosa
h2. d7-all-releases-info.sh
405 21 Florent Torregrosa
406 21 Florent Torregrosa
<pre>
407 21 Florent Torregrosa
<code class="php">
408 21 Florent Torregrosa
#!/bin/sh
409 21 Florent Torregrosa
410 21 Florent Torregrosa
. scripts-config.sh
411 21 Florent Torregrosa
412 28 Florent Torregrosa
# List version of a module or theme that exists in sites/all/*
413 28 Florent Torregrosa
# and all versions that are available for same project on drupal.org
414 28 Florent Torregrosa
415 28 Florent Torregrosa
# modules
416 28 Florent Torregrosa
cd $d7_dir_sites/all/modules
417 1 Julien Enselme
for dir in `ls -1` ; do
418 1 Julien Enselme
    if [ -d $dir ] ; then
419 28 Florent Torregrosa
        drush pm-releases $dir
420 28 Florent Torregrosa
    fi
421 28 Florent Torregrosa
done
422 28 Florent Torregrosa
423 28 Florent Torregrosa
# themes
424 1 Julien Enselme
cd $d7_dir_sites/all/themes
425 21 Florent Torregrosa
for dir in `ls -1` ; do
426 21 Florent Torregrosa
    if [ -d $dir ] ; then
427 21 Florent Torregrosa
        drush pm-releases $dir
428 21 Florent Torregrosa
    fi
429 1 Julien Enselme
done
430 21 Florent Torregrosa
</code>
431 21 Florent Torregrosa
</pre>
432 21 Florent Torregrosa
433 21 Florent Torregrosa
h2. d7-all-reset-variables.sh
434 21 Florent Torregrosa
435 21 Florent Torregrosa
<pre>
436 21 Florent Torregrosa
<code class="php">
437 41 Florent Torregrosa
#!/bin/sh
438 21 Florent Torregrosa
439 21 Florent Torregrosa
. scripts-config.sh
440 21 Florent Torregrosa
441 21 Florent Torregrosa
for dir in `find $d7_dir_sites -maxdepth 1 -mindepth 1 -type d ! -name all | sort` ; do
442 21 Florent Torregrosa
    cd $dir
443 21 Florent Torregrosa
    echo $dir
444 21 Florent Torregrosa
    d7-reset-variables.sh
445 1 Julien Enselme
done
446 21 Florent Torregrosa
</code>
447 21 Florent Torregrosa
</pre>
448 21 Florent Torregrosa
449 21 Florent Torregrosa
h2. d7-all-security-review.sh
450 21 Florent Torregrosa
451 21 Florent Torregrosa
<pre>
452 21 Florent Torregrosa
<code class="php">
453 21 Florent Torregrosa
#!/bin/sh
454 21 Florent Torregrosa
455 21 Florent Torregrosa
. scripts-config.sh
456 21 Florent Torregrosa
457 21 Florent Torregrosa
# grep -v success to keep site_name and error lines.
458 1 Julien Enselme
bash -c 'd7-all-drush.sh security-review |& grep -v success | mail -s "Security review" $email_multi_assos'
459 21 Florent Torregrosa
</code>
460 21 Florent Torregrosa
</pre>
461 21 Florent Torregrosa
462 21 Florent Torregrosa
h2. d7-all-update-contrib.sh
463 1 Julien Enselme
464 21 Florent Torregrosa
<pre>
465 21 Florent Torregrosa
<code class="php">
466 21 Florent Torregrosa
#!/bin/sh
467 21 Florent Torregrosa
468 21 Florent Torregrosa
. scripts-config.sh
469 21 Florent Torregrosa
470 21 Florent Torregrosa
d7-all-drush.sh -y en update
471 21 Florent Torregrosa
# Launch cron to check for updates.
472 21 Florent Torregrosa
d7-all-drush.sh -q cron
473 21 Florent Torregrosa
474 21 Florent Torregrosa
d7-all-dump-individual.sh
475 21 Florent Torregrosa
476 21 Florent Torregrosa
d7-all-drush-logged.sh -y upc --no-core
477 41 Florent Torregrosa
d7-all-drush.sh -y updb
478 21 Florent Torregrosa
479 21 Florent Torregrosa
d7-all-drush.sh -y dis update
480 21 Florent Torregrosa
481 1 Julien Enselme
d7-all-drush.sh cron
482 21 Florent Torregrosa
</code>
483 21 Florent Torregrosa
</pre>
484 21 Florent Torregrosa
485 21 Florent Torregrosa
h2. d7-all-update-localisation.sh
486 21 Florent Torregrosa
487 21 Florent Torregrosa
<pre>
488 21 Florent Torregrosa
<code class="php">
489 21 Florent Torregrosa
#!/bin/sh
490 21 Florent Torregrosa
491 21 Florent Torregrosa
. scripts-config.sh
492 21 Florent Torregrosa
493 21 Florent Torregrosa
d7-all-drush.sh -y en l10n_update
494 21 Florent Torregrosa
d7-all-drush.sh l10n-update-refresh
495 21 Florent Torregrosa
d7-all-drush.sh l10n-update
496 1 Julien Enselme
d7-all-drush.sh -y dis l10n_update
497 21 Florent Torregrosa
</code>
498 21 Florent Torregrosa
</pre>
499 21 Florent Torregrosa
500 21 Florent Torregrosa
h2. d7-create-site.sh
501 21 Florent Torregrosa
502 1 Julien Enselme
<pre>
503 21 Florent Torregrosa
<code class="php">
504 21 Florent Torregrosa
#!/bin/sh
505 21 Florent Torregrosa
506 21 Florent Torregrosa
. scripts-config.sh
507 21 Florent Torregrosa
. scripts-config-site.sh $1
508 21 Florent Torregrosa
. scripts-utils.sh
509 21 Florent Torregrosa
510 21 Florent Torregrosa
# ARGS: site name
511 21 Florent Torregrosa
512 31 Julien Enselme
######## Exceptions
513 21 Florent Torregrosa
check_arguments $# 1
514 21 Florent Torregrosa
515 21 Florent Torregrosa
# "-" is forbidden because it provokes database error.
516 21 Florent Torregrosa
if [ `echo $1 | grep -` ] ; then
517 21 Florent Torregrosa
    echo '"-" is forbidden in the site name'
518 41 Florent Torregrosa
    exit 1
519 21 Florent Torregrosa
fi
520 21 Florent Torregrosa
521 21 Florent Torregrosa
# Site name length must be lower or equal to 16 due to database limitations.
522 21 Florent Torregrosa
if [`echo $1 | wc -c` -gt 16 ] ; then
523 21 Florent Torregrosa
    echo "site name can't have more than 16 characters"
524 21 Florent Torregrosa
    exit 1
525 21 Florent Torregrosa
fi
526 31 Julien Enselme
527 21 Florent Torregrosa
###### Initialisation
528 21 Florent Torregrosa
cd $d7_dir
529 21 Florent Torregrosa
db_password=`ask_password_db $db_server $db_user`
530 21 Florent Torregrosa
site_password=`generate_password`
531 21 Florent Torregrosa
532 21 Florent Torregrosa
# Check if site database already exists.
533 21 Florent Torregrosa
if mysql -h $db_server -u $db_user -e "USE $d7_site_name" -p$db_password 2>/dev/null ; then
534 21 Florent Torregrosa
    echo "Database $d7_site_name already exists"
535 21 Florent Torregrosa
    exit 1
536 21 Florent Torregrosa
fi
537 21 Florent Torregrosa
538 21 Florent Torregrosa
# Check if site folder already exists.
539 1 Julien Enselme
if [ -d $d7_site_dir ] ; then
540 21 Florent Torregrosa
    echo "Folder $d7_site_dir already exists"
541 1 Julien Enselme
    exit 1
542 31 Julien Enselme
fi
543 1 Julien Enselme
544 1 Julien Enselme
###### Main
545 31 Julien Enselme
mkdir $d7_site_dir
546 31 Julien Enselme
dir_site_name="assos.centrale-marseille.fr.$d7_site_name"
547 21 Florent Torregrosa
548 21 Florent Torregrosa
# Backup requirements
549 31 Julien Enselme
mkdir $d7_dir_individual_auto_backup/$dir_site_name
550 31 Julien Enselme
mkdir $d7_dir_individual_manual_backup/$dir_site_name
551 31 Julien Enselme
current_date=`date "+%Y-%m-%d-%Hh%Mm%Ss"`
552 31 Julien Enselme
553 21 Florent Torregrosa
# NB : ls sort by considering the 1st characters
554 21 Florent Torregrosa
touch $d7_dir_individual_auto_backup/$dir_site_name/$current_date.$dir_site_name.sql
555 21 Florent Torregrosa
touch $d7_dir_individual_auto_backup/$dir_site_name/$current_date.$dir_site_name.sql2
556 21 Florent Torregrosa
touch $d7_dir_individual_auto_backup/$dir_site_name/$current_date.$dir_site_name.sql3
557 21 Florent Torregrosa
558 21 Florent Torregrosa
# Create and grant privileges on database
559 21 Florent Torregrosa
mysql -h $db_server -u $db_user -e "CREATE DATABASE $d7_site_name" -p$db_password
560 21 Florent Torregrosa
mysql -h $db_server -u $db_user -e "GRANT ALL PRIVILEGES ON $d7_site_name.* TO '$d7_site_name'@'%' IDENTIFIED BY '$site_password'" -p$db_password
561 21 Florent Torregrosa
562 21 Florent Torregrosa
# Create settings.php
563 21 Florent Torregrosa
sed "s/\%\%DBUSER\%\%/$d7_site_name/ ; s/\%\%DBNAME\%\%/$d7_site_name/ ; s/\%\%DBPASS\%\%/$site_password/ ; s/\%\%nomsite\%\%/$d7_site_name/" < $d7_settings_template > $d7_site_settings
564 21 Florent Torregrosa
565 21 Florent Torregrosa
# Create symbolic link
566 21 Florent Torregrosa
cd $d7_dir
567 21 Florent Torregrosa
ln -s . $d7_site_name
568 21 Florent Torregrosa
569 21 Florent Torregrosa
# Next Instructions
570 21 Florent Torregrosa
echo "Go to http://assos.centrale-marseille.fr/$d7_site_name/install.php to continue."
571 21 Florent Torregrosa
echo "Press enter when ready to go on."
572 21 Florent Torregrosa
read key
573 21 Florent Torregrosa
574 21 Florent Torregrosa
# Init variables
575 21 Florent Torregrosa
d7-reset-variables.sh $d7_site_name
576 21 Florent Torregrosa
577 21 Florent Torregrosa
# Permissions
578 21 Florent Torregrosa
chmod -R 755 $d7_site_dir
579 21 Florent Torregrosa
chmod 400 $d7_site_settings
580 21 Florent Torregrosa
581 21 Florent Torregrosa
# Last instructions
582 21 Florent Torregrosa
echo "Last instructions:"
583 21 Florent Torregrosa
echo "- Advice the webmaster to close account creation on the website"
584 21 Florent Torregrosa
echo "- Give the webmaster a link to the club Drupal's tutorials "
585 21 Florent Torregrosa
echo "- Create a node of type \"Site\" on default"
586 1 Julien Enselme
echo "- Register the webmaster on webmasters@listes.centrale-marseille.fr"
587 21 Florent Torregrosa
</code>
588 21 Florent Torregrosa
</pre>
589 21 Florent Torregrosa
590 21 Florent Torregrosa
h2. d7-delete-site.sh
591 21 Florent Torregrosa
592 21 Florent Torregrosa
<pre>
593 21 Florent Torregrosa
<code class="php">
594 21 Florent Torregrosa
#!/bin/sh
595 21 Florent Torregrosa
596 21 Florent Torregrosa
. scripts-config.sh
597 21 Florent Torregrosa
. scripts-config-site.sh $1
598 21 Florent Torregrosa
. scripts-utils.sh
599 21 Florent Torregrosa
600 21 Florent Torregrosa
# ARGS: site name.
601 21 Florent Torregrosa
602 21 Florent Torregrosa
check_arguments $# 1
603 38 Julien Enselme
604 21 Florent Torregrosa
db_password=`ask_password_db $db_server $db_user`
605 21 Florent Torregrosa
606 21 Florent Torregrosa
# Delete database.
607 21 Florent Torregrosa
mysql -h $db_server -u $db_user -p$db_password -e "DROP DATABASE $d7_site_name"
608 21 Florent Torregrosa
609 21 Florent Torregrosa
# Delete MYSQL user.
610 21 Florent Torregrosa
mysql -h $db_server -u $db_user -p$db_password -e "DROP USER '$d7_site_name'@'%'"
611 21 Florent Torregrosa
612 21 Florent Torregrosa
# Delete site's folder.
613 21 Florent Torregrosa
chmod -R 700 $d7_site_dir
614 21 Florent Torregrosa
rm -r $d7_site_dir
615 21 Florent Torregrosa
616 21 Florent Torregrosa
# Delete symbolic link.
617 21 Florent Torregrosa
rm $d7_dir/$d7_site_name
618 21 Florent Torregrosa
619 21 Florent Torregrosa
# Delete database backups.
620 21 Florent Torregrosa
rm -r $d7_dir_individual_auto_backup/assos.centrale-marseille.fr.$d7_site_name
621 21 Florent Torregrosa
rm -r $d7_dir_individual_manual_backup/assos.centrale-marseille.fr.$d7_site_name
622 21 Florent Torregrosa
623 21 Florent Torregrosa
echo "Don't forget to:"
624 1 Julien Enselme
echo "- Refresh node site on default"
625 21 Florent Torregrosa
echo "- Check particular behavior (normally detailed on site node)"
626 21 Florent Torregrosa
</code>
627 21 Florent Torregrosa
</pre>
628 1 Julien Enselme
629 21 Florent Torregrosa
h2. d7-reset-variables.sh
630 1 Julien Enselme
631 21 Florent Torregrosa
<pre>
632 21 Florent Torregrosa
<code class="php">
633 21 Florent Torregrosa
#!/bin/sh
634 21 Florent Torregrosa
635 21 Florent Torregrosa
. scripts-config.sh
636 21 Florent Torregrosa
637 21 Florent Torregrosa
# ARGS: [site_name]
638 21 Florent Torregrosa
639 21 Florent Torregrosa
if [ ! -z $1 ] ; then
640 21 Florent Torregrosa
    . scripts-config-site.sh $1
641 21 Florent Torregrosa
    cd $d7_site_dir
642 21 Florent Torregrosa
fi
643 21 Florent Torregrosa
644 21 Florent Torregrosa
current_timestamp=`date "+%s"`
645 41 Florent Torregrosa
646 46 Florent Torregrosa
random_1=`dd if=/dev/urandom count=1 2> /dev/null | cksum | cut -f1 -d" "`
647 46 Florent Torregrosa
random_2=`dd if=/dev/urandom count=1 2> /dev/null | cksum | cut -f1 -d" "`
648 46 Florent Torregrosa
649 21 Florent Torregrosa
####### General variables
650 41 Florent Torregrosa
drush -y vset --always-set reverse_proxy TRUE
651 21 Florent Torregrosa
drush -y vset --always-set --format=json reverse_proxy_addresses '["147.94.19.16","147.94.19.17"]'
652 21 Florent Torregrosa
drush -y ev "variable_set('update_notify_emails', array('@email_multi_assos'));"
653 21 Florent Torregrosa
drush -y vset error_level 0
654 21 Florent Torregrosa
drush -y vset dblog_row_limit 1000
655 21 Florent Torregrosa
656 21 Florent Torregrosa
###### Hidden captcha
657 21 Florent Torregrosa
drush -y en hidden_captcha
658 21 Florent Torregrosa
# Log wrong answers.
659 21 Florent Torregrosa
drush -y vset captcha_log_wrong_responses 1
660 21 Florent Torregrosa
# Use hidden captcha for all forms.
661 1 Julien Enselme
drush -y sqlq --db-prefix "UPDATE {captcha_points} SET module = 'hidden_captcha', captcha_type = 'Hidden CAPTCHA' WHERE module is NULL;"
662 1 Julien Enselme
# Flush captcha cache.
663 21 Florent Torregrosa
drush -y vdel captcha_placement_map_cache
664 1 Julien Enselme
# Randomely generate a math question as the label of the hidden captcha field.
665 46 Florent Torregrosa
drush -y vset hidden_captcha_label "$random_1 + $random_2"
666 1 Julien Enselme
667 1 Julien Enselme
668 21 Florent Torregrosa
####### Piwik
669 21 Florent Torregrosa
drush -y en piwik
670 21 Florent Torregrosa
drush -y vset piwik_site_id "101"
671 21 Florent Torregrosa
drush -y vset piwik_url_http "http://piwik.centrale-marseille.fr/"
672 21 Florent Torregrosa
drush -y vset piwik_url_https "https://piwik.centrale-marseille.fr/"
673 32 Julien Enselme
# Piwik cache.
674 33 Julien Enselme
drush -y vset piwik_cache 1
675 21 Florent Torregrosa
drush -y vset piwik_visibility_roles "1"
676 21 Florent Torregrosa
# Piwik is enable for everyone except the administrator
677 21 Florent Torregrosa
drush -y vset --format=json piwik_roles '[3]'
678 21 Florent Torregrosa
drush -y vset piwik_page_title_hierarchy 1
679 21 Florent Torregrosa
# Activate local search.
680 21 Florent Torregrosa
drush -y vset piwik_site_search 1
681 41 Florent Torregrosa
682 41 Florent Torregrosa
683 41 Florent Torregrosa
###### Security review
684 21 Florent Torregrosa
# For untrusted roles:
685 21 Florent Torregrosa
# 1: anonymous user
686 21 Florent Torregrosa
# 2: authenticated user
687 41 Florent Torregrosa
# 3: administrator
688 41 Florent Torregrosa
drush -y en security_review
689 41 Florent Torregrosa
drush -y ev "variable_set('security_review_untrusted_roles', array('1'));"
690 21 Florent Torregrosa
# Security review can't check for files permissions on multi_assos.
691 21 Florent Torregrosa
# TODO: the database scheme does'nt exist until security_review is run for the first time. Even with the scheme there are sql error.
692 21 Florent Torregrosa
# drush -y sqlq "UPDATE {security_review} SET skip = '1', skiptime = $current_timestamp, skipuid = '1' WHERE reviewcheck IN ('file_perms');"
693 1 Julien Enselme
# drush -y sqlq "UPDATE {security_review} SET skip = '0', skiptime = '0', skipuid = NULL WHERE reviewcheck NOT IN ('file_perms');"
694 21 Florent Torregrosa
</code>
695 21 Florent Torregrosa
</pre>
696 21 Florent Torregrosa
697 21 Florent Torregrosa
h2. delete-temporary-files.sh
698 21 Florent Torregrosa
699 21 Florent Torregrosa
<pre>
700 21 Florent Torregrosa
<code class="php">
701 21 Florent Torregrosa
#!/bin/sh
702 21 Florent Torregrosa
703 21 Florent Torregrosa
. scripts-config.sh
704 21 Florent Torregrosa
705 1 Julien Enselme
find $dir_multi_assos -name '*~' -delete
706 21 Florent Torregrosa
</code>
707 21 Florent Torregrosa
</pre>
708 21 Florent Torregrosa
709 21 Florent Torregrosa
h2. disk-usage.sh
710 21 Florent Torregrosa
711 21 Florent Torregrosa
<pre>
712 21 Florent Torregrosa
<code class="php">
713 21 Florent Torregrosa
#!/bin/sh
714 21 Florent Torregrosa
715 21 Florent Torregrosa
. scripts-config.sh
716 21 Florent Torregrosa
717 1 Julien Enselme
echo -e "Quotas: 9.1 GB\n"
718 1 Julien Enselme
719 1 Julien Enselme
echo "Assos:"
720 1 Julien Enselme
du -hcs $dir_multi_assos | grep total
721 1 Julien Enselme
echo -e "\n"
722 1 Julien Enselme
723 1 Julien Enselme
echo "D6:"
724 1 Julien Enselme
cd $d6_dir_sites
725 1 Julien Enselme
du -h -d 1
726 1 Julien Enselme
echo -e "\n"
727 1 Julien Enselme
728 1 Julien Enselme
echo "D7:"
729 1 Julien Enselme
cd $d7_dir_sites
730 1 Julien Enselme
du -h -d 1
731 1 Julien Enselme
echo -e "\n"
732 1 Julien Enselme
733 1 Julien Enselme
echo "Logs:"
734 1 Julien Enselme
du -hcs $dir_log | grep total
735 1 Julien Enselme
echo -e "\n"
736 21 Florent Torregrosa
737 21 Florent Torregrosa
echo "Backups:"
738 21 Florent Torregrosa
cd $dir_backup
739 41 Florent Torregrosa
du -h -d 2
740 41 Florent Torregrosa
</code>
741 41 Florent Torregrosa
</pre>
742 41 Florent Torregrosa
743 41 Florent Torregrosa
h2. drushcronone
744 41 Florent Torregrosa
745 41 Florent Torregrosa
<pre>
746 41 Florent Torregrosa
<code class="php">
747 41 Florent Torregrosa
#!/bin/sh
748 41 Florent Torregrosa
749 41 Florent Torregrosa
. scripts-config.sh
750 41 Florent Torregrosa
751 41 Florent Torregrosa
if [ $# -lt 1 ]; then
752 41 Florent Torregrosa
  echo "usage: $0 <site's folder name>"
753 41 Florent Torregrosa
  exit 1
754 41 Florent Torregrosa
fi
755 41 Florent Torregrosa
756 41 Florent Torregrosa
cd "$d6_sites_dir/$*"
757 41 Florent Torregrosa
pwd;
758 1 Julien Enselme
drush cron;
759 21 Florent Torregrosa
</code>
760 21 Florent Torregrosa
</pre>
761 21 Florent Torregrosa
762 21 Florent Torregrosa
h2. flush-files.sh
763 21 Florent Torregrosa
764 21 Florent Torregrosa
<pre>
765 21 Florent Torregrosa
<code class="php">
766 21 Florent Torregrosa
#!/bin/sh
767 21 Florent Torregrosa
768 21 Florent Torregrosa
# ARGS: number of files to keep, email address
769 21 Florent Torregrosa
# usage: flush files from a folder except a number equal to argument.
770 21 Florent Torregrosa
771 21 Florent Torregrosa
# Check if scripts-config.sh is imported.
772 21 Florent Torregrosa
if [ -z $scripts_utils ] ; then
773 21 Florent Torregrosa
    echo "Import of scripts-utils.sh required."
774 21 Florent Torregrosa
    exit 1
775 21 Florent Torregrosa
fi
776 21 Florent Torregrosa
777 21 Florent Torregrosa
check_arguments $# 2
778 21 Florent Torregrosa
779 21 Florent Torregrosa
backups_number=`ls | wc -l`
780 1 Julien Enselme
let "number_of_backups_to_delete = backups_number - $1"
781 21 Florent Torregrosa
782 21 Florent Torregrosa
if [ $number_of_backups_to_delete -gt 0 ] ; then
783 21 Florent Torregrosa
    ls | head -$number_of_backups_to_delete | xargs rm
784 21 Florent Torregrosa
else
785 21 Florent Torregrosa
    dir=`pwd`
786 21 Florent Torregrosa
    echo "There are not enough files in $dir to Flush it. Check if backup script works fine." | mail -s "[db] $dir has a backup problem" $2
787 21 Florent Torregrosa
fi
788 1 Julien Enselme
</code>
789 21 Florent Torregrosa
</pre>
790 21 Florent Torregrosa
791 21 Florent Torregrosa
h2. flush-full-databases-backups.sh
792 21 Florent Torregrosa
793 21 Florent Torregrosa
<pre>
794 21 Florent Torregrosa
<code class="php">
795 21 Florent Torregrosa
#!/bin/sh
796 21 Florent Torregrosa
797 21 Florent Torregrosa
. scripts-config.sh
798 21 Florent Torregrosa
799 21 Florent Torregrosa
# ARGS: Drupal version
800 21 Florent Torregrosa
801 21 Florent Torregrosa
cd $dir_full_backup/$1
802 41 Florent Torregrosa
803 21 Florent Torregrosa
for dir in `ls` ; do
804 1 Julien Enselme
    cd $dir
805 21 Florent Torregrosa
    flush-files.sh $db_full_backup_number $email_multi_assos
806 21 Florent Torregrosa
    cd -
807 21 Florent Torregrosa
done
808 1 Julien Enselme
</code>
809 21 Florent Torregrosa
</pre>
810 21 Florent Torregrosa
811 21 Florent Torregrosa
h2. flush-individual-databases-backups.sh
812 21 Florent Torregrosa
813 21 Florent Torregrosa
<pre>
814 21 Florent Torregrosa
<code class="php">
815 21 Florent Torregrosa
#!/bin/sh
816 21 Florent Torregrosa
817 21 Florent Torregrosa
. scripts-config.sh
818 21 Florent Torregrosa
819 21 Florent Torregrosa
# ARGS: manual or auto, Drupal version
820 21 Florent Torregrosa
821 21 Florent Torregrosa
cd $dir_individual_backup/$1/$2
822 21 Florent Torregrosa
823 21 Florent Torregrosa
for dir in `ls` ; do
824 21 Florent Torregrosa
    cd $dir
825 21 Florent Torregrosa
    if [ $1 = 'auto' ] ; then
826 41 Florent Torregrosa
        flush-files.sh $db_individual_auto_backup_number $email_multi_assos
827 21 Florent Torregrosa
    else
828 21 Florent Torregrosa
        flush-files.sh $db_individual_manual_backup_number $email_multi_assos
829 21 Florent Torregrosa
    fi
830 1 Julien Enselme
    cd -
831 21 Florent Torregrosa
done
832 21 Florent Torregrosa
</code>
833 21 Florent Torregrosa
</pre>
834 21 Florent Torregrosa
835 21 Florent Torregrosa
h2. scripts-config-site.sh
836 21 Florent Torregrosa
837 21 Florent Torregrosa
<pre>
838 21 Florent Torregrosa
<code class="php">
839 21 Florent Torregrosa
#!/bin/sh
840 21 Florent Torregrosa
841 21 Florent Torregrosa
# Sets useful variables of a site.
842 21 Florent Torregrosa
# ARGS: site_name
843 21 Florent Torregrosa
# Requires scripts-config.sh
844 21 Florent Torregrosa
845 21 Florent Torregrosa
# Check if scripts-config.sh is imported.
846 21 Florent Torregrosa
if [ -z $scripts_config ] ; then
847 21 Florent Torregrosa
    echo "Import of scripts-config.sh required."
848 21 Florent Torregrosa
    exit 1
849 21 Florent Torregrosa
fi
850 21 Florent Torregrosa
851 21 Florent Torregrosa
if [ -z $1 ] ; then
852 1 Julien Enselme
    echo "This script needs a site name as argument."
853 21 Florent Torregrosa
    exit 1
854 21 Florent Torregrosa
fi
855 21 Florent Torregrosa
856 21 Florent Torregrosa
scripts_config_site='imported'
857 21 Florent Torregrosa
858 21 Florent Torregrosa
d7_site_name=$1
859 21 Florent Torregrosa
d7_site_dir="$d7_dir_sites/assos.centrale-marseille.fr.$d7_site_name"
860 1 Julien Enselme
d7_site_settings="$d7_site_dir/settings.php"
861 21 Florent Torregrosa
</code>
862 21 Florent Torregrosa
</pre>
863 21 Florent Torregrosa
864 21 Florent Torregrosa
h2. scripts-config.sh
865 21 Florent Torregrosa
866 21 Florent Torregrosa
<pre>
867 21 Florent Torregrosa
<code class="php">
868 21 Florent Torregrosa
#!/bin/sh
869 21 Florent Torregrosa
870 21 Florent Torregrosa
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/games:/usr/local/sbin:/usr/local/bin:/users/guest/assos/bin
871 21 Florent Torregrosa
PATH=$PATH:/usr/guest/assos/bin
872 21 Florent Torregrosa
873 21 Florent Torregrosa
scripts_config='imported'
874 21 Florent Torregrosa
875 41 Florent Torregrosa
email_multi_assos="assos@centrale-marseille.fr"
876 21 Florent Torregrosa
877 21 Florent Torregrosa
dir_multi_assos='/users/guest/assos'
878 21 Florent Torregrosa
dir_scripts="$dir_multi_assos/bin"
879 21 Florent Torregrosa
dir_template="$dir_multi_assos/template"
880 21 Florent Torregrosa
881 21 Florent Torregrosa
###### Database
882 21 Florent Torregrosa
db_server="myassos.serv.int"
883 21 Florent Torregrosa
db_user="assos"
884 21 Florent Torregrosa
dir_log="$dir_multi_assos/log"
885 21 Florent Torregrosa
886 21 Florent Torregrosa
###### Backup
887 21 Florent Torregrosa
db_full_backup_number=3
888 21 Florent Torregrosa
db_individual_manual_backup_number=3
889 21 Florent Torregrosa
db_individual_auto_backup_number=3
890 21 Florent Torregrosa
891 21 Florent Torregrosa
dir_backup="$dir_multi_assos/backup"
892 21 Florent Torregrosa
dir_full_backup="$dir_backup/full"
893 21 Florent Torregrosa
dir_individual_backup="$dir_backup/individual"
894 21 Florent Torregrosa
dir_individual_manual_backup="$dir_individual_backup/manual"
895 21 Florent Torregrosa
dir_individual_auto_backup="$dir_individual_backup/auto"
896 21 Florent Torregrosa
897 21 Florent Torregrosa
898 21 Florent Torregrosa
###### D7 variables
899 21 Florent Torregrosa
d7_dir="$dir_multi_assos/htmltest"
900 21 Florent Torregrosa
d7_dir_sites="$d7_dir/sites"
901 21 Florent Torregrosa
902 21 Florent Torregrosa
### Log
903 21 Florent Torregrosa
d7_dir_log="$dir_log/d7"
904 21 Florent Torregrosa
905 21 Florent Torregrosa
### Backup
906 21 Florent Torregrosa
d7_dir_full_backup="$dir_full_backup/d7"
907 21 Florent Torregrosa
d7_dir_individual_manual_backup="$dir_individual_manual_backup/d7"
908 21 Florent Torregrosa
d7_dir_individual_auto_backup="$dir_individual_auto_backup/d7"
909 21 Florent Torregrosa
910 21 Florent Torregrosa
### Template
911 21 Florent Torregrosa
d7_settings_template_name="settings-D7-bddinde-template.php"
912 21 Florent Torregrosa
d7_settings_template="$dir_template/$d7_settings_template_name"
913 21 Florent Torregrosa
914 21 Florent Torregrosa
915 21 Florent Torregrosa
###### D6 variables
916 21 Florent Torregrosa
d6_dir="$dir_multi_assos/html"
917 1 Julien Enselme
d6_dir_sites="$d6_dir/sites"
918 21 Florent Torregrosa
919 21 Florent Torregrosa
### Backup
920 21 Florent Torregrosa
d6_dir_full_backup="$dir_full_backup/d6"
921 1 Julien Enselme
d6_dir_individual_manual_backup="$dir_individual_manual_backup/d6"
922 1 Julien Enselme
d6_dir_individual_auto_backup="$dir_individual_auto_backup/d6"
923 21 Florent Torregrosa
</code>
924 21 Florent Torregrosa
</pre>
925 21 Florent Torregrosa
926 21 Florent Torregrosa
h2. scripts-utils.sh
927 21 Florent Torregrosa
928 21 Florent Torregrosa
<pre>
929 21 Florent Torregrosa
<code class="php">
930 21 Florent Torregrosa
#!/bin/sh
931 1 Julien Enselme
932 21 Florent Torregrosa
# This script contains useful functions for other scripts.
933 21 Florent Torregrosa
934 21 Florent Torregrosa
# Check if scripts-config.sh is imported.
935 21 Florent Torregrosa
if [ -z $scripts_config ] ; then
936 21 Florent Torregrosa
    echo "Import of scripts-config.sh required."
937 21 Florent Torregrosa
    exit 1
938 21 Florent Torregrosa
fi
939 21 Florent Torregrosa
940 21 Florent Torregrosa
scripts_utils='imported'
941 21 Florent Torregrosa
942 21 Florent Torregrosa
ask_password() {
943 21 Florent Torregrosa
    # read -s doesn't work with sh.
944 1 Julien Enselme
    # usage: pass=`ask_password "password please:"`
945 41 Florent Torregrosa
    echo $1 >&2
946 21 Florent Torregrosa
    echo -n ">" >&2
947 41 Florent Torregrosa
    stty_avant=`stty -g`
948 41 Florent Torregrosa
    stty -echo
949 21 Florent Torregrosa
    read password
950 21 Florent Torregrosa
    stty $stty_avant
951 21 Florent Torregrosa
    echo "$password"
952 21 Florent Torregrosa
    unset password
953 21 Florent Torregrosa
}
954 21 Florent Torregrosa
955 21 Florent Torregrosa
ask_password_db() {
956 21 Florent Torregrosa
    # ARGS: server_name, user_name
957 1 Julien Enselme
    local db_password="pour_boucler"
958 41 Florent Torregrosa
    # empty db request to validate password
959 21 Florent Torregrosa
    while ! mysql -h $1 -u $2 -p$db_password -e "" 2>/dev/null ; do
960 21 Florent Torregrosa
        db_password=`ask_password "database password:"`
961 21 Florent Torregrosa
    done
962 21 Florent Torregrosa
    echo $db_password
963 21 Florent Torregrosa
}
964 21 Florent Torregrosa
965 21 Florent Torregrosa
generate_password(){
966 21 Florent Torregrosa
    # ARGS: [password_length]
967 21 Florent Torregrosa
    # The password contains special characters. '/' must be excluded to avoid sed malfunction.
968 21 Florent Torregrosa
969 21 Florent Torregrosa
    local site_password='/'
970 21 Florent Torregrosa
971 21 Florent Torregrosa
    if [ -z $1 ] ; then
972 41 Florent Torregrosa
        local password_length=20
973 21 Florent Torregrosa
    else
974 21 Florent Torregrosa
        local password_length=$1
975 21 Florent Torregrosa
    fi
976 21 Florent Torregrosa
977 21 Florent Torregrosa
    while echo "$site_password" | grep -Fq '/' ; do
978 21 Florent Torregrosa
        site_password=`dd if=/dev/urandom count=1 | uuencode -m - | head -n 2 | tail -n 1 | cut -c-$password_length`
979 21 Florent Torregrosa
    done
980 21 Florent Torregrosa
981 21 Florent Torregrosa
    echo $site_password
982 21 Florent Torregrosa
}
983 21 Florent Torregrosa
984 21 Florent Torregrosa
count_d7_sites(){
985 21 Florent Torregrosa
    find $d7_dir_sites -type d ! -name all -maxdepth 1 | wc -l
986 41 Florent Torregrosa
}
987 21 Florent Torregrosa
988 21 Florent Torregrosa
check_arguments() {
989 21 Florent Torregrosa
    # ARGS: number of arguments passed to script, number of arguments required
990 11 Julien Enselme
    if [ $1 -lt $2  ] ; then
991 11 Julien Enselme
        echo "Number of arguments insuffisant."
992 1 Julien Enselme
        exit 1
993 1 Julien Enselme
    fi
994 1 Julien Enselme
}
995 1 Julien Enselme
</code>
996 1 Julien Enselme
</pre>