1 | #!/bin/bash |
---|
2 | |
---|
3 | ################################################################################# |
---|
4 | # A.I : 1e version : Decembre 2019 |
---|
5 | # Reprise Mars 2020 |
---|
6 | # installer les scripts de post-traitement multi-atlas pour LMDZ sur une machine |
---|
7 | # le packege sera integrer sous svn aux sources du modele ..../BOL/ |
---|
8 | # Ce script permet de definir les differents repertoires en fonction de la machine |
---|
9 | # Permet de creer les sscripts job_multi.sh et atlas.sh |
---|
10 | ################################################################################# |
---|
11 | # Definition des coleurs d'affichage |
---|
12 | noir='\e[0;30m' gris='\e[1;30m' rougefonce='\e[0;31m' rose='\e[1;31m' vertfonce='\e[0;32m' vertclair='\e[1;32m' orange='\e[0;33m' jaune='\e[1;33m' bleufonce='\e[0;34m' bleuclair='\e[1;34m' violetfonce='\e[0;35m' violetclair='\e[1;35m' cyanfonce='\e[0;36m' cyanclair='\e[1;36m' grisclair='\e[0;37m' blanc='\e[1;37m' neutre='\e[0;m' |
---|
13 | # AI avril 2020 : A FAIRE : |
---|
14 | # A FAIRE |
---|
15 | # Utiliser des fonctions entete, ... |
---|
16 | # A function pour definir l entete du job en fonction de la machine |
---|
17 | #function jobentete { #1er argument doit etre le nom de la machine |
---|
18 | |
---|
19 | hostname=`hostname` |
---|
20 | login=`whoami` |
---|
21 | |
---|
22 | # CICLAD |
---|
23 | if [ ${hostname:0:5} = cicla ] ; then |
---|
24 | DODSDIR=/prodigfs/ipslfs/dods |
---|
25 | cat <<eod >> entete.sh |
---|
26 | #PBS -N atlas |
---|
27 | #PBS -m a |
---|
28 | #PBS -j oe |
---|
29 | #PBS -q h12 |
---|
30 | #PBS -o atlasNOMSIMULATION.out |
---|
31 | #PBS -S /bin/bash |
---|
32 | #PBS -l nodes=1:ppn=1 |
---|
33 | #PBS -l mem=30gb |
---|
34 | #PBS -l vmem=30gb |
---|
35 | # |
---|
36 | # Commande pour soumettre en bash |
---|
37 | submit=qsub |
---|
38 | |
---|
39 | login=$login |
---|
40 | DODSDIR=$DODSDIR |
---|
41 | eod |
---|
42 | |
---|
43 | cat <<eod >> defatlasenv.sh |
---|
44 | ########################################################################### |
---|
45 | # Environnement |
---|
46 | module list |
---|
47 | which python |
---|
48 | ulimit -s unlimited |
---|
49 | ATLAS_DIR=$DODSDIR/$login/lmdz/atlas/Atlas$$ ; mkdir -p $ATLAS_DIR |
---|
50 | export PYTHONPATH=$PYTHONPATH:/home/fabric/users/denvil/climaf |
---|
51 | export PATH=$PATH:/home/fabric/users/denvil/climaf/bin |
---|
52 | STORAGE=$DODSDIR/$login/lmdz/STORE |
---|
53 | if [ ! -d $DODSDIR/$login/climafCache ] ; then mkdir -p $DODSDIR/$login/climafCache ; fi |
---|
54 | export CLIMAF_CACHE=$DODSDIR/$login/climafCache |
---|
55 | echo CLIMAF_CACHE $CLIMAF_CACHE |
---|
56 | MULTIDIR=$DODSDIR/ipslfs/dods/$login/lmdz/MultiSimu |
---|
57 | ########################################################################### |
---|
58 | eod |
---|
59 | |
---|
60 | fi |
---|
61 | |
---|
62 | # CLIMSERV |
---|
63 | if [ ${hostname:0:5} = camel ] ; then |
---|
64 | DODSDIR=/prodigfs/ipslfs/dods |
---|
65 | cat <<eod > entete.sh |
---|
66 | #PBS -N atlas |
---|
67 | #PBS -m a |
---|
68 | #PBS -j oe |
---|
69 | #PBS -q h12 |
---|
70 | #PBS -o atlasNOMSIMULATION.out |
---|
71 | #PBS -S /bin/bash |
---|
72 | #PBS -l nodes=1:ppn=1 |
---|
73 | #PBS -l mem=30gb |
---|
74 | #PBS -l vmem=30gb |
---|
75 | # |
---|
76 | # Commande pour soumettre en bash |
---|
77 | submit=qsub |
---|
78 | eod |
---|
79 | fi |
---|
80 | |
---|
81 | # IRENE |
---|
82 | if [ ${hostname:0:5} = irene ] ; then |
---|
83 | cat <<eod > definerep.sh |
---|
84 | MAIN_SE= |
---|
85 | TS_DA= |
---|
86 | TS_MO= |
---|
87 | MULTIDIR= |
---|
88 | groupe= |
---|
89 | eod |
---|
90 | cat <<eod > entete.sh |
---|
91 | ###################### |
---|
92 | ## IRENE TGCC/CEA ## |
---|
93 | ###################### |
---|
94 | #MSUB -r multiatlas # Job name |
---|
95 | #MSUB -o multi.out_%I |
---|
96 | #MSUB -e multi.out_%I |
---|
97 | #MSUB -n 1 |
---|
98 | #MSUB -T 36000 # Maximum elapsed time |
---|
99 | #MSUB -q xlarge |
---|
100 | #MSUB -c 8 |
---|
101 | #MSUB -Q normal |
---|
102 | #MSUB -A $groupe |
---|
103 | #MSUB -m store,work,scratch |
---|
104 | # |
---|
105 | # Commande pour soumettre en bash |
---|
106 | submit=ccc_msub |
---|
107 | eod |
---|
108 | fi |
---|
109 | |
---|
110 | # JEAN- |
---|
111 | if [ ${hostname:0:5} = jean- ] ; then |
---|
112 | cat <<eod > definerep.sh |
---|
113 | MAIN_SE= |
---|
114 | TS_DA= |
---|
115 | TS_MO= |
---|
116 | MULTIDIR= |
---|
117 | groupe= |
---|
118 | eod |
---|
119 | cat <<eod > entete.sh |
---|
120 | ###################### |
---|
121 | ## IRENE TGCC/CEA ## |
---|
122 | ###################### |
---|
123 | #MSUB -r multiatlas # Job name |
---|
124 | #MSUB -o multi.out_%I |
---|
125 | #MSUB -e multi.out_%I |
---|
126 | #MSUB -n 1 |
---|
127 | #MSUB -T 36000 # Maximum elapsed time |
---|
128 | #MSUB -q xlarge |
---|
129 | #MSUB -c 8 |
---|
130 | #MSUB -Q normal |
---|
131 | #MSUB -A $groupe |
---|
132 | #MSUB -m store,work,scratch |
---|
133 | # |
---|
134 | # Commande pour soumettre en bash |
---|
135 | submit=sbash |
---|
136 | eod |
---|
137 | fi |
---|
138 | |
---|
139 | # PC (formation et perso linux) |
---|
140 | |
---|
141 | # Machines locales lmd |
---|
142 | |
---|
143 | MULTIDIR=$DODSDIR/ipslfs/dods/$login/lmdz/MultiSimu |
---|
144 | if [ ! -d $MULTIDIR ] ; then mkdir -p $MULTIDIR ; fi |
---|
145 | |
---|
146 | echo -e "${noir}%%%%%%%%%%%%%%%%%%%%%%%%% ${rougefonce} MULTIATLAS LMDZ ${noir}%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%" |
---|
147 | echo -e "${bleufonce}" To create your multi-atlas you needs : |
---|
148 | echo 1. to create your multiatlas directory "example Multi01" : |
---|
149 | echo - mkdir -p /prodigfs/ipslfs/dods/YourLoginName/lmdz/MultiSimu/Multi01 |
---|
150 | echo 2. to define some characeristics of your multi-atlas "names, dates, description of simulations and atlas variables" : |
---|
151 | echo - cp Utils/def.txt Utils/atlas-def /prodigfs/ipslfs/dods/YourLoginName/lmdz/MultiSimu/Multi01/. |
---|
152 | echo define "names, date, description" of simulations in file : |
---|
153 | echo - /prodigfs/ipslfs/dods/YourLoginName/lmdz/MultiSimu/Multi01/def.txt |
---|
154 | echo define atlas variables in file |
---|
155 | echo - /prodigfs/ipslfs/dods/YourLoginName/lmdz/MultiSimu/Multi01/atlas.def |
---|
156 | |
---|
157 | rm -f job_multi.sh |
---|
158 | cat entete.sh >| job_multi.sh |
---|
159 | cat Utils/multi.sh >> job_multi.sh |
---|
160 | chmod +x job_multi.sh |
---|
161 | |
---|
162 | rm -f atlas.sh |
---|
163 | cat entete.sh >| atlas.sh |
---|
164 | cat defatlasenv.sh >> atlas.sh |
---|
165 | cat Utils/atlas0.sh >> atlas.sh |
---|
166 | chmod +x atlas.sh |
---|
167 | \mv atlas.sh atlas/. |
---|
168 | |
---|
169 | echo Then you can run your multiatlas : |
---|
170 | echo ./job_multi.sh Multi01 |
---|
171 | echo -e "${noir}%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%" |
---|