source: LMDZ4/branches/LMDZ4-dev/libf/dyn3dpar/leapfrog_p.F @ 1195

Last change on this file since 1195 was 1195, checked in by yann meurdesoif, 15 years ago

Correction : getparam n'etait pas initialise, chaque processeur ecrivait dans le meme fichier 99.fort, le code plantait sur mercure en fin de run lors du close(99) dans leapfrog_p.F

  • Property svn:eol-style set to native
  • Property svn:keywords set to Author Date Id Revision
File size: 48.6 KB
Line 
1!
2! $Header$
3!
4c
5c
6
7      SUBROUTINE leapfrog_p(ucov,vcov,teta,ps,masse,phis,q,clesphy0,
8     &                    time_0)
9
10       USE misc_mod
11       USE parallel
12       USE times
13       USE mod_hallo
14       USE Bands
15       USE Write_Field
16       USE Write_Field_p
17       USE vampir
18       USE timer_filtre, ONLY : print_filtre_timer
19       USE infotrac
20       USE guide_p_mod, ONLY : guide_main
21       USE getparam
22
23      IMPLICIT NONE
24
25c      ......   Version  du 10/01/98    ..........
26
27c             avec  coordonnees  verticales hybrides
28c   avec nouveaux operat. dissipation * ( gradiv2,divgrad2,nxgraro2 )
29
30c=======================================================================
31c
32c   Auteur:  P. Le Van /L. Fairhead/F.Hourdin
33c   -------
34c
35c   Objet:
36c   ------
37c
38c   GCM LMD nouvelle grille
39c
40c=======================================================================
41c
42c  ... Dans inigeom , nouveaux calculs pour les elongations  cu , cv
43c      et possibilite d'appeler une fonction f(y)  a derivee tangente
44c      hyperbolique a la  place de la fonction a derivee sinusoidale.
45
46c  ... Possibilite de choisir le shema pour l'advection de
47c        q  , en modifiant iadv dans traceur.def  (10/02) .
48c
49c      Pour Van-Leer + Vapeur d'eau saturee, iadv(1)=4. (F.Codron,10/99)
50c      Pour Van-Leer iadv=10
51c
52c-----------------------------------------------------------------------
53c   Declarations:
54c   -------------
55
56#include "dimensions.h"
57#include "paramet.h"
58#include "comconst.h"
59#include "comdissnew.h"
60#include "comvert.h"
61#include "comgeom.h"
62#include "logic.h"
63#include "temps.h"
64#include "control.h"
65#include "ener.h"
66#include "description.h"
67#include "serre.h"
68#include "com_io_dyn.h"
69#include "iniprint.h"
70#include "academic.h"
71     
72      INTEGER         longcles
73      PARAMETER     ( longcles = 20 )
74      REAL  clesphy0( longcles )
75
76      real zqmin,zqmax
77      INTEGER nbetatmoy, nbetatdem,nbetat
78
79c   variables dynamiques
80      REAL :: vcov(ip1jm,llm),ucov(ip1jmp1,llm) ! vents covariants
81      REAL :: teta(ip1jmp1,llm)                 ! temperature potentielle
82      REAL :: q(ip1jmp1,llm,nqtot)              ! champs advectes
83      REAL :: ps(ip1jmp1)                       ! pression  au sol
84      REAL,SAVE :: p (ip1jmp1,llmp1  )               ! pression aux interfac.des couches
85      REAL,SAVE :: pks(ip1jmp1)                      ! exner au  sol
86      REAL,SAVE :: pk(ip1jmp1,llm)                   ! exner au milieu des couches
87      REAL,SAVE :: pkf(ip1jmp1,llm)                  ! exner filt.au milieu des couches
88      REAL :: masse(ip1jmp1,llm)                ! masse d'air
89      REAL :: phis(ip1jmp1)                     ! geopotentiel au sol
90      REAL,SAVE :: phi(ip1jmp1,llm)                  ! geopotentiel
91      REAL,SAVE :: w(ip1jmp1,llm)                    ! vitesse verticale
92
93c variables dynamiques intermediaire pour le transport
94      REAL,SAVE :: pbaru(ip1jmp1,llm),pbarv(ip1jm,llm) !flux de masse
95
96c   variables dynamiques au pas -1
97      REAL,SAVE :: vcovm1(ip1jm,llm),ucovm1(ip1jmp1,llm)
98      REAL,SAVE :: tetam1(ip1jmp1,llm),psm1(ip1jmp1)
99      REAL,SAVE :: massem1(ip1jmp1,llm)
100
101c   tendances dynamiques
102      REAL,SAVE :: dv(ip1jm,llm),du(ip1jmp1,llm)
103      REAL,SAVE :: dteta(ip1jmp1,llm),dp(ip1jmp1)
104      REAL,DIMENSION(:,:,:), ALLOCATABLE, SAVE :: dq
105
106c   tendances de la dissipation
107      REAL,SAVE :: dvdis(ip1jm,llm),dudis(ip1jmp1,llm)
108      REAL,SAVE :: dtetadis(ip1jmp1,llm)
109
110c   tendances physiques
111      REAL,SAVE :: dvfi(ip1jm,llm),dufi(ip1jmp1,llm)
112      REAL,SAVE :: dtetafi(ip1jmp1,llm)
113      REAL,SAVE :: dpfi(ip1jmp1)
114      REAL,DIMENSION(:,:,:),ALLOCATABLE,SAVE :: dqfi
115
116c   variables pour le fichier histoire
117      REAL dtav      ! intervalle de temps elementaire
118
119      REAL tppn(iim),tpps(iim),tpn,tps
120c
121      INTEGER itau,itaufinp1,iav
122      INTEGER*4  iday ! jour julien
123      REAL       time ! Heure de la journee en fraction d'1 jour
124
125      REAL  SSUM
126      REAL time_0
127      REAL,SAVE :: finvmaold(ip1jmp1,llm)
128
129cym      LOGICAL  lafin
130      LOGICAL :: lafin
131      INTEGER ij,iq,l
132      INTEGER ik
133
134      real time_step, t_wrt, t_ops
135
136      REAL rdayvrai,rdaym_ini
137      LOGICAL first,callinigrads
138
139      data callinigrads/.true./
140      character*10 string10
141
142      REAL,SAVE :: alpha(ip1jmp1,llm),beta(ip1jmp1,llm)
143      REAL,SAVE :: flxw(ip1jmp1,llm) ! flux de masse verticale
144
145c+jld variables test conservation energie
146      REAL,SAVE :: ecin(ip1jmp1,llm),ecin0(ip1jmp1,llm)
147C     Tendance de la temp. potentiel d (theta)/ d t due a la
148C     tansformation d'energie cinetique en energie thermique
149C     cree par la dissipation
150      REAL,SAVE :: dtetaecdt(ip1jmp1,llm)
151      REAL,SAVE :: vcont(ip1jm,llm),ucont(ip1jmp1,llm)
152      REAL,SAVE :: vnat(ip1jm,llm),unat(ip1jmp1,llm)
153      REAL      d_h_vcol, d_qt, d_qw, d_ql, d_ec
154      CHARACTER*15 ztit
155!      INTEGER   ip_ebil_dyn  ! PRINT level for energy conserv. diag.
156!      SAVE      ip_ebil_dyn
157!      DATA      ip_ebil_dyn/0/
158c-jld
159
160      character*80 dynhist_file, dynhistave_file
161      character*20 modname
162      character*80 abort_message
163
164C Calendrier
165      LOGICAL true_calendar
166      PARAMETER (true_calendar = .false.)
167
168      logical,PARAMETER :: dissip_conservative=.TRUE.
169 
170      INTEGER testita
171      PARAMETER (testita = 9)
172     
173c declaration liees au parallelisme
174      INTEGER :: ierr
175      LOGICAL :: FirstCaldyn
176      LOGICAL :: FirstPhysic
177      INTEGER :: ijb,ije,j,i
178      type(Request) :: TestRequest
179      type(Request) :: Request_Dissip
180      type(Request) :: Request_physic
181      REAL,SAVE :: dvfi_tmp(iip1,llm),dufi_tmp(iip1,llm)
182      REAL,SAVE :: dtetafi_tmp(iip1,llm)
183      REAL,DIMENSION(:,:,:),ALLOCATABLE,SAVE :: dqfi_tmp
184      REAL,SAVE :: dpfi_tmp(iip1)
185
186      INTEGER :: true_itau
187      LOGICAL :: verbose=.true.
188      INTEGER :: iapptrac
189      INTEGER :: AdjustCount
190      INTEGER :: var_time
191      LOGICAL :: ok_start_timer=.FALSE.
192      LOGICAL, SAVE :: firstcall=.TRUE.
193
194c$OMP MASTER
195      ItCount=0
196c$OMP END MASTER     
197      true_itau=0
198      FirstCaldyn=.TRUE.
199      FirstPhysic=.TRUE.
200      iapptrac=0
201      AdjustCount = 0
202      lafin=.false.
203     
204      itaufin   = nday*day_step
205      itaufinp1 = itaufin +1
206      modname="leapfrog_p"
207
208      itau = 0
209      iday = day_ini+itau/day_step
210      time = FLOAT(itau-(iday-day_ini)*day_step)/day_step+time_0
211         IF(time.GT.1.) THEN
212          time = time-1.
213          iday = iday+1
214         ENDIF
215
216c Allocate variables depending on dynamic variable nqtot
217c$OMP MASTER
218         IF (firstcall) THEN
219            firstcall=.FALSE.
220            ALLOCATE(dq(ip1jmp1,llm,nqtot))
221            ALLOCATE(dqfi(ip1jmp1,llm,nqtot))
222            ALLOCATE(dqfi_tmp(iip1,llm,nqtot))
223         END IF
224c$OMP END MASTER     
225c$OMP BARRIER
226
227c-----------------------------------------------------------------------
228c   On initialise la pression et la fonction d'Exner :
229c   --------------------------------------------------
230
231c$OMP MASTER
232      dq=0.
233      CALL pression ( ip1jmp1, ap, bp, ps, p       )
234      CALL exner_hyb( ip1jmp1, ps, p,alpha,beta, pks, pk, pkf )
235c$OMP END MASTER
236c-----------------------------------------------------------------------
237c   Debut de l'integration temporelle:
238c   ----------------------------------
239c et du parallelisme !!
240
241   1  CONTINUE
242
243c$OMP MASTER
244
245      CALL barrier
246     
247c$OMP END MASTER
248c$OMP BARRIER
249
250
251#ifdef CPP_IOIPSL
252      if (ok_guide) then
253!$OMP MASTER
254        call guide_main(itau,ucov,vcov,teta,q,masse,ps)
255!$OMP END MASTER
256!$OMP BARRIER
257      endif
258#endif
259
260c
261c     IF( MOD( itau, 10* day_step ).EQ.0 )  THEN
262c       CALL  test_period ( ucov,vcov,teta,q,p,phis )
263c       PRINT *,' ----   Test_period apres continue   OK ! -----', itau
264c     ENDIF
265c
266cym      CALL SCOPY( ijmllm ,vcov , 1, vcovm1 , 1 )
267cym      CALL SCOPY( ijp1llm,ucov , 1, ucovm1 , 1 )
268cym      CALL SCOPY( ijp1llm,teta , 1, tetam1 , 1 )
269cym      CALL SCOPY( ijp1llm,masse, 1, massem1, 1 )
270cym      CALL SCOPY( ip1jmp1, ps  , 1,   psm1 , 1 )
271
272       if (FirstCaldyn) then
273c$OMP MASTER
274         ucovm1=ucov
275         vcovm1=vcov
276         tetam1= teta
277         massem1= masse
278         psm1= ps
279         
280         finvmaold = masse
281         CALL filtreg ( finvmaold ,jjp1, llm, -2,2, .TRUE., 1 )
282c$OMP END MASTER
283c$OMP BARRIER
284       else
285! Save fields obtained at previous time step as '...m1'
286         ijb=ij_begin
287         ije=ij_end
288
289c$OMP MASTER           
290         psm1     (ijb:ije) = ps    (ijb:ije)
291c$OMP END MASTER
292
293c$OMP DO SCHEDULE(STATIC,OMP_CHUNK)         
294         DO l=1,llm     
295           ije=ij_end
296           ucovm1   (ijb:ije,l) = ucov  (ijb:ije,l)
297           tetam1   (ijb:ije,l) = teta  (ijb:ije,l)
298           massem1  (ijb:ije,l) = masse (ijb:ije,l)
299           finvmaold(ijb:ije,l)=masse(ijb:ije,l)
300                 
301           if (pole_sud) ije=ij_end-iip1
302           vcovm1(ijb:ije,l) = vcov  (ijb:ije,l)
303       
304
305         ENDDO
306c$OMP ENDDO 
307
308
309          CALL filtreg_p ( finvmaold ,jj_begin,jj_end,jjp1,
310     .                    llm, -2,2, .TRUE., 1 )
311
312       endif ! of if (FirstCaldyn)
313       
314      forward = .TRUE.
315      leapf   = .FALSE.
316      dt      =  dtvr
317
318c   ...    P.Le Van .26/04/94  ....
319
320cym      CALL SCOPY   ( ijp1llm,   masse, 1, finvmaold,     1 )
321cym      CALL filtreg ( finvmaold ,jjp1, llm, -2,2, .TRUE., 1 )
322
323cym  ne sert a rien
324cym      call minmax(ijp1llm,q(:,:,3),zqmin,zqmax)
325
326   2  CONTINUE
327
328c$OMP MASTER
329      ItCount=ItCount+1
330      if (MOD(ItCount,1)==1) then
331        debug=.true.
332      else
333        debug=.false.
334      endif
335c$OMP END MASTER
336c-----------------------------------------------------------------------
337
338c   date:
339c   -----
340
341
342c   gestion des appels de la physique et des dissipations:
343c   ------------------------------------------------------
344c
345c   ...    P.Le Van  ( 6/02/95 )  ....
346
347      apphys = .FALSE.
348      statcl = .FALSE.
349      conser = .FALSE.
350      apdiss = .FALSE.
351c      idissip=1
352      IF( purmats ) THEN
353         IF( MOD(itau,iconser) .EQ.0.AND.  forward    ) conser = .TRUE.
354         IF( MOD(itau,idissip ).EQ.0.AND..NOT.forward ) apdiss = .TRUE.
355         IF( MOD(itau,iphysiq ).EQ.0.AND..NOT.forward
356     s          .and. iflag_phys.EQ.1                 ) apphys = .TRUE.
357      ELSE
358         IF( MOD(itau   ,iconser) .EQ. 0              ) conser = .TRUE.
359         IF( MOD(itau+1,idissip)  .EQ. 0              ) apdiss = .TRUE.
360         IF( MOD(itau+1,iphysiq).EQ.0.AND.iflag_phys.EQ.1) apphys=.TRUE.
361      END IF
362
363cym    ---> Pour le moment     
364cym      apphys = .FALSE.
365      statcl = .FALSE.
366      conser = .FALSE.
367     
368      if (firstCaldyn) then
369c$OMP MASTER
370          call SetDistrib(jj_Nb_Caldyn)
371c$OMP END MASTER
372c$OMP BARRIER
373          firstCaldyn=.FALSE.
374cym          call InitTime
375c$OMP MASTER
376          call Init_timer
377c$OMP END MASTER
378      endif
379
380c$OMP MASTER     
381      IF (ok_start_timer) THEN
382        CALL InitTime
383        ok_start_timer=.FALSE.
384      ENDIF     
385c$OMP END MASTER     
386     
387      if (Adjust) then
388c$OMP MASTER
389        AdjustCount=AdjustCount+1
390        if (iapptrac==iapp_tracvl .and. (forward. OR . leapf)
391     &         .and. itau/iphysiq>2 .and. Adjustcount>30) then
392           AdjustCount=0
393           call allgather_timer_average
394
395        if (Verbose) then
396       
397        print *,'*********************************'
398        print *,'******    TIMER CALDYN     ******'
399        do i=0,mpi_size-1
400          print *,'proc',i,' :   Nb Bandes  :',jj_nb_caldyn(i),
401     &            '  : temps moyen :',
402     &             timer_average(jj_nb_caldyn(i),timer_caldyn,i),
403     &            '+-',timer_delta(jj_nb_caldyn(i),timer_caldyn,i)
404        enddo
405     
406        print *,'*********************************'
407        print *,'******    TIMER VANLEER    ******'
408        do i=0,mpi_size-1
409          print *,'proc',i,' :   Nb Bandes  :',jj_nb_vanleer(i),
410     &            '  : temps moyen :',
411     &             timer_average(jj_nb_vanleer(i),timer_vanleer,i),
412     &            '+-',timer_delta(jj_nb_vanleer(i),timer_vanleer,i)
413        enddo
414     
415        print *,'*********************************'
416        print *,'******    TIMER DISSIP    ******'
417        do i=0,mpi_size-1
418          print *,'proc',i,' :   Nb Bandes  :',jj_nb_dissip(i),
419     &            '  : temps moyen :',
420     &             timer_average(jj_nb_dissip(i),timer_dissip,i),
421     &             '+-',timer_delta(jj_nb_dissip(i),timer_dissip,i)
422        enddo
423       
424        if (mpi_rank==0) call WriteBands
425       
426       endif
427       
428         call AdjustBands_caldyn
429         if (mpi_rank==0) call WriteBands
430         
431         call Register_SwapFieldHallo(ucov,ucov,ip1jmp1,llm,
432     &                                jj_Nb_caldyn,0,0,TestRequest)
433         call Register_SwapFieldHallo(ucovm1,ucovm1,ip1jmp1,llm,
434     &                                jj_Nb_caldyn,0,0,TestRequest)
435         call Register_SwapFieldHallo(vcov,vcov,ip1jm,llm,
436     &                                jj_Nb_caldyn,0,0,TestRequest)
437         call Register_SwapFieldHallo(vcovm1,vcovm1,ip1jm,llm,
438     &                                jj_Nb_caldyn,0,0,TestRequest)
439         call Register_SwapFieldHallo(teta,teta,ip1jmp1,llm,
440     &                                jj_Nb_caldyn,0,0,TestRequest)
441         call Register_SwapFieldHallo(tetam1,tetam1,ip1jmp1,llm,
442     &                                jj_Nb_caldyn,0,0,TestRequest)
443         call Register_SwapFieldHallo(masse,masse,ip1jmp1,llm,
444     &                                jj_Nb_caldyn,0,0,TestRequest)
445         call Register_SwapFieldHallo(massem1,massem1,ip1jmp1,llm,
446     &                                jj_Nb_caldyn,0,0,TestRequest)
447         call Register_SwapFieldHallo(ps,ps,ip1jmp1,1,
448     &                                jj_Nb_caldyn,0,0,TestRequest)
449         call Register_SwapFieldHallo(psm1,psm1,ip1jmp1,1,
450     &                                jj_Nb_caldyn,0,0,TestRequest)
451         call Register_SwapFieldHallo(pkf,pkf,ip1jmp1,llm,
452     &                                jj_Nb_caldyn,0,0,TestRequest)
453         call Register_SwapFieldHallo(pk,pk,ip1jmp1,llm,
454     &                                jj_Nb_caldyn,0,0,TestRequest)
455         call Register_SwapFieldHallo(pks,pks,ip1jmp1,1,
456     &                                jj_Nb_caldyn,0,0,TestRequest)
457         call Register_SwapFieldHallo(phis,phis,ip1jmp1,1,
458     &                                jj_Nb_caldyn,0,0,TestRequest)
459         call Register_SwapFieldHallo(phi,phi,ip1jmp1,llm,
460     &                                jj_Nb_caldyn,0,0,TestRequest)
461         call Register_SwapFieldHallo(finvmaold,finvmaold,ip1jmp1,llm,
462     &                                jj_Nb_caldyn,0,0,TestRequest)
463 
464        do j=1,nqtot
465         call Register_SwapFieldHallo(q(1,1,j),q(1,1,j),ip1jmp1,llm,
466     &                                jj_nb_caldyn,0,0,TestRequest)
467        enddo
468
469         call SetDistrib(jj_nb_caldyn)
470         call SendRequest(TestRequest)
471         call WaitRequest(TestRequest)
472         
473        call AdjustBands_dissip
474        call AdjustBands_physic
475
476      endif
477c$OMP END MASTER 
478      endif       
479     
480     
481     
482c-----------------------------------------------------------------------
483c   calcul des tendances dynamiques:
484c   --------------------------------
485c$OMP BARRIER
486c$OMP MASTER
487       call VTb(VThallo)
488c$OMP END MASTER
489
490       call Register_Hallo(ucov,ip1jmp1,llm,1,1,1,1,TestRequest)
491       call Register_Hallo(vcov,ip1jm,llm,1,1,1,1,TestRequest)
492       call Register_Hallo(teta,ip1jmp1,llm,1,1,1,1,TestRequest)
493       call Register_Hallo(ps,ip1jmp1,1,1,2,2,1,TestRequest)
494       call Register_Hallo(pkf,ip1jmp1,llm,1,1,1,1,TestRequest)
495       call Register_Hallo(pk,ip1jmp1,llm,1,1,1,1,TestRequest)
496       call Register_Hallo(pks,ip1jmp1,1,1,1,1,1,TestRequest)
497       call Register_Hallo(p,ip1jmp1,llmp1,1,1,1,1,TestRequest)
498       
499c       do j=1,nqtot
500c         call Register_Hallo(q(1,1,j),ip1jmp1,llm,1,1,1,1,
501c     *                       TestRequest)
502c        enddo
503
504       call SendRequest(TestRequest)
505c$OMP BARRIER
506       call WaitRequest(TestRequest)
507
508c$OMP MASTER
509       call VTe(VThallo)
510c$OMP END MASTER
511c$OMP BARRIER
512     
513      if (debug) then       
514!$OMP BARRIER
515!$OMP MASTER
516        call WriteField_p('ucov',reshape(ucov,(/iip1,jmp1,llm/)))
517        call WriteField_p('vcov',reshape(vcov,(/iip1,jjm,llm/)))
518        call WriteField_p('teta',reshape(teta,(/iip1,jmp1,llm/)))
519        call WriteField_p('ps',reshape(ps,(/iip1,jmp1/)))
520        call WriteField_p('masse',reshape(masse,(/iip1,jmp1,llm/)))
521        call WriteField_p('pk',reshape(pk,(/iip1,jmp1,llm/)))
522        call WriteField_p('pks',reshape(pks,(/iip1,jmp1/)))
523        call WriteField_p('pkf',reshape(pkf,(/iip1,jmp1,llm/)))
524        call WriteField_p('phis',reshape(phis,(/iip1,jmp1/)))
525        do j=1,nqtot
526          call WriteField_p('q'//trim(int2str(j)),
527     .                reshape(q(:,:,j),(/iip1,jmp1,llm/)))
528        enddo
529!$OMP END MASTER       
530c$OMP BARRIER
531      endif
532
533     
534      True_itau=True_itau+1
535
536c$OMP MASTER
537      IF (prt_level>9) THEN
538        WRITE(lunout,*)"leapfrog_p: Iteration No",True_itau
539      ENDIF
540
541
542      call start_timer(timer_caldyn)
543
544      CALL geopot_p  ( ip1jmp1, teta  , pk , pks,  phis  , phi   )
545
546     
547      call VTb(VTcaldyn)
548c$OMP END MASTER
549      var_time=time+iday-day_ini
550
551c$OMP BARRIER
552!      CALL FTRACE_REGION_BEGIN("caldyn")
553      CALL caldyn_p
554     $  ( itau,ucov,vcov,teta,ps,masse,pk,pkf,phis ,
555     $    phi,conser,du,dv,dteta,dp,w, pbaru,pbarv, time+iday-day_ini )
556
557!      CALL FTRACE_REGION_END("caldyn")
558
559c$OMP MASTER
560      call VTe(VTcaldyn)
561c$OMP END MASTER     
562
563cc$OMP BARRIER
564cc$OMP MASTER
565!      call WriteField_p('du',reshape(du,(/iip1,jmp1,llm/)))
566!      call WriteField_p('dv',reshape(dv,(/iip1,jjm,llm/)))
567!      call WriteField_p('dteta',reshape(dteta,(/iip1,jmp1,llm/)))
568!      call WriteField_p('dp',reshape(dp,(/iip1,jmp1/)))
569!      call WriteField_p('w',reshape(w,(/iip1,jmp1,llm/)))
570!      call WriteField_p('pbaru',reshape(pbaru,(/iip1,jmp1,llm/)))
571!      call WriteField_p('pbarv',reshape(pbarv,(/iip1,jjm,llm/)))
572!      call WriteField_p('p',reshape(p,(/iip1,jmp1,llmp1/)))
573!      call WriteField_p('masse',reshape(masse,(/iip1,jmp1,llm/)))
574!      call WriteField_p('pk',reshape(pk,(/iip1,jmp1,llm/)))
575cc$OMP END MASTER
576
577c-----------------------------------------------------------------------
578c   calcul des tendances advection des traceurs (dont l'humidite)
579c   -------------------------------------------------------------
580
581      IF( forward. OR . leapf )  THEN
582cc$OMP PARALLEL DEFAULT(SHARED)
583c
584         CALL caladvtrac_p(q,pbaru,pbarv,
585     *        p, masse, dq,  teta,
586     .        flxw,pk, iapptrac)
587
588       IF (offline) THEN
589Cmaf stokage du flux de masse pour traceurs OFF-LINE
590
591#ifdef CPP_IOIPSL
592           CALL fluxstokenc_p(pbaru,pbarv,masse,teta,phi,phis,
593     .   dtvr, itau)
594#endif
595
596
597         ENDIF ! of IF (offline)
598c
599      ENDIF ! of IF( forward. OR . leapf )
600cc$OMP END PARALLEL
601
602c-----------------------------------------------------------------------
603c   integrations dynamique et traceurs:
604c   ----------------------------------
605
606c$OMP MASTER
607       call VTb(VTintegre)
608c$OMP END MASTER
609c      call WriteField_p('ucovm1',reshape(ucovm1,(/iip1,jmp1,llm/)))
610c      call WriteField_p('vcovm1',reshape(vcovm1,(/iip1,jjm,llm/)))
611c      call WriteField_p('tetam1',reshape(tetam1,(/iip1,jmp1,llm/)))
612c      call WriteField_p('psm1',reshape(psm1,(/iip1,jmp1/)))
613c      call WriteField_p('ucov',reshape(ucov,(/iip1,jmp1,llm/)))
614c      call WriteField_p('vcov',reshape(vcov,(/iip1,jjm,llm/)))
615c      call WriteField_p('teta',reshape(teta,(/iip1,jmp1,llm/)))
616c      call WriteField_p('ps',reshape(ps,(/iip1,jmp1/)))
617cc$OMP PARALLEL DEFAULT(SHARED)
618c$OMP BARRIER
619!       CALL FTRACE_REGION_BEGIN("integrd")
620
621       CALL integrd_p ( 2,vcovm1,ucovm1,tetam1,psm1,massem1 ,
622     $         dv,du,dteta,dq,dp,vcov,ucov,teta,q,ps,masse,phis ,
623     $              finvmaold                                    )
624
625!       CALL FTRACE_REGION_END("integrd")
626c$OMP BARRIER
627cc$OMP MASTER
628c      call WriteField_p('ucovm1',reshape(ucovm1,(/iip1,jmp1,llm/)))
629c      call WriteField_p('vcovm1',reshape(vcovm1,(/iip1,jjm,llm/)))
630c      call WriteField_p('tetam1',reshape(tetam1,(/iip1,jmp1,llm/)))
631c      call WriteField_p('psm1',reshape(psm1,(/iip1,jmp1/)))
632c      call WriteField_p('ucov',reshape(ucov,(/iip1,jmp1,llm/)))
633c      call WriteField_p('vcov',reshape(vcov,(/iip1,jjm,llm/)))
634c      call WriteField_p('teta',reshape(teta,(/iip1,jmp1,llm/)))
635c      call WriteField_p('dteta',reshape(dteta,(/iip1,jmp1,llm/)))
636c
637c      call WriteField_p('ps',reshape(ps,(/iip1,jmp1/)))
638c      do j=1,nqtot
639c        call WriteField_p('q'//trim(int2str(j)),
640c     .                reshape(q(:,:,j),(/iip1,jmp1,llm/)))
641c        call WriteField_p('dq'//trim(int2str(j)),
642c     .                reshape(dq(:,:,j),(/iip1,jmp1,llm/)))
643c      enddo
644cc$OMP END MASTER
645
646
647c$OMP MASTER
648       call VTe(VTintegre)
649c$OMP END MASTER
650c .P.Le Van (26/04/94  ajout de  finvpold dans l'appel d'integrd)
651c
652c-----------------------------------------------------------------------
653c   calcul des tendances physiques:
654c   -------------------------------
655c    ########   P.Le Van ( Modif le  6/02/95 )   ###########
656c
657       IF( purmats )  THEN
658          IF( itau.EQ.itaufin.AND..NOT.forward ) lafin = .TRUE.
659       ELSE
660          IF( itau+1. EQ. itaufin )              lafin = .TRUE.
661       ENDIF
662
663cc$OMP END PARALLEL
664
665c
666c
667       IF( apphys )  THEN
668c
669c     .......   Ajout   P.Le Van ( 17/04/96 )   ...........
670c
671cc$OMP PARALLEL DEFAULT(SHARED)
672cc$OMP+         PRIVATE(rdaym_ini,rdayvrai,ijb,ije)
673
674c$OMP MASTER
675         call suspend_timer(timer_caldyn)
676
677         write(lunout,*)
678     &   'leapfrog_p: Entree dans la physique : Iteration No ',true_itau
679c$OMP END MASTER
680
681         CALL pression_p (  ip1jmp1, ap, bp, ps,  p      )
682
683c$OMP BARRIER
684         CALL exner_hyb_p(  ip1jmp1, ps, p,alpha,beta,pks, pk, pkf )
685c$OMP BARRIER
686           rdaym_ini  = itau * dtvr / daysec
687           rdayvrai   = rdaym_ini  + day_ini
688
689
690c rajout debug
691c       lafin = .true.
692
693
694c   Inbterface avec les routines de phylmd (phymars ... )
695c   -----------------------------------------------------
696
697c+jld
698
699c  Diagnostique de conservation de l'energie : initialisation
700      IF (ip_ebil_dyn.ge.1 ) THEN
701          ztit='bil dyn'
702! Ehouarn: be careful, diagedyn is Earth-specific (includes ../phylmd/..)!
703           IF (planet_type.eq."earth") THEN
704            CALL diagedyn(ztit,2,1,1,dtphys
705     &    , ucov    , vcov , ps, p ,pk , teta , q(:,:,1), q(:,:,2))
706           ENDIF
707      ENDIF
708c-jld
709c$OMP BARRIER
710c$OMP MASTER
711        call VTb(VThallo)
712c$OMP END MASTER
713
714        call SetTag(Request_physic,800)
715       
716        call Register_SwapFieldHallo(ucov,ucov,ip1jmp1,llm,
717     *                               jj_Nb_physic,2,2,Request_physic)
718       
719        call Register_SwapFieldHallo(vcov,vcov,ip1jm,llm,
720     *                               jj_Nb_physic,2,2,Request_physic)
721       
722        call Register_SwapFieldHallo(teta,teta,ip1jmp1,llm,
723     *                               jj_Nb_physic,2,2,Request_physic)
724       
725        call Register_SwapFieldHallo(masse,masse,ip1jmp1,llm,
726     *                               jj_Nb_physic,1,2,Request_physic)
727
728        call Register_SwapFieldHallo(p,p,ip1jmp1,llmp1,
729     *                               jj_Nb_physic,2,2,Request_physic)
730       
731        call Register_SwapFieldHallo(pk,pk,ip1jmp1,llm,
732     *                               jj_Nb_physic,2,2,Request_physic)
733       
734        call Register_SwapFieldHallo(phis,phis,ip1jmp1,1,
735     *                               jj_Nb_physic,2,2,Request_physic)
736       
737        call Register_SwapFieldHallo(phi,phi,ip1jmp1,llm,
738     *                               jj_Nb_physic,2,2,Request_physic)
739       
740        call Register_SwapFieldHallo(w,w,ip1jmp1,llm,
741     *                               jj_Nb_physic,2,2,Request_physic)
742       
743c        call SetDistrib(jj_nb_vanleer)
744        do j=1,nqtot
745 
746          call Register_SwapFieldHallo(q(1,1,j),q(1,1,j),ip1jmp1,llm,
747     *                               jj_Nb_physic,2,2,Request_physic)
748        enddo
749
750        call Register_SwapFieldHallo(flxw,flxw,ip1jmp1,llm,
751     *                               jj_Nb_physic,2,2,Request_physic)
752       
753        call SendRequest(Request_Physic)
754c$OMP BARRIER
755        call WaitRequest(Request_Physic)       
756
757c$OMP BARRIER
758c$OMP MASTER
759        call SetDistrib(jj_nb_Physic)
760        call VTe(VThallo)
761       
762        call VTb(VTphysiq)
763c$OMP END MASTER
764c$OMP BARRIER
765
766cc$OMP MASTER       
767c      call WriteField_p('ucovfi',reshape(ucov,(/iip1,jmp1,llm/)))
768c      call WriteField_p('vcovfi',reshape(vcov,(/iip1,jjm,llm/)))
769c      call WriteField_p('tetafi',reshape(teta,(/iip1,jmp1,llm/)))
770c      call WriteField_p('pfi',reshape(p,(/iip1,jmp1,llmp1/)))
771c      call WriteField_p('pkfi',reshape(pk,(/iip1,jmp1,llm/)))
772cc$OMP END MASTER
773cc$OMP BARRIER
774!        CALL FTRACE_REGION_BEGIN("calfis")
775        CALL calfis_p(lafin ,rdayvrai,time  ,
776     $               ucov,vcov,teta,q,masse,ps,p,pk,phis,phi ,
777     $               du,dv,dteta,dq,
778     $               flxw,
779     $               clesphy0, dufi,dvfi,dtetafi,dqfi,dpfi  )
780!        CALL FTRACE_REGION_END("calfis")
781        ijb=ij_begin
782        ije=ij_end 
783        if ( .not. pole_nord) then
784c$OMP DO SCHEDULE(STATIC,OMP_CHUNK)
785          DO l=1,llm
786          dufi_tmp(1:iip1,l)   = dufi(ijb:ijb+iim,l)
787          dvfi_tmp(1:iip1,l)   = dvfi(ijb:ijb+iim,l) 
788          dtetafi_tmp(1:iip1,l)= dtetafi(ijb:ijb+iim,l) 
789          dqfi_tmp(1:iip1,l,:) = dqfi(ijb:ijb+iim,l,:) 
790          ENDDO
791c$OMP END DO NOWAIT
792
793c$OMP MASTER
794          dpfi_tmp(1:iip1)     = dpfi(ijb:ijb+iim) 
795c$OMP END MASTER
796        endif ! of if ( .not. pole_nord)
797
798c$OMP BARRIER
799c$OMP MASTER
800        call SetDistrib(jj_nb_Physic_bis)
801
802        call VTb(VThallo)
803c$OMP END MASTER
804c$OMP BARRIER
805 
806        call Register_Hallo(dufi,ip1jmp1,llm,
807     *                      1,0,0,1,Request_physic)
808       
809        call Register_Hallo(dvfi,ip1jm,llm,
810     *                      1,0,0,1,Request_physic)
811       
812        call Register_Hallo(dtetafi,ip1jmp1,llm,
813     *                      1,0,0,1,Request_physic)
814
815        call Register_Hallo(dpfi,ip1jmp1,1,
816     *                      1,0,0,1,Request_physic)
817
818        do j=1,nqtot
819          call Register_Hallo(dqfi(1,1,j),ip1jmp1,llm,
820     *                        1,0,0,1,Request_physic)
821        enddo
822       
823        call SendRequest(Request_Physic)
824c$OMP BARRIER
825        call WaitRequest(Request_Physic)
826             
827c$OMP BARRIER
828c$OMP MASTER
829        call VTe(VThallo)
830 
831        call SetDistrib(jj_nb_Physic)
832c$OMP END MASTER
833c$OMP BARRIER       
834                ijb=ij_begin
835        if (.not. pole_nord) then
836       
837c$OMP DO SCHEDULE(STATIC,OMP_CHUNK)
838          DO l=1,llm
839            dufi(ijb:ijb+iim,l) = dufi(ijb:ijb+iim,l)+dufi_tmp(1:iip1,l)
840            dvfi(ijb:ijb+iim,l) = dvfi(ijb:ijb+iim,l)+dvfi_tmp(1:iip1,l)
841            dtetafi(ijb:ijb+iim,l) = dtetafi(ijb:ijb+iim,l)
842     &                              +dtetafi_tmp(1:iip1,l)
843            dqfi(ijb:ijb+iim,l,:) = dqfi(ijb:ijb+iim,l,:)
844     &                              + dqfi_tmp(1:iip1,l,:)
845          ENDDO
846c$OMP END DO NOWAIT
847
848c$OMP MASTER
849          dpfi(ijb:ijb+iim)   = dpfi(ijb:ijb+iim)+ dpfi_tmp(1:iip1)
850c$OMP END MASTER
851         
852        endif ! of if (.not. pole_nord)
853c$OMP BARRIER
854cc$OMP MASTER       
855c      call WriteField_p('dufi',reshape(dufi,(/iip1,jmp1,llm/)))
856c      call WriteField_p('dvfi',reshape(dvfi,(/iip1,jjm,llm/)))
857c      call WriteField_p('dtetafi',reshape(dtetafi,(/iip1,jmp1,llm/)))
858c      call WriteField_p('dpfi',reshape(dpfi,(/iip1,jmp1/)))
859cc$OMP END MASTER
860c     
861c      do j=1,nqtot
862c        call WriteField_p('dqfi'//trim(int2str(j)),
863c     .                reshape(dqfi(:,:,j),(/iip1,jmp1,llm/)))
864c      enddo
865
866c      ajout des tendances physiques:
867c      ------------------------------
868         IF (ok_strato) THEN
869           CALL top_bound_p( vcov,ucov,teta,masse,dufi,dvfi,dtetafi)
870         ENDIF
871       
872          CALL addfi_p( dtphys, leapf, forward   ,
873     $                  ucov, vcov, teta , q   ,ps ,
874     $                 dufi, dvfi, dtetafi , dqfi ,dpfi  )
875
876c$OMP BARRIER
877c$OMP MASTER
878        call VTe(VTphysiq)
879
880        call VTb(VThallo)
881c$OMP END MASTER
882
883        call SetTag(Request_physic,800)
884        call Register_SwapField(ucov,ucov,ip1jmp1,llm,
885     *                               jj_Nb_caldyn,Request_physic)
886       
887        call Register_SwapField(vcov,vcov,ip1jm,llm,
888     *                               jj_Nb_caldyn,Request_physic)
889       
890        call Register_SwapField(teta,teta,ip1jmp1,llm,
891     *                               jj_Nb_caldyn,Request_physic)
892       
893        call Register_SwapField(masse,masse,ip1jmp1,llm,
894     *                               jj_Nb_caldyn,Request_physic)
895
896        call Register_SwapField(p,p,ip1jmp1,llmp1,
897     *                               jj_Nb_caldyn,Request_physic)
898       
899        call Register_SwapField(pk,pk,ip1jmp1,llm,
900     *                               jj_Nb_caldyn,Request_physic)
901       
902        call Register_SwapField(phis,phis,ip1jmp1,1,
903     *                               jj_Nb_caldyn,Request_physic)
904       
905        call Register_SwapField(phi,phi,ip1jmp1,llm,
906     *                               jj_Nb_caldyn,Request_physic)
907       
908        call Register_SwapField(w,w,ip1jmp1,llm,
909     *                               jj_Nb_caldyn,Request_physic)
910
911        do j=1,nqtot
912       
913          call Register_SwapField(q(1,1,j),q(1,1,j),ip1jmp1,llm,
914     *                               jj_Nb_caldyn,Request_physic)
915       
916        enddo
917
918        call SendRequest(Request_Physic)
919c$OMP BARRIER
920        call WaitRequest(Request_Physic)     
921
922c$OMP BARRIER
923c$OMP MASTER
924       call VTe(VThallo)
925       call SetDistrib(jj_Nb_caldyn)
926c$OMP END MASTER
927c$OMP BARRIER
928c
929c  Diagnostique de conservation de l'energie : difference
930      IF (ip_ebil_dyn.ge.1 ) THEN
931          ztit='bil phys'
932          CALL diagedyn(ztit,2,1,1,dtphys
933     e  , ucov    , vcov , ps, p ,pk , teta , q(:,:,1), q(:,:,2))
934      ENDIF
935
936cc$OMP MASTER     
937c      if (debug) then
938c       call WriteField_p('ucovfi',reshape(ucov,(/iip1,jmp1,llm/)))
939c       call WriteField_p('vcovfi',reshape(vcov,(/iip1,jjm,llm/)))
940c       call WriteField_p('tetafi',reshape(teta,(/iip1,jmp1,llm/)))
941c      endif
942cc$OMP END MASTER
943
944
945c-jld
946c$OMP MASTER
947         call resume_timer(timer_caldyn)
948         if (FirstPhysic) then
949           ok_start_timer=.TRUE.
950           FirstPhysic=.false.
951         endif
952c$OMP END MASTER
953       ENDIF ! of IF( apphys )
954
955      IF(iflag_phys.EQ.2) THEN ! "Newtonian" case
956c   Calcul academique de la physique = Rappel Newtonien + fritcion
957c   --------------------------------------------------------------
958cym       teta(:,:)=teta(:,:)
959cym     s  -iphysiq*dtvr*(teta(:,:)-tetarappel(:,:))/taurappel
960       ijb=ij_begin
961       ije=ij_end
962       teta(ijb:ije,:)=teta(ijb:ije,:)
963     s  -iphysiq*dtvr*(teta(ijb:ije,:)-tetarappel(ijb:ije,:))/taurappel
964
965       call Register_Hallo(ucov,ip1jmp1,llm,0,1,1,0,Request_Physic)
966       call Register_Hallo(vcov,ip1jm,llm,1,1,1,1,Request_Physic)
967       call SendRequest(Request_Physic)
968       call WaitRequest(Request_Physic)     
969
970       call friction_p(ucov,vcov,iphysiq*dtvr)
971      ENDIF ! of IF(iflag_phys.EQ.2)
972
973
974        CALL pression_p ( ip1jmp1, ap, bp, ps, p                  )
975c$OMP BARRIER
976        CALL exner_hyb_p( ip1jmp1, ps, p,alpha,beta, pks, pk, pkf )
977c$OMP BARRIER
978
979cc$OMP END PARALLEL
980
981c-----------------------------------------------------------------------
982c   dissipation horizontale et verticale  des petites echelles:
983c   ----------------------------------------------------------
984
985      IF(apdiss) THEN
986cc$OMP  PARALLEL DEFAULT(SHARED)
987cc$OMP+          PRIVATE(ijb,ije,tppn,tpn,tpps,tps)
988c$OMP MASTER
989        call suspend_timer(timer_caldyn)
990       
991c       print*,'Entree dans la dissipation : Iteration No ',true_itau
992c   calcul de l'energie cinetique avant dissipation
993c       print *,'Passage dans la dissipation'
994
995        call VTb(VThallo)
996c$OMP END MASTER
997
998c$OMP BARRIER
999
1000        call Register_SwapFieldHallo(ucov,ucov,ip1jmp1,llm,
1001     *                          jj_Nb_dissip,1,1,Request_dissip)
1002
1003        call Register_SwapFieldHallo(vcov,vcov,ip1jm,llm,
1004     *                          jj_Nb_dissip,1,1,Request_dissip)
1005
1006        call Register_SwapField(teta,teta,ip1jmp1,llm,
1007     *                          jj_Nb_dissip,Request_dissip)
1008
1009        call Register_SwapField(p,p,ip1jmp1,llmp1,
1010     *                          jj_Nb_dissip,Request_dissip)
1011
1012        call Register_SwapField(pk,pk,ip1jmp1,llm,
1013     *                          jj_Nb_dissip,Request_dissip)
1014
1015        call SendRequest(Request_dissip)       
1016c$OMP BARRIER
1017        call WaitRequest(Request_dissip)       
1018
1019c$OMP BARRIER
1020c$OMP MASTER
1021        call SetDistrib(jj_Nb_dissip)
1022        call VTe(VThallo)
1023        call VTb(VTdissipation)
1024        call start_timer(timer_dissip)
1025c$OMP END MASTER
1026c$OMP BARRIER
1027
1028        call covcont_p(llm,ucov,vcov,ucont,vcont)
1029        call enercin_p(vcov,ucov,vcont,ucont,ecin0)
1030
1031c   dissipation
1032
1033!        CALL FTRACE_REGION_BEGIN("dissip")
1034        CALL dissip_p(vcov,ucov,teta,p,dvdis,dudis,dtetadis)
1035!        CALL FTRACE_REGION_END("dissip")
1036         
1037        ijb=ij_begin
1038        ije=ij_end
1039c$OMP DO SCHEDULE(STATIC,OMP_CHUNK)       
1040        DO l=1,llm
1041          ucov(ijb:ije,l)=ucov(ijb:ije,l)+dudis(ijb:ije,l)
1042        ENDDO
1043c$OMP END DO NOWAIT       
1044        if (pole_sud) ije=ije-iip1
1045c$OMP DO SCHEDULE(STATIC,OMP_CHUNK)       
1046        DO l=1,llm
1047          vcov(ijb:ije,l)=vcov(ijb:ije,l)+dvdis(ijb:ije,l)
1048        ENDDO
1049c$OMP END DO NOWAIT       
1050
1051c       teta=teta+dtetadis
1052
1053
1054c------------------------------------------------------------------------
1055        if (dissip_conservative) then
1056C       On rajoute la tendance due a la transform. Ec -> E therm. cree
1057C       lors de la dissipation
1058c$OMP BARRIER
1059c$OMP MASTER
1060            call suspend_timer(timer_dissip)
1061            call VTb(VThallo)
1062c$OMP END MASTER
1063            call Register_Hallo(ucov,ip1jmp1,llm,1,1,1,1,Request_Dissip)
1064            call Register_Hallo(vcov,ip1jm,llm,1,1,1,1,Request_Dissip)
1065            call SendRequest(Request_Dissip)
1066c$OMP BARRIER
1067            call WaitRequest(Request_Dissip)
1068c$OMP MASTER
1069            call VTe(VThallo)
1070            call resume_timer(timer_dissip)
1071c$OMP END MASTER
1072c$OMP BARRIER           
1073            call covcont_p(llm,ucov,vcov,ucont,vcont)
1074            call enercin_p(vcov,ucov,vcont,ucont,ecin)
1075           
1076            ijb=ij_begin
1077            ije=ij_end
1078c$OMP DO SCHEDULE(STATIC,OMP_CHUNK)           
1079            do l=1,llm
1080              do ij=ijb,ije
1081                dtetaecdt(ij,l)= (ecin0(ij,l)-ecin(ij,l))/ pk(ij,l)
1082                dtetadis(ij,l)=dtetadis(ij,l)+dtetaecdt(ij,l)
1083              enddo
1084            enddo
1085c$OMP END DO NOWAIT           
1086       endif
1087
1088       ijb=ij_begin
1089       ije=ij_end
1090c$OMP DO SCHEDULE(STATIC,OMP_CHUNK)           
1091         do l=1,llm
1092           do ij=ijb,ije
1093              teta(ij,l)=teta(ij,l)+dtetadis(ij,l)
1094           enddo
1095         enddo
1096c$OMP END DO NOWAIT         
1097c------------------------------------------------------------------------
1098
1099
1100c    .......        P. Le Van (  ajout  le 17/04/96  )   ...........
1101c   ...      Calcul de la valeur moyenne, unique de h aux poles  .....
1102c
1103
1104        ijb=ij_begin
1105        ije=ij_end
1106         
1107        if (pole_nord) then
1108c$OMP DO SCHEDULE(STATIC,OMP_CHUNK)
1109          DO l  =  1, llm
1110            DO ij =  1,iim
1111             tppn(ij)  = aire(  ij    ) * teta(  ij    ,l)
1112            ENDDO
1113             tpn  = SSUM(iim,tppn,1)/apoln
1114
1115            DO ij = 1, iip1
1116             teta(  ij    ,l) = tpn
1117            ENDDO
1118          ENDDO
1119c$OMP END DO NOWAIT
1120
1121c$OMP MASTER               
1122          DO ij =  1,iim
1123            tppn(ij)  = aire(  ij    ) * ps (  ij    )
1124          ENDDO
1125            tpn  = SSUM(iim,tppn,1)/apoln
1126 
1127          DO ij = 1, iip1
1128            ps(  ij    ) = tpn
1129          ENDDO
1130c$OMP END MASTER
1131        endif
1132       
1133        if (pole_sud) then
1134c$OMP DO SCHEDULE(STATIC,OMP_CHUNK)
1135          DO l  =  1, llm
1136            DO ij =  1,iim
1137             tpps(ij)  = aire(ij+ip1jm) * teta(ij+ip1jm,l)
1138            ENDDO
1139             tps  = SSUM(iim,tpps,1)/apols
1140
1141            DO ij = 1, iip1
1142             teta(ij+ip1jm,l) = tps
1143            ENDDO
1144          ENDDO
1145c$OMP END DO NOWAIT
1146
1147c$OMP MASTER               
1148          DO ij =  1,iim
1149            tpps(ij)  = aire(ij+ip1jm) * ps (ij+ip1jm)
1150          ENDDO
1151            tps  = SSUM(iim,tpps,1)/apols
1152 
1153          DO ij = 1, iip1
1154            ps(ij+ip1jm) = tps
1155          ENDDO
1156c$OMP END MASTER
1157        endif
1158
1159
1160c$OMP BARRIER
1161c$OMP MASTER
1162        call VTe(VTdissipation)
1163
1164        call stop_timer(timer_dissip)
1165       
1166        call VTb(VThallo)
1167c$OMP END MASTER
1168        call Register_SwapField(ucov,ucov,ip1jmp1,llm,
1169     *                          jj_Nb_caldyn,Request_dissip)
1170
1171        call Register_SwapField(vcov,vcov,ip1jm,llm,
1172     *                          jj_Nb_caldyn,Request_dissip)
1173
1174        call Register_SwapField(teta,teta,ip1jmp1,llm,
1175     *                          jj_Nb_caldyn,Request_dissip)
1176
1177        call Register_SwapField(p,p,ip1jmp1,llmp1,
1178     *                          jj_Nb_caldyn,Request_dissip)
1179
1180        call Register_SwapField(pk,pk,ip1jmp1,llm,
1181     *                          jj_Nb_caldyn,Request_dissip)
1182
1183        call SendRequest(Request_dissip)       
1184c$OMP BARRIER
1185        call WaitRequest(Request_dissip)       
1186
1187c$OMP BARRIER
1188c$OMP MASTER
1189        call SetDistrib(jj_Nb_caldyn)
1190        call VTe(VThallo)
1191        call resume_timer(timer_caldyn)
1192c        print *,'fin dissipation'
1193c$OMP END MASTER
1194c$OMP BARRIER
1195      END IF
1196
1197cc$OMP END PARALLEL
1198
1199c ajout debug
1200c              IF( lafin ) then 
1201c                abort_message = 'Simulation finished'
1202c                call abort_gcm(modname,abort_message,0)
1203c              ENDIF
1204       
1205c   ********************************************************************
1206c   ********************************************************************
1207c   .... fin de l'integration dynamique  et physique pour le pas itau ..
1208c   ********************************************************************
1209c   ********************************************************************
1210
1211c   preparation du pas d'integration suivant  ......
1212cym      call WriteField('ucov',reshape(ucov,(/iip1,jmp1,llm/)))
1213cym      call WriteField('vcov',reshape(vcov,(/iip1,jjm,llm/)))
1214c$OMP MASTER     
1215      call stop_timer(timer_caldyn)
1216c$OMP END MASTER
1217      IF (itau==itaumax) then
1218c$OMP MASTER
1219            call allgather_timer_average
1220
1221      if (mpi_rank==0) then
1222       
1223        print *,'*********************************'
1224        print *,'******    TIMER CALDYN     ******'
1225        do i=0,mpi_size-1
1226          print *,'proc',i,' :   Nb Bandes  :',jj_nb_caldyn(i),
1227     &            '  : temps moyen :',
1228     &             timer_average(jj_nb_caldyn(i),timer_caldyn,i)
1229        enddo
1230     
1231        print *,'*********************************'
1232        print *,'******    TIMER VANLEER    ******'
1233        do i=0,mpi_size-1
1234          print *,'proc',i,' :   Nb Bandes  :',jj_nb_vanleer(i),
1235     &            '  : temps moyen :',
1236     &             timer_average(jj_nb_vanleer(i),timer_vanleer,i)
1237        enddo
1238     
1239        print *,'*********************************'
1240        print *,'******    TIMER DISSIP    ******'
1241        do i=0,mpi_size-1
1242          print *,'proc',i,' :   Nb Bandes  :',jj_nb_dissip(i),
1243     &            '  : temps moyen :',
1244     &             timer_average(jj_nb_dissip(i),timer_dissip,i)
1245        enddo
1246       
1247        print *,'*********************************'
1248        print *,'******    TIMER PHYSIC    ******'
1249        do i=0,mpi_size-1
1250          print *,'proc',i,' :   Nb Bandes  :',jj_nb_physic(i),
1251     &            '  : temps moyen :',
1252     &             timer_average(jj_nb_physic(i),timer_physic,i)
1253        enddo
1254       
1255      endif 
1256     
1257      print *,'Taille du Buffer MPI (REAL*8)',MaxBufferSize
1258      print *,'Taille du Buffer MPI utilise (REAL*8)',MaxBufferSize_Used
1259      print *, 'Temps total ecoule sur la parallelisation :',DiffTime()
1260      print *, 'Temps CPU ecoule sur la parallelisation :',DiffCpuTime()
1261      CALL print_filtre_timer
1262      call fin_getparam
1263        call finalize_parallel
1264c$OMP END MASTER
1265c$OMP BARRIER
1266        RETURN
1267      ENDIF
1268     
1269      IF ( .NOT.purmats ) THEN
1270c       ........................................................
1271c       ..............  schema matsuno + leapfrog  ..............
1272c       ........................................................
1273
1274            IF(forward. OR. leapf) THEN
1275              itau= itau + 1
1276              iday= day_ini+itau/day_step
1277              time= FLOAT(itau-(iday-day_ini)*day_step)/day_step+time_0
1278                IF(time.GT.1.) THEN
1279                  time = time-1.
1280                  iday = iday+1
1281                ENDIF
1282            ENDIF
1283
1284
1285            IF( itau. EQ. itaufinp1 ) then 
1286
1287c$OMP MASTER
1288              call fin_getparam
1289              call finalize_parallel
1290c$OMP END MASTER
1291              abort_message = 'Simulation finished'
1292              call abort_gcm(modname,abort_message,0)
1293              RETURN
1294            ENDIF
1295c-----------------------------------------------------------------------
1296c   ecriture du fichier histoire moyenne:
1297c   -------------------------------------
1298
1299            IF(MOD(itau,iperiod).EQ.0 .OR. itau.EQ.itaufin) THEN
1300c$OMP BARRIER
1301               IF(itau.EQ.itaufin) THEN
1302                  iav=1
1303               ELSE
1304                  iav=0
1305               ENDIF
1306#ifdef CPP_IOIPSL
1307             IF (ok_dynzon) THEN
1308             call Register_Hallo(vcov,ip1jm,llm,1,0,0,1,TestRequest)
1309             call SendRequest(TestRequest)
1310c$OMP BARRIER
1311              call WaitRequest(TestRequest)
1312c$OMP BARRIER
1313c$OMP MASTER
1314              CALL writedynav_p(histaveid, itau,vcov ,
1315     ,                          ucov,teta,pk,phi,q,masse,ps,phis)
1316
1317c ATTENTION!!! bilan_dyn_p ne marche probablement pas avec OpenMP
1318              CALL bilan_dyn_p(2,dtvr*iperiod,dtvr*day_step*periodav,
1319     ,             ps,masse,pk,pbaru,pbarv,teta,phi,ucov,vcov,q)
1320c$OMP END MASTER
1321              ENDIF !ok_dynzon
1322#endif
1323            ENDIF
1324
1325c-----------------------------------------------------------------------
1326c   ecriture de la bande histoire:
1327c   ------------------------------
1328
1329c      IF( MOD(itau,iecri         ).EQ.0) THEN
1330
1331            IF( MOD(itau,iecri*day_step).EQ.0) THEN
1332c$OMP BARRIER
1333c$OMP MASTER
1334              nbetat = nbetatdem
1335              CALL geopot_p(ip1jmp1,teta,pk,pks,phis,phi)
1336       
1337cym        unat=0.
1338       
1339              ijb=ij_begin
1340              ije=ij_end
1341       
1342              if (pole_nord) then
1343                ijb=ij_begin+iip1
1344                unat(1:iip1,:)=0.
1345              endif
1346       
1347              if (pole_sud) then
1348                ije=ij_end-iip1
1349                unat(ij_end-iip1+1:ij_end,:)=0.
1350              endif
1351           
1352              do l=1,llm
1353                unat(ijb:ije,l)=ucov(ijb:ije,l)/cu(ijb:ije)
1354              enddo
1355
1356              ijb=ij_begin
1357              ije=ij_end
1358              if (pole_sud) ije=ij_end-iip1
1359       
1360              do l=1,llm
1361                vnat(ijb:ije,l)=vcov(ijb:ije,l)/cv(ijb:ije)
1362              enddo
1363       
1364#ifdef CPP_IOIPSL
1365 
1366              CALL writehist_p(histid,histvid, itau,vcov,
1367     &                         ucov,teta,phi,q,masse,ps,phis)
1368
1369#endif
1370! For some Grads outputs of fields
1371              if (output_grads_dyn) then
1372! Ehouarn: hope this works the way I think it does:
1373                  call Gather_Field(unat,ip1jmp1,llm,0)
1374                  call Gather_Field(vnat,ip1jm,llm,0)
1375                  call Gather_Field(teta,ip1jmp1,llm,0)
1376                  call Gather_Field(ps,ip1jmp1,1,0)
1377                  do iq=1,nqtot
1378                    call Gather_Field(q(1,1,iq),ip1jmp1,llm,0)
1379                  enddo
1380                  if (mpi_rank==0) then
1381#include "write_grads_dyn.h"
1382                  endif
1383              endif ! of if (output_grads_dyn)
1384c$OMP END MASTER
1385            ENDIF ! of IF(MOD(itau,iecri).EQ.0)
1386
1387            IF(itau.EQ.itaufin) THEN
1388
1389c$OMP BARRIER
1390c$OMP MASTER
1391
1392              if (planet_type.eq."earth") then
1393#ifdef CPP_EARTH
1394! Write an Earth-format restart file
1395                CALL dynredem1_p("restart.nc",0.0,
1396     &                           vcov,ucov,teta,q,masse,ps)
1397
1398#endif
1399              endif ! of if (planet_type.eq."earth")
1400
1401!              CLOSE(99)
1402c$OMP END MASTER
1403            ENDIF ! of IF (itau.EQ.itaufin)
1404
1405c-----------------------------------------------------------------------
1406c   gestion de l'integration temporelle:
1407c   ------------------------------------
1408
1409            IF( MOD(itau,iperiod).EQ.0 )    THEN
1410                    GO TO 1
1411            ELSE IF ( MOD(itau-1,iperiod). EQ. 0 ) THEN
1412
1413                   IF( forward )  THEN
1414c      fin du pas forward et debut du pas backward
1415
1416                      forward = .FALSE.
1417                        leapf = .FALSE.
1418                           GO TO 2
1419
1420                   ELSE
1421c      fin du pas backward et debut du premier pas leapfrog
1422
1423                        leapf =  .TRUE.
1424                        dt  =  2.*dtvr
1425                        GO TO 2
1426                   END IF
1427            ELSE
1428
1429c      ......   pas leapfrog  .....
1430
1431                 leapf = .TRUE.
1432                 dt  = 2.*dtvr
1433                 GO TO 2
1434            END IF ! of IF (MOD(itau,iperiod).EQ.0)
1435                   !    ELSEIF (MOD(itau-1,iperiod).EQ.0)
1436
1437
1438      ELSE ! of IF (.not.purmats)
1439
1440c       ........................................................
1441c       ..............       schema  matsuno        ...............
1442c       ........................................................
1443            IF( forward )  THEN
1444
1445             itau =  itau + 1
1446             iday = day_ini+itau/day_step
1447             time = FLOAT(itau-(iday-day_ini)*day_step)/day_step+time_0
1448
1449                  IF(time.GT.1.) THEN
1450                   time = time-1.
1451                   iday = iday+1
1452                  ENDIF
1453
1454               forward =  .FALSE.
1455               IF( itau. EQ. itaufinp1 ) then 
1456c$OMP MASTER
1457                 call fin_getparam
1458                 call finalize_parallel
1459c$OMP END MASTER
1460                 abort_message = 'Simulation finished'
1461                 call abort_gcm(modname,abort_message,0)
1462                 RETURN
1463               ENDIF
1464               GO TO 2
1465
1466            ELSE ! of IF(forward)
1467
1468              IF(MOD(itau,iperiod).EQ.0 .OR. itau.EQ.itaufin) THEN
1469               IF(itau.EQ.itaufin) THEN
1470                  iav=1
1471               ELSE
1472                  iav=0
1473               ENDIF
1474#ifdef CPP_IOIPSL
1475               IF (ok_dynzon) THEN
1476c$OMP BARRIER
1477
1478               call Register_Hallo(vcov,ip1jm,llm,1,0,0,1,TestRequest)
1479               call SendRequest(TestRequest)
1480c$OMP BARRIER
1481               call WaitRequest(TestRequest)
1482
1483c$OMP BARRIER
1484c$OMP MASTER
1485               CALL writedynav_p(histaveid, itau,vcov ,
1486     ,                          ucov,teta,pk,phi,q,masse,ps,phis)
1487               CALL bilan_dyn_p(2,dtvr*iperiod,dtvr*day_step*periodav,
1488     ,           ps,masse,pk,pbaru,pbarv,teta,phi,ucov,vcov,q)
1489c$OMP END MASTER
1490               END IF !ok_dynzon
1491#endif
1492              ENDIF ! of IF(MOD(itau,iperiod).EQ.0 .OR. itau.EQ.itaufin)
1493
1494
1495c               IF(MOD(itau,iecri         ).EQ.0) THEN
1496              IF(MOD(itau,iecri*day_step).EQ.0) THEN
1497c$OMP BARRIER
1498c$OMP MASTER
1499                nbetat = nbetatdem
1500                CALL geopot_p(ip1jmp1,teta,pk,pks,phis,phi)
1501
1502cym        unat=0.
1503                ijb=ij_begin
1504                ije=ij_end
1505       
1506                if (pole_nord) then
1507                  ijb=ij_begin+iip1
1508                  unat(1:iip1,:)=0.
1509                endif
1510       
1511                if (pole_sud) then
1512                  ije=ij_end-iip1
1513                  unat(ij_end-iip1+1:ij_end,:)=0.
1514                endif
1515           
1516                do l=1,llm
1517                  unat(ijb:ije,l)=ucov(ijb:ije,l)/cu(ijb:ije)
1518                enddo
1519
1520                ijb=ij_begin
1521                ije=ij_end
1522                if (pole_sud) ije=ij_end-iip1
1523       
1524                do l=1,llm
1525                  vnat(ijb:ije,l)=vcov(ijb:ije,l)/cv(ijb:ije)
1526                enddo
1527
1528#ifdef CPP_IOIPSL
1529
1530                CALL writehist_p(histid, histvid, itau,vcov ,
1531     &                           ucov,teta,phi,q,masse,ps,phis)
1532#endif
1533! For some Grads output (but does it work?)
1534                if (output_grads_dyn) then
1535                  call Gather_Field(unat,ip1jmp1,llm,0)
1536                  call Gather_Field(vnat,ip1jm,llm,0)
1537                  call Gather_Field(teta,ip1jmp1,llm,0)
1538                  call Gather_Field(ps,ip1jmp1,1,0)
1539                  do iq=1,nqtot
1540                    call Gather_Field(q(1,1,iq),ip1jmp1,llm,0)
1541                  enddo
1542c     
1543                  if (mpi_rank==0) then
1544#include "write_grads_dyn.h"
1545                  endif
1546                endif ! of if (output_grads_dyn)
1547
1548c$OMP END MASTER
1549              ENDIF ! of IF(MOD(itau,iecri*day_step).EQ.0)
1550
1551              IF(itau.EQ.itaufin) THEN
1552                if (planet_type.eq."earth") then
1553#ifdef CPP_EARTH
1554c$OMP MASTER
1555                   CALL dynredem1_p("restart.nc",0.0,
1556     .                               vcov,ucov,teta,q,masse,ps)
1557c$OMP END MASTER
1558#endif
1559                endif ! of if (planet_type.eq."earth")
1560              ENDIF ! of IF(itau.EQ.itaufin)
1561
1562              forward = .TRUE.
1563              GO TO  1
1564
1565            ENDIF ! of IF (forward)
1566
1567      END IF ! of IF(.not.purmats)
1568c$OMP MASTER
1569      call fin_getparam
1570      call finalize_parallel
1571c$OMP END MASTER
1572      RETURN
1573      END
Note: See TracBrowser for help on using the repository browser.