source: trunk/UTIL/PYTHON/planetoplot.py @ 877

Last change on this file since 877 was 877, checked in by aslmd, 12 years ago

UTIL PYTHON. A bug fix for previous commit. Ensure that what is coming from getfieldred has not changed dimension.

  • Property svn:executable set to *
File size: 67.3 KB
Line 
1#######################
2##### PLANETOPLOT #####
3#######################
4
5### A. Spiga     -- LMD -- 06~09/2011 -- General building and mapping capabilities
6### T. Navarro   -- LMD -- 10~11/2011 -- Improved use for GCM and added sections + 1Dplot capabilities
7### A. Colaitis  -- LMD --    11/2011 -- Mostly minor improvements and inter-plot operation capabilities + zrecast interpolation for gcm
8### A. Spiga     -- LMD -- 11~12/2011 -- Extended multivar subplot capabilities + cosmetic changes + general cleaning and tests
9### A. Colaitis  -- LMD --    12/2011 -- Added movie capability [mencoder must be installed]
10### A. Spiga     -- LMD --    12/2011 -- Added HTML animated page capability + general tests of consistency [winds, etc...] + consistent generic movie loop
11### J. Leconte   -- LMD --    02/2012 -- Added area weighted averaging. Compatibility with terrestrial gcm.
12### A. Spiga     -- LMD --    03/2012 -- Cleaning and improved comments
13### T. Navarro   -- LMD --    04/2012 -- Added capabilities (e.g. histograms for difference maps)
14### A. Colaitis  -- LMD -- 05~06/2012 -- Added capabilities for analysis of mesoscale files (wind speed, etc...)
15### A. Spiga     -- LMD -- 04~07/2012 -- Added larger support of files + planets. Corrected a few bugs. Cleaning and improved comments
16### A. Colaitis  -- LMD --    08/2012 -- Added functionalities for further analysis: spectra, hodographs, etc... plus improved flexibility (e.g. grid)
17
18def planetoplot (namefiles,\
19           level=0,\
20           vertmode=0,\
21           proj=None,\
22           back=None,\
23           target=None,
24           stride=3,\
25           var=None,\
26           clb=None,\
27           winds=False,\
28           addchar=None,\
29           vmin=None,\
30           vmax=None,\
31           tile=False,\
32           zoom=None,\
33           display=True,\
34           hole=False,\
35           save="gui",\
36           anomaly=False,\
37           var2=None,\
38           ndiv=10,\
39           mult=1.,\
40           add=0.,\
41           zetitle=["fill"],\
42           slon=None,\
43           slat=None,\
44           svert=None,\
45           stime=None,\
46           outputname=None,\
47           resolution=200,\
48           ope=None,\
49           fileref=None,\
50           minop=0.,\
51           maxop=0.,\
52           titleref="fill",\
53           invert_y=False,\
54           xaxis=[None,None],\
55           yaxis=[None,None],\
56           ylog=False,\
57           xlog=False,\
58           yintegral=False,\
59           blat=None,\
60           blon=None,\
61           tsat=False,\
62           flagnolow=False,\
63           mrate=None,\
64           mquality=False,\
65           trans=1,\
66           zarea=None,\
67           axtime=None,\
68           redope=None,\
69           seevar=False,\
70           xlab=None,\
71           ylab=None,\
72           lbls=None,\
73           lstyle=None,\
74           cross=None,\
75           markdevil=False,\
76           facwind=1.,\
77           trycol=False,\
78           streamflag=False,\
79           nocolorb=False,\
80           analysis=None,\
81           monster=False):
82
83    ####################################################################################################################
84    ### Colorbars http://www.scipy.org/Cookbook/Matplotlib/Show_colormaps?action=AttachFile&do=get&target=colormaps3.png
85
86    #################################
87    ### Load librairies and functions
88    import netCDF4
89
90    import matplotlib as mpl
91    import matplotlib.pyplot
92    import matplotlib.cm
93    from mpl_toolkits.basemap import cm
94    if mrate is not None: from videosink import VideoSink
95
96    import numpy as np
97    from numpy.core.defchararray import find
98    import scipy
99    if analysis in ['laplace']: import scipy.ndimage.laplace as laplace
100
101    import itertools
102    import os
103
104    import myplot
105    from mymath import deg,max,min,mean,writeascii,fig2data,fig2img
106    from times import sol2ls
107    #from singlet import singlet
108
109
110#########################
111### PRELIMINARY STUFF ###
112#########################
113### we say hello
114    print "********************************************"
115    print "********** WELCOME TO PLANETOPLOT **********"
116    print "********************************************"
117    if monster: 
118        print "********* SPEED MODE. EXPERIMENTAL. ********"
119        print "********************************************"
120### we ensure namefiles and var are arrays
121    if not isinstance(namefiles, np.ndarray): namefiles = [namefiles]
122    if not isinstance(var, np.ndarray):       var = [var]
123### we initialize a few variables
124    initime=-1 ; sslon = None ; sslat = None
125    k = 0 ; firstfile = True ; count = 0
126### we perform sanity checks and correct for insufficient information
127    if slon is not None: sslon = np.zeros([1,2])
128    if slat is not None: sslat = np.zeros([1,2])
129    if clb is None:            clb = ["def"]*len(var)
130    elif len(clb) < len(var):  clb = [clb[0]]*len(var) ; print "WARNING: less color than vars! setting all to 1st value."
131    if redope is not None and winds: winds=False ; print "WARNING: no winds with redope. setting winds to False."
132### we set option trycol i.e. the user wants to try a set of colorbars
133    if trycol: clb = ["Greys","Blues","YlOrRd","jet","spectral","hot","RdBu","RdYlBu","Paired"] ; zetitle = clb ; var = [var[0]]*9
134### we avoid specific cases not yet implemented
135    if mrate is not None and len(var) > 1: myplot.errormess("multivar not allowed in movies. should be fixed soon!")
136### we prepare number of plot fields [zelen] and number of plot instances [numplot] according to user choices
137### --> we support multifile and multivar plots : files + vars separated by commas are on the same figure
138    nlon, nlat, nvert, ntime, mapmode, nslices = myplot.determineplot(slon, slat, svert, stime, redope)
139    zelen = len(namefiles)*len(var)
140    if (nslices > 1 and monster): myplot.errormess("multislice + monster not supported yet. to be done soon")
141### we have a special mode obtained by -p noproj in which lat/lon plots are just flat 2D plots
142    if proj == "noproj": mapmode = 0
143### we correct number of plot fields for possible operation (substract, etc...)
144    if ope is not None:
145        if fileref is not None:       zelen = 3*len(var)*len(namefiles)
146        elif "var" in ope:            zelen = zelen + 1
147    numplot = zelen*nslices
148    print "********** FILES, SLICES, VARS, TOTAL PLOTS: ", len(namefiles), nslices, len(var), numplot
149    print "********** MAPMODE: ", mapmode
150### we define the arrays for plot fields -- which will be placed within multiplot loops
151    all_var  = [[]]*zelen ; all_var2  = [[]]*zelen
152    all_title = [[]]*zelen ; all_varname = [[]]*zelen ; all_namefile = [[]]*zelen ; all_colorb = [[]]*zelen
153    all_time = [[]]*zelen ; all_vert = [[]]*zelen ; all_lat = [[]]*zelen ; all_lon = [[]]*zelen
154    all_windu = [[]]*zelen ; all_windv = [[]]*zelen
155    plot_x = [[]]*zelen ; plot_y = [[]]*zelen ; multiplot = [[]]*zelen
156### tool (should be move to mymath)
157    getVar = lambda searchList, ind: [searchList[i] for i in ind]
158#############################
159### LOOP OVER PLOT FIELDS ###
160#############################
161   
162    for nnn in range(len(namefiles)):
163     for vvv in range(len(var)): 
164
165    ### we load each NETCDF objects in namefiles
166      namefile = namefiles[nnn] 
167      nc  = netCDF4.Dataset(namefile)
168    ### we explore the variables in the file
169      varinfile = nc.variables.keys()
170      if seevar: print varinfile ; exit() 
171    ### we define the type of file we have (gcm, meso, etc...)
172      typefile = myplot.whatkindfile(nc)
173      if firstfile:                 typefile0 = typefile
174      elif typefile != typefile0:   myplot.errormess("Not the same kind of files !", [typefile0, typefile])
175    ### we care for input file being 1D simulations
176      is1d=999 
177      if "longitude" in nc.dimensions and "latitude" in nc.dimensions: is1d = len(nc.dimensions["longitude"])*len(nc.dimensions["latitude"])
178      elif "lon" in nc.dimensions and "lat" in nc.dimensions: is1d = len(nc.dimensions["lon"])*len(nc.dimensions["lat"])
179      if typefile in ['gcm','earthgcm'] and is1d == 1:       mapmode=0 ; winds=False
180    ### we create default vert and time prescriptions if not here in case mapping mode is on (lat/lon maps)
181      if redope is None and mapmode == 1:
182          if svert is None:  svert = myplot.readslices(str(level)) ; nvert=1
183          if stime is None and mrate is None:
184             stime = myplot.readslices(str(0)) ; ntime=1 ## this is a default choice
185             print "WELL... nothing about time axis. I took default: first time reference stored in file."
186    ### we get the names of variables to be read. in case only one available, we choose this one.
187    ### (we take out of the test specific names e.g. UV is not in the file but used to ask a wind speed computation)
188      varname = myplot.select_getfield(zvarname=var[vvv],znc=nc,ztypefile=typefile,mode='check')
189    ### we get the names of wind variables to be read (if any)
190      if winds:                                                   
191         [uchar,vchar,metwind] = myplot.getwinddef(nc)             
192         if uchar == 'not found': winds = False
193    ### we tell the user that either no var or no wind is not acceptable
194      if not varname and not winds: myplot.errormess("please set at least winds or var",printvar=nc.variables)
195    ### we get the coordinates lat/lon to be used
196      [lon2d,lat2d] = myplot.getcoorddef(nc)
197    ### we get an adapted map projection if none is provided by the user
198      if proj == None:   proj = myplot.getproj(nc)   
199    ### we define plot boundaries given projection or user choices
200      if firstfile:
201         if proj in ["npstere","spstere"]: [wlon,wlat] = myplot.polarinterv(lon2d,lat2d)
202         elif proj in ["lcc","laea"]:      [wlon,wlat] = myplot.wrfinterv(lon2d,lat2d)
203         else:                             [wlon,wlat] = myplot.simplinterv(lon2d,lat2d)
204         if zoom:                          [wlon,wlat] = myplot.zoomset(wlon,wlat,zoom)
205         elif zarea is not None:           [wlon,wlat] = myplot.latinterv(area=zarea)
206
207#############################################################
208############ WE LOAD 4D DIMENSIONS : x, y, z, t #############
209#############################################################
210
211      ###should be available for GCM or simple files ?
212      ##if ope in ["cat"] and nnn > 0:    count = time[-1] + 1  ## so that a cat is possible with simple subscripts
213
214    ### TYPE 1 : GCM files or simple files
215      if typefile in ["gcm","earthgcm","ecmwf"]:
216      ### this is needed for continuity
217          if slon is not None: sslon = slon 
218          if slat is not None: sslat = slat 
219      ### we define lat/lon vectors. we get what was done in getcoorddef.
220          lat = lat2d[:,0] ; lon = lon2d[0,:]
221      ### we define areas. this is needed for calculate means and weight with area. this is not compulsory (see reduce_field).
222          if "aire" in nc.variables:      area = nc.variables["aire"][:,:]
223          ### --> add a line here if your reference is not present
224          else:                           area = None
225      ### we define altitude vector. either it is referenced or it is guessed based on last variable's dimensions.
226          if "altitude" in nc.variables:   vert = nc.variables["altitude"][:]
227          elif "Alt" in nc.variables:      vert = nc.variables["Alt"][:]
228          elif "lev" in nc.variables:      vert = nc.variables["lev"][:]
229          elif "presnivs" in nc.variables: vert = nc.variables["presnivs"][:]
230          ### --> add a line here if your reference is not present
231          else: 
232              dadim = myplot.getdimfromvar(nc) ; print "No altitude found. Try to build a simple axis.",dadim
233              if   len(dadim) == 4:  print "-- 4D field. Assume z is dim 2." ; vert = np.arange(dadim[-3])
234              elif len(dadim) == 3:  print "-- 3D field. Assume z is dim 1." ; vert = [0.]
235              else:                  vert = [0.]
236      ### we define time vector. either it is referenced or it is guessed based on last variable's dimensions.
237          if "Time" in nc.variables:            letime = "Time"
238          elif "time_counter" in nc.variables:  letime = "time_counter"
239          elif "time" in nc.variables:          letime = "time"
240          ### --> add a line here if your reference is not present
241          else:                                 letime = None
242          if letime is not None:         
243              if monster:
244                  ### very long simulation... we just retrieve 3 values for time
245                  timelength = len(nc.dimensions[letime])
246                  dafirst = nc.variables[letime][0]
247                  dalast = nc.variables[letime][timelength-1]
248                  step = nc.variables[letime][1] - dafirst
249                  time = np.arange(dafirst,dalast,step)
250              else:
251                  ### if the time record is not too long, what follows is pretty quick
252                  time = nc.variables[letime][:]
253          else: 
254              print "No time found. Try to build a simple axis. Assume t is dim 1." 
255              dadim = myplot.getdimfromvar(nc)
256              if   len(dadim) == 4:  time = np.arange(dadim[-4])
257              elif len(dadim) == 3:  time = np.arange(dadim[-3])
258              else:                  time = [0.] #myplot.errormess("no time axis found.")
259          ### (SPECIFIC?)
260          if "time_counter" in nc.variables:  time = time / 86400. #### convert from s to days
261          ### (SPECIFIC. convert to Ls for Martian GCM files.)
262          if axtime in ["ls"]:
263              print "converting to Ls ..."
264              for iii in range(len(time)):
265                time[iii] = sol2ls(time[iii])
266                if iii > 0:
267                  while abs(time[iii]-time[iii-1]) > 300: time[iii] = time[iii]+360
268          ### (a case where the user would like to set local times. e.g. : 1D plot with no longitude reference)
269          if axtime in ["lt"]:
270              if initime == -1: initime=input("Please type initial local time:")
271              time = (initime+time*24)%24 ; print "LOCAL TIMES.... ", time
272          ### (simply ask for subscript)
273          if axtime in ["ind"]:
274              dadim = myplot.getdimfromvar(nc)
275              if   len(dadim) == 4:  time = np.arange(dadim[-4])
276              elif len(dadim) == 3:  time = np.arange(dadim[-3])
277              elif len(dadim) == 2:  time = np.arange(dadim[-2]) 
278
279    ### TYPE 2 : MESOSCALE FILES
280      elif typefile in ['meso','geo']:
281          ### area not active with mesoscale files
282          area = None 
283          ### HACK TO GET THE CORRECT LAT/LON FROM MESOSCALE FILES WITH 2D LAT/LON ARRAYS
284          ### principle: calculate correct indices then repopulate slon and slat
285          if slon is not None or slat is not None:
286              show_topo_map_user = ((save == 'png') and (typefile == 'meso') and ("HGT" in varinfile) and display)
287              #show_topo_map_user = False
288              if firstfile and show_topo_map_user:  iwantawhereplot = nc     #show a topo map with a cross on the chosen point
289              else:                                 iwantawhereplot = None   #do not show anything, just select indices
290              numlon = 1 ; numlat = 1 
291              if slon is not None:   numlon = slon.shape[1]   
292              if slat is not None:   numlat = slat.shape[1]
293              indices = np.ones([numlon,numlat,2]) ; vlon = None ; vlat = None
294              for iii in range(numlon): 
295               for jjj in range(numlat):
296                 if slon is not None:  vlon = slon[0][iii]  ### note: slon[:][0] does not work
297                 if slat is not None:  vlat = slat[0][jjj]  ### note: slon[:][0] does not work
298                 indices[iii,jjj,:] = myplot.bidimfind(lon2d,lat2d,vlon,vlat,file=iwantawhereplot) 
299                 lonp,latp = ( lon2d[indices[iii,jjj,0],indices[iii,jjj,1]] , lat2d[indices[iii,jjj,0],indices[iii,jjj,1]] )
300              ### possible bug here if several --lat
301              for iii in range(numlon):
302               for jjj in range(numlat):
303                 if slon is not None: sslon[0][iii] = indices[iii,0,1] #...this is idx
304                 if slat is not None: sslat[0][jjj] = indices[0,jjj,0] #...this is idy
305              lonp,latp = ( lon2d[indices[0,0,0],indices[0,0,1]] , lat2d[indices[0,0,0],indices[0,0,1]] )
306          ### we get rid of boundary relaxation zone for plots. important to do that now and not before.
307          if (typefile in ['meso'] and mapmode == 1):
308             if '9999' not in getattr(nc,'START_DATE'): lon2d = myplot.dumpbdy(lon2d,6) ; lat2d = myplot.dumpbdy(lat2d,6) 
309          ### we read the keyword for vertical dimension. we take care for vertical staggering.
310          if varname in ['PHTOT','W']:    vertdim='BOTTOM-TOP_PATCH_END_STAG'
311          else:                           vertdim='BOTTOM-TOP_PATCH_END_UNSTAG'
312          if (var2 is not None and var2 not in ['PHTOT','W']): dumped_vert_stag=True ; vertdim='BOTTOM-TOP_PATCH_END_UNSTAG'
313          else:                                                dumped_vert_stag=False
314          ### we read the keyword for horizontal dimensions. we take care for horizontal staggering.
315          if varname in ['V']:  latdim='SOUTH-NORTH_PATCH_END_STAG'
316          else:                 latdim='SOUTH-NORTH_PATCH_END_UNSTAG'
317          if varname in ['U']:  londim='WEST-EAST_PATCH_END_STAG'
318          else:                 londim='WEST-EAST_PATCH_END_UNSTAG'
319          lon = np.arange(0,getattr(nc,londim),1) ; lat = np.arange(0,getattr(nc,latdim),1)
320          ### we define the time axis and take care of various specificities (lt, ls, sol) or issues (concatenation)
321          if axtime in ["ls","sol"]:
322              lstab, soltab, lttab = myplot.getlschar ( namefile, getaxis = True )
323              if axtime == "ls":      time = lstab
324              elif axtime == "sol":   time = soltab
325          else:
326              if ope in ["cat"] and nnn > 0:    count = time[-1] + 1  ## so that a cat is possible with simple subscripts
327              else:                             count = 0
328              if "Times" in nc.dimensions:   time = count + np.arange(0,len(nc.dimensions["Times"]),1)
329              elif "Time" in nc.dimensions:  time = count + np.arange(0,len(nc.dimensions["Time"]),1)
330              else:                          time = count + np.arange(0,1,1)
331          if axtime in ["lt"]:
332              ftime = np.zeros(len(time))
333              for i in range(len(time)): ftime[i] = myplot.localtime ( time[i], slon , namefile )
334              time=ftime ; time = myplot.check_localtime(time)
335              print "LOCAL TIMES.... ", time
336          ### we define the vertical axis (or lack thereof) and cover possibilities for it to be altitude, pressure, geopotential. quite SPECIFIC.
337          if typefile in ['geo']:   vert = [0.] ; stime = myplot.readslices(str(0))
338          else:
339              if vertmode is None:  vertmode=0
340              if vertmode == 0:     
341                  if "vert" in nc.variables: vert = nc.variables["vert"][:]/1000. ; vertmode = 1
342                  else:                      vert = np.arange(0,getattr(nc,vertdim),1)
343              elif vertmode == -1:  vert = nc.variables["PHTOT"][0,:,0,0]/3.72 ; vert = np.array(vert[0:len(vert)-1]) #; print vert
344              elif vertmode == 1 or vertmode == 2:  vert = nc.variables["vert"][:]        ## pressure in Pa
345              else:                                 vert = nc.variables["vert"][:]/1000.  ## altitude in km
346####################################################################
347############ END of WE LOAD 4D DIMENSIONS : x, y, z, t #############
348####################################################################
349
350
351    ### we fill the arrays of varname, namefile, time, colorbar at the current step considered (NB: why use both k and nnn ?)
352      all_varname[k] = varname
353      all_namefile[k] = namefile
354      all_colorb[k] = clb[vvv]
355
356##############################################################################
357##### LARGE FILE. WE'D BETTER NOT FILL THE MEMORY WITH THE STUPID WHOLE ARRAY!
358      if monster:
359        ####################################################################
360        ## get all indexes to be taken into account for this subplot and then reduce field
361        ## We plot 1) all lon slices 2) all lat slices 3) all vert slices 4) all time slices and then go to the next slice
362        if ope is not None:
363            if fileref is not None:      index_f = (k//(nlon*nlat*nvert*ntime))%(3*len(namefiles))  ## OK only 1 var,  see test in the beginning
364            elif "var" in ope:           index_f = (k//(nlon*nlat*nvert*ntime))%(len(var)+1)        ## OK only 1 file, see test in the beginning
365            elif "cat" in ope:           index_f = 0
366        elif not (k == 0):
367           #if len(namefiles) > 1 and len(var) == 1 and which == "unidim": pass ## TROUVER UN MOYEN POUR unidim
368           if len(namefiles) > 1 and len(var) == 1: pass
369           else: yeah = len(namefiles)*len(var) ; index_f = (k//(nlon*nlat*nvert*ntime))%yeah
370        else: yeah = len(namefiles)*len(var) ; index_f = (k//(nlon*nlat*nvert*ntime))%yeah
371
372        ilon  = myplot.getsindex(sslon,k%nlon,lon)
373        ilat  = myplot.getsindex(sslat,(k//nlon)%nlat,lat)
374        ivert = myplot.getsindex(svert,(k//(nlon*nlat))%nvert,vert)
375 
376        if mrate is not None:                 itime = None
377        else:                                 itime = myplot.getsindex(stime,(k//(nlon*nlat*nvert))%ntime,time)
378        ltst = None
379        if typefile in ['meso'] and itime is not None and len(itime) < 2: ltst = myplot.localtime ( itime, slon , all_namefile[index_f] )
380 
381        if ilat  is not None:  print "********** LAT : INDEX",ilat[0],  ilat[-1],  "VALUE",lat[ilat[0]],   lat[ilat[-1]]
382        else:                  ilat = range(len(lat))
383        if ilon  is not None:  print "********** LON : INDEX",ilon[0],  ilon[-1],  "VALUE",lon[ilon[0]],   lon[ilon[-1]]
384        else:                  ilon = range(len(lon))
385        if ivert is not None:  print "********** VERT: INDEX",ivert[0], ivert[-1], "VALUE",vert[ivert[0]], vert[ivert[-1]]
386        else:                  ivert = range(len(vert))
387        if itime is not None:  print "********** TIME: INDEX",itime[0], itime[-1], "VALUE",time[itime[0]], time[itime[-1]]
388        else:                  itime = range(len(time))
389
390        all_var[k] = myplot.getfieldred(nc,all_varname[k],ilon,ilat,ivert,itime)
391        if var2:   all_var2[k] = myplot.getfieldred(nc,var2,ilon,ilat,ivert,itime)
392        if winds: 
393            all_windu[k] = myplot.getfield(nc,uchar,ilon,ilat,ivert,itime) 
394            all_windv[k] = myplot.getfield(nc,vchar,ilon,ilat,ivert,itime)
395        plot_x[k] = None ; plot_y[k] = None
396       
397        all_time[k] = time[itime]
398        all_vert[k] = vert[ivert]
399        all_lat[k]  = lat[ilat]
400        all_lon[k]  = lon[ilon]
401
402      else:
403        ## regular stuff: not large array.
404        all_time[k] = time
405        all_vert[k] = vert
406        all_lat[k]  = lat
407        all_lon[k]  = lon
408        if var2:  all_var2[k], plot_x[k], plot_y[k] = myplot.select_getfield(zvarname=var2,znc=nc,ztypefile=typefile,\
409                         mode='getvar',ztsat=tsat,ylon=all_lon[k],ylat=all_lat[k],yalt=all_vert[k],ytime=all_time[k],analysis=analysis)
410        if winds: all_windu[k] = myplot.getfield(nc,uchar) ; all_windv[k] = myplot.getfield(nc,vchar)
411        ### we fill the arrays of fields to be plotted at the current step considered
412        all_var[k], plot_x[k], plot_y[k] = myplot.select_getfield(zvarname=all_varname[k],znc=nc,ztypefile=typefile,\
413                         mode='getvar',ztsat=tsat,ylon=all_lon[k],ylat=all_lat[k],yalt=all_vert[k],ytime=all_time[k],analysis=analysis)
414####################################################################
415
416      # last line of for namefile in namefiles
417      print "**** GOT SUBDATA:",k," NAMEFILE:",namefile," VAR:",varname, var2 ; k += 1 ; firstfile = False
418
419    ### note to self : stopped comment rewriting here.
420
421    ##################################
422    ### Operation on files (I) with _var
423    if ope is not None and "var" in ope:
424         print "********** OPERATION: ",ope
425         if len(namefiles) > 1: myplot.errormess("for this operation... please set only one file !")
426         if len(var) > 2:       myplot.errormess("not sure this works for more than 2 vars... please check.")
427         if   "div_var" in ope: all_var[k] = all_var[k-2] / all_var[k-1] ; insert = '_div_'
428         elif "mul_var" in ope: all_var[k] = all_var[k-2] * all_var[k-1] ; insert = '_mul_'
429         elif "add_var" in ope: all_var[k] = all_var[k-2] + all_var[k-1] ; insert = '_add_'
430         elif "sub_var" in ope: all_var[k] = all_var[k-2] - all_var[k-1] ; insert = '_sub_'
431         else:                    myplot.errormess(ope+" : non-implemented operation. Check pp.py --help")
432         plot_x[k] = None ; plot_y[k] = None
433         all_time[k] = all_time[k-1] ; all_vert[k] = all_vert[k-1] ; all_lat[k] = all_lat[k-1] ; all_lon[k] = all_lon[k-1] ; all_namefile[k] = all_namefile[k-1]
434         all_varname[k] = all_varname[k-2] + insert + all_varname[k-1]
435         if len(clb) >= zelen: all_colorb[k] = clb[-1]   # last additional user-defined color is for operation plot
436         else:                 all_colorb[k] = all_colorb[k-1]  # if no additional user-defined color... set same as var
437         ### only the operation plot. do not mention colorb so that it is user-defined?
438         if "only" in ope:
439             numplot = 1 ; all_var[0] = all_var[k]
440             all_time[0] = all_time[k] ; all_vert[0] = all_vert[k] ; all_lat[0] = all_lat[k] ; all_lon[0] = all_lon[k] ; all_namefile[0] = all_namefile[k]
441             all_varname[0] = all_varname[k-2] + insert + all_varname[k-1]
442
443
444    ##################################
445    ### Operation on files (II) without _var
446    # we re-iterate on the plots to set operation subplots to make it compatible with multifile (using the same ref file)
447    # (k+1)%3==0 is the index of operation plots
448    # (k+2)%3==0 is the index of reference plots
449    # (k+3)%3==0 is the index of first plots
450    opefirstpass=True
451    if ope is not None and "var" not in ope:
452       print "********** OPERATION: ",ope
453       for k in np.arange(zelen):
454               if len(var) > 1: myplot.errormess("for this operation... please set only one var !")
455               if ope in ["-","+","-%","-_only","+_only","-%_only","-_histo"]:
456                  if fileref is None: myplot.errormess("fileref is missing!")
457                  else:ncref = Dataset(fileref)
458
459                  if opefirstpass: ## first plots
460                     for ll in np.arange(len(namefiles)):
461                        print "SETTING FIRST PLOT"
462                        all_varname[3*ll] = all_varname[ll] ; all_time[3*ll] = all_time[ll] ; all_vert[3*ll] = all_vert[ll] ; all_lat[3*ll] = all_lat[ll] ; all_lon[3*ll] = all_lon[ll] ; all_namefile[3*ll] = all_namefile[ll] ; all_var2[3*ll] = all_var2[ll] ; all_colorb[3*ll] = all_colorb[ll] ; all_var[3*ll] = all_var[ll]
463                        if plot_y[ll] is not None: plot_y[3*ll] = plot_y[ll] ; plot_x[3*ll] = plot_x[ll]
464                        else: plot_y[3*ll] = None ; plot_x[3*ll] = None
465                        opefirstpass=False
466
467                  if (k+2)%3==0: ## reference plots
468                        print "SETTING REFERENCE PLOT"
469                        all_varname[k] = all_varname[k-1] ; all_time[k] = all_time[k-1] ; all_vert[k] = all_vert[k-1] ; all_lat[k] = all_lat[k-1] ; all_lon[k] = all_lon[k-1] ; all_namefile[k] = all_namefile[k-1] ; all_var2[k] = all_var2[k-1] ; all_colorb[k] = all_colorb[k-1]
470                        all_var[k], plot_x[k], plot_y[k] = myplot.select_getfield(zvarname=all_varname[k-1],znc=ncref,ztypefile=typefile,mode='getvar',ztsat=tsat,ylon=all_lon[k],ylat=all_lat[k],yalt=all_vert[k],ytime=all_time[k],analysis=analysis)
471                        if winds: all_windu[k] = myplot.getfield(ncref,uchar) ; all_windv[k] = myplot.getfield(ncref,vchar)
472
473                  if (k+1)%3==0: ## operation plots
474                     print "SETTING OPERATION PLOT"
475                     all_varname[k] = all_varname[k-1] ; all_time[k] = all_time[k-1] ; all_vert[k] = all_vert[k-1] ; all_lat[k] = all_lat[k-1] ; all_lon[k] = all_lon[k-1] ; all_namefile[k] = all_namefile[k-1] ; all_var2[k] = all_var2[k-1]
476                     if ope in ["-","-_only","-_histo"]:
477                         all_var[k]= all_var[k-2] - all_var[k-1]
478                         if plot_y[k-1] is not None and plot_y[k-2] is not None: plot_y[k] = plot_y[k-2] - plot_y[k-1]
479                         if plot_y[k-2] is None: plot_y[k] = None; plot_x[k] = None
480                     elif ope in ["+","+_only"]:   
481                         all_var[k]= all_var[k-2] + all_var[k-1]
482                         if plot_y[k-1] is not None and plot_y[k-2] is not None: plot_y[k] = plot_y[k-2] + plot_y[k-1]
483                         if plot_y[k-2] is None: plot_y[k] = None; plot_x[k] = None
484                     elif ope in ["-%","-%_only"]:
485                         masked = np.ma.masked_where(all_var[k-1] == 0,all_var[k-1])
486                         masked.set_fill_value([np.NaN])
487                         all_var[k]= 100.*(all_var[k-2] - masked)/masked
488                         if plot_y[k-1] is not None and plot_y[k-2] is not None: 
489                            masked = np.ma.masked_where(plot_y[k-1] == 0,plot_y[k-1])
490                            masked.set_fill_value([np.NaN])
491                            plot_y[k]= 100.*(plot_y[k-2] - masked)/masked
492                         if plot_y[k-2] is None: plot_y[k] = None; plot_x[k] = None
493                     if len(clb) >= zelen: all_colorb[k] = clb[-1]
494                     else: all_colorb[k] = "RdBu_r" # if no additional user-defined color... set a good default one
495                     if winds: all_windu[k] = all_windu[k-2]-all_windu[k-1] ; all_windv[k] = all_windv[k-2] - all_windv[k-1]
496
497               elif ope in ["cat"]:
498                  tabtime = all_time[0];tab = all_var[0];k = 1
499                  if var2: tab2 = all_var2[0]
500                  while k != len(namefiles) and len(all_time[k]) != 0:
501                      if var2: tab2 = np.append(tab2,all_var2[k],axis=0) 
502                      tabtime = np.append(tabtime,all_time[k]) ; tab = np.append(tab,all_var[k],axis=0) ; k += 1
503                  all_time[0] = np.array(tabtime) ; all_var[0] = np.array(tab) ; numplot = 1
504                  if var2: all_var2[0] = np.array(tab2)
505               else: myplot.errormess(ope+" : non-implemented operation. Check pp.py --help")
506       if "only" in ope:
507           numplot = 1 ; all_var[0] = all_var[k]
508           all_time[0] = all_time[k] ; all_vert[0] = all_vert[k] ; all_lat[0] = all_lat[k] ; all_lon[0] = all_lon[k] ; all_namefile[0] = all_namefile[k] ; plot_x[0]=plot_x[k] ; plot_y[0]=plot_y[k]
509           all_varname[0] = all_varname[k]
510
511    ##################################
512    ### Open a figure and set subplots
513    fig = mpl.pyplot.figure()
514    subv,subh = myplot.definesubplot( numplot, fig, ipreferline = (mapmode == 1) ) 
515    if ope in ['-','-%','-_histo'] and len(namefiles) ==1 : subv,subh = 2,2
516    elif ope in ['-','-%'] and len(namefiles)>1 : subv, subh = len(namefiles), 3
517 
518    #################################
519    ### Time loop for plotting device
520    nplot = 1 ; error = False ; firstpass = True 
521    if lstyle is not None: linecycler = itertools.cycle(lstyle)
522    else: linecycler = itertools.cycle(["-","--","-.",":"])
523    print "********************************************"
524    while error is False:
525     
526       print "********** PLOT", nplot, " OF ",numplot
527       if nplot > numplot: break
528
529       ####################################################################
530       ## get all indexes to be taken into account for this subplot and then reduce field
531       ## We plot 1) all lon slices 2) all lat slices 3) all vert slices 4) all time slices and then go to the next slice
532       if ope is not None:
533           if fileref is not None:      index_f = ((nplot-1)//(nlon*nlat*nvert*ntime))%(3*len(namefiles))  ## OK only 1 var,  see test in the beginning
534           elif "var" in ope:           index_f = ((nplot-1)//(nlon*nlat*nvert*ntime))%(len(var)+1)        ## OK only 1 file, see test in the beginning
535           elif "cat" in ope:           index_f = 0
536       elif not firstpass:
537          if len(namefiles) > 1 and len(var) == 1 and which == "unidim": pass
538          else: yeah = len(namefiles)*len(var) ; index_f = ((nplot-1)//(nlon*nlat*nvert*ntime))%yeah
539       else: yeah = len(namefiles)*len(var) ; index_f = ((nplot-1)//(nlon*nlat*nvert*ntime))%yeah
540       time = all_time[index_f] ; vert = all_vert[index_f] ; lat = all_lat[index_f] ; lon = all_lon[index_f]
541       indexlon  = myplot.getsindex(sslon,(nplot-1)%nlon,lon)
542       indexlat  = myplot.getsindex(sslat,((nplot-1)//nlon)%nlat,lat)
543       indexvert = myplot.getsindex(svert,((nplot-1)//(nlon*nlat))%nvert,vert)
544       plotx=plot_x[index_f] ; ploty=plot_y[index_f]
545       if mrate is not None:                 indextime = None 
546       else:                                 indextime = myplot.getsindex(stime,((nplot-1)//(nlon*nlat*nvert))%ntime,time)
547       ltst = None 
548       if typefile in ['meso'] and indextime is not None and len(indextime) < 2: ltst = myplot.localtime ( indextime, slon , all_namefile[index_f] )
549
550       if not monster:
551         if indexlat  is not None: print "********** LAT : INDEX",indexlat[0],  indexlat[-1],  "VALUE",lat[indexlat[0]],   lat[indexlat[-1]]
552         if indexlon  is not None: print "********** LON : INDEX",indexlon[0],  indexlon[-1],  "VALUE",lon[indexlon[0]],   lon[indexlon[-1]]
553         if indexvert is not None: print "********** VERT: INDEX",indexvert[0], indexvert[-1], "VALUE",vert[indexvert[0]], vert[indexvert[-1]]
554         if indextime is not None: print "********** TIME: INDEX",indextime[0], indextime[-1], "VALUE",time[indextime[0]], time[indextime[-1]]
555
556       ##var = nc.variables["phisinit"][:,:]
557       ##contourf(np.transpose(var),30,cmap = get_cmap(name="Greys_r") ) ; mpl.pyplot.axis('off') ; plot(indexlat,indexlon,'mx',mew=4.0,ms=20.0)
558       ##mpl.pyplot.show()
559       ##exit()
560       #truc = True
561       #truc = False
562       #if truc: indexvert = None
563       ####################################################################
564       ########## REDUCE FIELDS
565       ####################################################################
566       error = False
567       varname = all_varname[index_f]
568       which=''
569       if varname:   ### what is shaded.
570           what_I_plot, error = myplot.reducefield( all_var[index_f], d4=indextime, d1=indexlon, d2=indexlat, d3=indexvert, \
571                                             yint=yintegral, alt=vert, anomaly=anomaly, redope=redope, mesharea=area, unidim=is1d)
572           if add != 0.:      what_I_plot = what_I_plot + add
573           if mult != 2718.:  what_I_plot = what_I_plot*mult
574           else:              what_I_plot = np.log10(what_I_plot) ; print "log plot"
575
576       if var2:      ### what is contoured.
577           what_I_plot_contour, error = myplot.reducefield( all_var2[index_f], d4=indextime, d1=indexlon, d2=indexlat , d3=indexvert, \
578                                                     yint=yintegral, alt=vert, redope=redope )
579       if winds:     ### what is plot as vectors.
580           vecx, error = myplot.reducefield( all_windu[index_f], d4=indextime, d3=indexvert, yint=yintegral, alt=vert)
581           vecy, error = myplot.reducefield( all_windv[index_f], d4=indextime, d3=indexvert, yint=yintegral, alt=vert)
582           if varname in [uchar,vchar]: what_I_plot = np.sqrt( np.square(vecx) + np.square(vecy) ) ; varname = "wind"
583 
584       if plotx is not None:
585          plotx, error = myplot.reducefield( plotx, d4=indextime, d1=indexlon, d2=indexlat, d3=indexvert, \
586                                             yint=yintegral, alt=vert, anomaly=anomaly, redope=redope, mesharea=area, unidim=is1d)
587          ploty, error = myplot.reducefield( ploty, d4=indextime, d1=indexlon, d2=indexlat, d3=indexvert, \
588                                             yint=yintegral, alt=vert, anomaly=anomaly, redope=redope, mesharea=area, unidim=is1d)
589          which='xy'
590       #####################################################################
591       #if truc:
592       #   nx = what_I_plot.shape[2] ; ny = what_I_plot.shape[1] ; nz = what_I_plot.shape[0]
593       #   for k in range(nz): print k,' over ',nz ; what_I_plot[k,:,:] = what_I_plot[k,:,:] / myplot.smooth(what_I_plot[k,:,:],12)
594       #   for iii in range(nx):
595       #    for jjj in range(ny):
596       #     deviation = what_I_plot[:,jjj,iii] ; mx = max(deviation) ; mn = min(deviation)
597       #     if iii > 6 and iii < nx-6 and jjj > 6 and jjj < ny-6:   what_I_plot[0,jjj,iii],rel = singlet(deviation,vert/1000.)  ### z must be in km
598       #     else:                                                   what_I_plot[0,jjj,iii]     = 0.
599       #     if np.abs(what_I_plot[0,jjj,iii]) > 1.5:
600       #         print iii,jjj,what_I_plot[0,jjj,iii],int(abs(1.-mx)*100.),int(abs(1.-mn)*100.)
601       #         mpl.pyplot.plot(rel)
602       #   mpl.pyplot.show()
603       #   anomaly = True ### pour avoir les bons reglages plots
604       #   what_I_plot = what_I_plot[0,:,:] 
605       #####################################################################
606
607       ####################################################################
608       ### General plot settings
609       changesubplot = (numplot > 1) and (len(what_I_plot.shape) != 1) and (which != "xy")  ## default for 1D plots: superimposed. to be reworked for better flexibility.
610       if changesubplot: mpl.pyplot.subplot(subv,subh,nplot) #; mpl.pyplot.subplots_adjust(wspace=0,hspace=0)
611       colorb = all_colorb[index_f]
612       ####################################################################
613       if error:
614               myplot.errormess("There is an error in reducing field !")
615       else:
616               ticks = ndiv + 1 
617               fvar = varname
618               if anomaly: fvar = 'anomaly'
619               ###
620               if mapmode == 0:    ### could this be moved inside imov loop ?
621                   itime=indextime
622                   if len(what_I_plot.shape) == 3: itime=[0]
623                   m = None ; x = None ; y = None
624                   latyeah = lat ; lonyeah = lon
625                   if typefile in ['meso']:
626                       # now that the section is determined we can set the real lat
627                       # ... or for now, a temptative one.
628                       milieux = int(lat2d.shape[1]/2.)
629                       milieuy = int(lat2d.shape[0]/2.)
630                       if slon is not None or proj == "noproj": latyeah = lat2d[:,milieux]
631                       if slat is not None or proj == "noproj": lonyeah = lon2d[milieuy,:]
632                   what_I_plot, x, y = myplot.define_axis(lonyeah,latyeah,vert,time,indexlon,indexlat,indexvert,\
633                         itime,what_I_plot, len(all_var[index_f].shape),vertmode,redope)
634               ###
635               if analysis in ['laplace']: what_I_plot = laplace(what_I_plot)
636               ###
637               if (fileref is not None) and ((index_f+1)%3 == 0):    zevmin, zevmax = myplot.calculate_bounds(what_I_plot,vmin=minop,vmax=maxop)
638               else:                                                   zevmin, zevmax = myplot.calculate_bounds(what_I_plot,vmin=vmin,vmax=vmax)
639               #if (fileref is not None) and (index_f == numplot-1):    colorb = "RdBu_r"
640               if colorb in ["def","nobar","onebar"]:                  palette = mpl.cm.get_cmap(name=myplot.defcolorb(fvar.upper()))
641               elif colorb == "relief":                                palette = cm.GMT_relief
642               elif colorb == "haxby":                                 palette = cm.GMT_haxby
643               else:                                                   palette = mpl.cm.get_cmap(name=colorb)
644               #palette = cm.GMT_split
645               #palette = cm.GMT_globe
646               ##### 1. ELIMINATE 0D or >3D CASES
647               if len(what_I_plot.shape) == 0:   
648                 print "VALUE VALUE VALUE VALUE ::: ",what_I_plot
649                 save = 'donothing'
650               elif len(what_I_plot.shape) >= 4:
651                 print "WARNING!!! ",len(what_I_plot.shape),"-D PLOT NOT SUPPORTED !!! dimensions: ",what_I_plot.shape
652                 myplot.errormess("Are you sure you did not forget to prescribe a dimension ?")
653               ##### 2. HANDLE simple 1D/2D field and movies of 1D/2D fields
654               else:
655                 if mrate is not None: iend=len(time)-1
656                 else:                 iend=0
657                 imov = 0
658                 if analysis in ['density','histo','fft','histodensity']: which="xy"
659                 elif len(what_I_plot.shape) == 3:
660                    if var2 and which == '':               which = "contour" ## have to start with contours rather than shading
661                    elif which == '':                      which = "regular"
662                    if mrate is None:      myplot.errormess("3D field. Use --rate RATE for movie or specify --time TIME. Exit.")
663                 elif len(what_I_plot.shape) == 2:
664                    if var2 and which == '':               which = "contour" ## have to start with contours rather than shading
665                    elif which == '':                      which = "regular"
666                    if mrate is not None and which == '':  which = "unidim"
667                 elif len(what_I_plot.shape) == 1 and which == '' :
668                    which = "unidim"
669                    if what_I_plot.shape[-1] == 1:      print "VALUE VALUE VALUE VALUE ::: ", what_I_plot[0] ; save = 'donothing'
670##                 if which == "unidim" and len(namefiles) > 1: numplot = 1 # this case is similar to several vars from one file
671                 ##### IMOV LOOP #### IMOV LOOP
672                 while imov <= iend:
673                    print "-> frame ",imov+1, which
674                    if which == "regular":   
675                        if mrate is None:                                   what_I_plot_frame = what_I_plot
676                        else:                                               what_I_plot_frame = what_I_plot[imov,:,:]
677                        if winds:
678                            if mrate is None:                                   vecx_frame = vecx ; vecy_frame = vecy
679                            else:                                               vecx_frame = vecx[imov,:,:] ; vecy_frame = vecy[imov,:,:]
680                    elif which == "contour": 
681                        if mrate is None or what_I_plot_contour.ndim < 3:   what_I_plot_frame = what_I_plot_contour
682                        else:                                               what_I_plot_frame = what_I_plot_contour[imov,:,:]
683                    elif which == "unidim":
684                        if mrate is None:                                   what_I_plot_frame = what_I_plot
685                        else:                                               what_I_plot_frame = what_I_plot[:,imov]  ## because swapaxes
686                    #if mrate is not None:     
687                    if mapmode == 1: 
688                        m = myplot.define_proj(proj,wlon,wlat,back=back,blat=blat,blon=blon)  ## this is dirty, defined above but out of imov loop
689                        x, y = m(lon2d, lat2d)                                         ## this is dirty, defined above but out of imov loop
690                    if (typefile in ['meso'] and mapmode == 1):
691                       if '9999' not in getattr(nc,'START_DATE'): what_I_plot_frame = myplot.dumpbdy(what_I_plot_frame,6,condition=True)
692#                   if typefile in ['mesoideal']:    what_I_plot_frame = myplot.dumpbdy(what_I_plot_frame,0,stag='W',condition=dumped_vert_stag)
693
694                    if which == "unidim":
695                        if lbls is not None: lbl=lbls[nplot-1] 
696#                        if lbls is not None: lbl=lbls[index_f]
697                        else:
698                           lbl = ""
699                           if indexlat is not None:  lbl = lbl + " ix" + str(indexlat[0])
700                           if indexlon is not None:  lbl = lbl + " iy" + str(indexlon[0])
701                           if indexvert is not None: lbl = lbl + " iz" + str(indexvert[0])
702                           if indextime is not None: lbl = lbl + " it" + str(indextime[0])
703                           if lbl == "": lbl = all_namefile[index_f]
704
705                        if mrate is not None: x = y  ## because swapaxes...
706                        #what_I_plot_frame = np.diff(what_I_plot_frame, n=1) ; x = x[1:]
707                     
708                        zeline = next(linecycler) ## "-" for simple lines
709                        if tile:      zemarker = 'x'
710                        else:         zemarker = None 
711                        this_is_a_regular_plot = (indexvert is not None) or (indextime is None) or (indexlat is None) or (indexlon is None)
712                        if this_is_a_regular_plot:   mpl.pyplot.plot(x,what_I_plot_frame,zeline,label=lbl,marker=zemarker)  ## vertical profile
713                        else:                        mpl.pyplot.plot(what_I_plot_frame,x,zeline,label=lbl,marker=zemarker)  ## regular plot
714                        mpl.pyplot.grid(True)
715                        if nplot > 1: mpl.pyplot.legend(loc='best')
716                        if indextime is None and axtime is not None and xlab is None:    mpl.pyplot.xlabel(axtime.upper()) ## define the right label
717                        if save == 'txt':  writeascii(np.transpose([x,np.transpose(what_I_plot)]),'profile'+str(nplot*1000+imov)+'.txt')
718                        if axtime == "lt" and indextime is None:
719                            ax = mpl.pyplot.gca()
720                            # set ticks where your images will be
721                            ax.get_xaxis().set_ticks(np.arange(0,48,2))
722                            # rename tick labels
723                            ax.get_xaxis().set_ticklabels(["0","2","4","6","8","10","12","14","16","18","20","22",\
724                                                       "0","2","4","6","8","10","12","14","16","18","20","22"])
725                            ## rebound everyone
726                            ax.set_xbound(lower=min(x), upper=max(x))
727                    elif which == "xy":
728                        if lbls is not None: lbl=lbls[index_f]
729                        else: lbl=None
730                        if analysis is not None:
731                           if analysis == 'histo': 
732                               if zelen == 1:
733                                  mpl.pyplot.hist(ploty.flatten(),bins=ndiv,normed=True, alpha=0.67, facecolor = 'green', label = lbls)
734                                  mpl.pyplot.legend()
735                                  mpl.pyplot.grid(True)
736                                  mpl.pyplot.title(zetitle)
737                               else:
738                                  multiplot[index_f]=ploty.flatten()
739                                  if index_f == zelen-1: 
740                                     if ope is not None: multiplot = getVar(multiplot,3*np.arange((index_f+1)/3)+2) ## we only compute histograms for the operation plots
741                                     mpl.pyplot.hist(multiplot,bins=ndiv,normed=True, alpha=0.75, label = lbls) 
742                                     mpl.pyplot.legend()
743                                     mpl.pyplot.grid(True)
744                                     mpl.pyplot.title(zetitle)
745                           elif analysis in ['density','histodensity']:
746                                  if ope is not None and (index_f+1)%3 !=0: pass
747                                  else:
748                                     plotx = np.linspace(min(ploty.flatten()),max(ploty.flatten()),1000)
749                                     density = scipy.stats.gaussian_kde(ploty.flatten())
750   #                                  density.covariance_factor = lambda : .25  # adjust the covariance factor to change the bandwidth if needed
751   #                                  density._compute_covariance()
752                                        # display the mean and variance of the kde:
753                                     sample = density.resample(size=20000)
754                                     n, (smin, smax), sm, sv, ss, sk = scipy.stats.describe(sample[0])
755                                     mpl.pyplot.plot(plotx,density(plotx), label = lbl+'\nmean: '+str(sm)[0:5]+'   std: '+str(np.sqrt(sv))[0:5]+'\nskewness: '+str(ss)[0:5]+'   kurtosis: '+str(sk)[0:5])
756                                     if analysis == 'histodensity':  # plot both histo and density (to assess the rightness of the kernel density estimate for exemple) and display the estimated variance
757                                        mpl.pyplot.hist(ploty.flatten(),bins=ndiv,normed=True, alpha=0.30, label = lbl)
758                                     if index_f == zelen-1: mpl.pyplot.legend() ; mpl.pyplot.title(zetitle)
759                           else:
760                              mpl.pyplot.plot(plotx,ploty,label = lbl)
761                              if index_f == zelen-1: mpl.pyplot.legend() ; mpl.pyplot.title(zetitle)
762                              mpl.pyplot.grid(True)
763                        else:
764                           mpl.pyplot.plot(plotx,ploty,label = lbl)
765                           if index_f == zelen-1: mpl.pyplot.legend() ; mpl.pyplot.title(zetitle)
766                        if varname == 'hodograph':
767                            a=0
768                            for ii in np.arange(len(time)): 
769                               if a%6 == 0: mpl.pyplot.text(plotx[ii],ploty[ii],time[ii]) 
770                               a=a+1
771                            mpl.pyplot.grid(True)
772
773                    elif which == "regular":
774                   
775                        # plot stream lines if there is a stream file and a vert/lat slice. Might not work with movies ??
776                        if streamflag and sslat is None and svert is None:
777                             streamfile = all_namefile[index_f].replace('.nc','_stream.nc')
778                             teststream = os.path.exists(streamfile)
779                             if teststream:
780                                print 'INFO: Using stream file',streamfile, 'for stream lines'
781                                ncstream = Dataset(streamfile)
782                                psi = myplot.getfield(ncstream,'psi')
783                                psi = psi[0,:,:,0] # time and longitude are dummy dimensions
784                                if psi.shape[1] != len(x) or psi.shape[0] != len(y):
785                                    myplot.errormess('stream file does not fit! Dimensions: '+str(psi.shape)+' '+str(x.shape)+' '+str(y.shape))
786                                zelevels = np.arange(-1.e10,1.e10,1.e9)
787                                zemin = np.min(abs(zelevels))
788                                zemax = np.max(abs(zelevels))
789                                zewidth  =  (abs(zelevels)-zemin)*(5.- 0.5)/(zemax - zemin) + 0.5 # linewidth ranges from 5 to 0.5
790                                cs = mpl.pyplot.contour( x,y,psi, zelevels, colors='k', linewidths = zewidth)
791                                mpl.pyplot.clabel(cs, inline=True, fontsize = 4.*mpl.pyplot.rcParams['font.size']/5., fmt="%1.1e")
792                             else:
793                                print 'WARNING: STREAM FILE',streamfile, 'DOES NOT EXIST !'
794                             
795                        if hole:         what_I_plot_frame = myplot.hole_bounds(what_I_plot_frame,zevmin,zevmax)
796                        else:            what_I_plot_frame = myplot.bounds(what_I_plot_frame,zevmin,zevmax)
797                        if flagnolow:    what_I_plot_frame = myplot.nolow(what_I_plot_frame)
798                        if not tile:
799                            #zelevels = np.linspace(zevmin*(1. + 1.e-7),zevmax*(1. - 1.e-7)) #,num=20)
800                            zelevels = np.linspace(zevmin,zevmax,num=ticks)
801                            #what_I_plot_frame = myplot.smooth(what_I_plot_frame,100)
802                            if mapmode == 1:       m.contourf( x, y, what_I_plot_frame, zelevels, cmap = palette, alpha=trans)
803                            elif mapmode == 0:     mpl.pyplot.contourf( x, y, what_I_plot_frame, zelevels, cmap = palette, alpha=trans)
804                        else:
805                            if mapmode == 1:       m.pcolor( x, y, what_I_plot_frame, cmap = palette, vmin=zevmin, vmax=zevmax, alpha=trans)
806                            elif mapmode == 0:     mpl.pyplot.pcolor( x, y, what_I_plot_frame, cmap = palette, vmin=zevmin, vmax=zevmax, alpha=trans)
807
808                        if (cross is not None or markdevil) and mapmode == 1:
809                            if cross is not None: 
810                               howmuch = np.array(cross).shape[0]
811                               for ttt in range(howmuch):
812                                  idx,idy=m(cross[ttt][0],cross[ttt][1])
813                                  mpl.pyplot.plot([idx],[idy],'+k',mew=0.5,ms=18)
814                            elif markdevil:
815                                idx,idy=myplot.find_devil(nc,indextime)
816                                idx,idy=x[idx,idy],y[idx,idy]
817                                mpl.pyplot.plot([idx],[idy],'+k',mew=0.5,ms=18)
818
819                        if not nocolorb:
820                          if colorb not in ['nobar','onebar']:
821                            if (fileref is not None) and ((index_f+1)%3 == 0):   daformat = "%.3f" 
822                            elif mult != 1:                                        daformat = "%.1f"
823                            else:                                                  daformat = myplot.fmtvar(fvar.upper())
824                            if proj in ['moll']:  zeorientation="horizontal" ; zepad = 0.07 ; zefrac = 0.1 #zepad=0.05
825                            elif proj in ['cyl']: zeorientation="vertical" ; zepad = 0.03 ; zefrac = 0.023
826                            else:                 zeorientation="vertical" ; zepad = 0.03 ; zefrac = 0.05
827                            if mapmode == 0:      zefrac = 0.1
828                            zecb = mpl.pyplot.colorbar( fraction=zefrac,pad=zepad,format=daformat,orientation=zeorientation,\
829                                      ticks=np.linspace(zevmin,zevmax,num=min([ticks/2+1,21])),extend='neither',spacing='proportional' ) 
830                            #if zeorientation == "horizontal":
831                            #    daticks = zecb.ax.get_xticks()
832                            #    zecb.ax.set_xticklabels(daticks,rotation='vertical')
833                            if zeorientation == "horizontal" and zetitle[0] != "fill": zecb.ax.set_xlabel(zetitle[index_f]) ; zetitle[index_f]=""
834                        if winds:
835                            if typefile in ['meso']:
836                                if '9999' not in getattr(nc,'START_DATE') : [vecx_frame,vecy_frame] = [myplot.dumpbdy(vecx_frame,6,stag=uchar,condition=True), myplot.dumpbdy(vecy_frame,6,stag=vchar,condition=True)]
837                                key = True
838                                if fvar in ['UV','uv','uvmet']: key = False
839                            elif typefile in ['gcm']:
840                                key = False
841                            if metwind and mapmode == 1:   [vecx_frame,vecy_frame] = m.rotate_vector(vecx_frame, vecy_frame, lon2d, lat2d)
842                            if trans != 0.0:   colorvec = myplot.definecolorvec(colorb) 
843                            else:              colorvec = myplot.definecolorvec(back) 
844                            myplot.vectorfield(vecx_frame, vecy_frame, x, y, stride=stride, csmooth=2,\
845                                             #scale=15., factor=300., color=colorvec, key=key)
846                                             scale=20., factor=250./facwind, color=colorvec, key=key)
847                                                              #200.         ## or csmooth=stride
848                        ### THIS IS A QUITE SPECIFIC PIECE (does not work for mesoscale files)
849                        if ope == '-_histo' and nplot == numplot: # this should work as long as ope is '-' guarantees 3 plots for 4 panels without contour
850                            mpl.pyplot.subplot(subv,subh,nplot+1)
851                            mpl.pyplot.rcParams["legend.fontsize"] = 'xx-large'
852                            if indexlat is None:
853                                latmin = -50.; latmax = 50. # latitude range for histogram of difference
854                                zeindexlat = (lat<latmax)*(lat>latmin)
855                                if typefile in ['meso']: zeindexlat = 10
856                                # this follows the define_axis logic in myplot.py:
857                                if indextime is None or indexlon is None: what_I_plot_frame = what_I_plot_frame[zeindexlat,:]
858                                else: what_I_plot_frame = what_I_plot_frame[:,zeindexlat]
859                            toplot = np.ravel(what_I_plot_frame[np.isnan(what_I_plot_frame)==False])
860                            zebins = np.linspace(zevmin,zevmax,num=30)
861                            mpl.pyplot.hist(toplot,bins=zebins,histtype='step',linewidth=2,color='k',normed=True)
862                            zestd = np.std(toplot);zemean = np.mean(toplot)
863                            zebins = np.linspace(zevmin,zevmax,num=300)
864                            zegauss = (1./(zestd * np.sqrt(2 * np.pi)) * np.exp( - (zebins - zemean)**2 / (2 * zestd**2) ) )
865                            mpl.pyplot.plot(zebins, zegauss, linewidth=1, color='r',label="mean: "+str(zemean)[0:5]+"\nstd: "+str(zestd)[0:5])
866                            mpl.pyplot.legend(loc=0,frameon=False)
867                            mpl.pyplot.subplot(subv,subh,nplot) # go back to last plot for title of contour difference
868                        if ope is not None and "only" not in ope: title("fig(1) "+ope+" fig(2)")
869                        elif ope is not None and "only" in ope: title("fig(1) "+ope[0]+" fig(2)")
870                           
871                    elif which == "contour":
872                        mpl.pyplot.rcParams['contour.negative_linestyle'] = 'solid' # no dashed line for negative values
873                        zevminc, zevmaxc = myplot.calculate_bounds(what_I_plot_frame, vmin=min(what_I_plot_frame), vmax=max(what_I_plot_frame))
874                        zelevels = np.linspace(zevminc,zevmaxc,ticks/2) #20)
875                        ### another dirty specific stuff in the wall
876                        if var2 == 'HGT':        zelevels = np.arange(-10000.,30000.,250.) #1000.)
877                        elif var2 == 'tpot':     zelevels = np.arange(270,370,5)
878                        elif var2 in ['tk','temp']:     zelevels = np.arange(0.,1000.,5.)#(150,250,5)
879                        elif var2 == 'wstar':    zelevels = np.arange(0,10,1.0)
880                        elif var2 == 'zmax_th':  zelevels = np.arange(0,10,2.0) ; what_I_plot_frame = what_I_plot_frame / 1000.
881                        elif var2 in ['u']:      zelevels = np.arange(-400.,400.,10.)
882                        ###
883                        if mapmode == 0:   
884                            what_I_plot_frame, x, y = myplot.define_axis( lonyeah,latyeah,vert,time,indexlon,indexlat,indexvert,\
885                                                              itime,what_I_plot_frame, len(all_var2[index_f].shape),vertmode,redope)
886                            ## is this needed? only if len(all_var2[index_f].shape) != len(all_var[index_f].shape)
887                            cs = mpl.pyplot.contour( x,y,what_I_plot_frame, zelevels, colors='k', linewidths = 0.33)#, alpha=0.5, linestyles='solid')
888                            ##cs = mpl.pyplot.contour( x,y,what_I_plot_frame, zelevels, colors='w', linewidths = 0.5)#, alpha=0.5, linestyles='solid')
889                            #mpl.pyplot.clabel(cs, inline=1, fontsize = 4.*rcParams['font.size']/5., fmt=fmtvar(var2.upper()))
890                        elif mapmode == 1: 
891                            cs = m.contour( x,y,what_I_plot_frame, zelevels, colors='k', linewidths = 0.33)#, alpha=0.5, linestyles='solid')
892                            #mpl.pyplot.clabel(cs, inline=0, fontsize = mpl.pyplot.rcParams['font.size'], fmt="%.0f") #myplot.fmtvar(var2.upper()))
893                    if which in ["regular","unidim","xy"]:
894
895                        if nplot > 1 and which in ["unidim","xy"]:
896                           pass  ## because we superimpose nplot instances
897                        else:
898                           # Axis directives for movie frames [including the first one).
899                           zxmin, zxmax = xaxis ; zymin, zymax = yaxis
900                           if zxmin is not None: mpl.pyplot.xlim(xmin=zxmin)
901                           if zxmax is not None: mpl.pyplot.xlim(xmax=zxmax)
902                           if zymin is not None: mpl.pyplot.ylim(ymin=zymin)
903                           if zymax is not None: mpl.pyplot.ylim(ymax=zymax)
904                           if ylog and not xlog:      mpl.pyplot.semilogy()
905                           if xlog and not ylog:      mpl.pyplot.semilogx()
906                           if xlog and ylog: 
907                                mpl.pyplot.xscale('log') 
908                                mpl.pyplot.yscale('log')
909                           if invert_y:  ax = mpl.pyplot.gca() ; ax.set_ylim(ax.get_ylim()[::-1])
910                           if xlab is not None: mpl.pyplot.xlabel(xlab)
911                           if ylab is not None: mpl.pyplot.ylabel(ylab)
912
913                        if mrate is not None:
914                           ### THIS IS A MENCODER MOVIE
915                           if mrate > 0:
916                             figframe=mpl.pyplot.gcf()
917                             if mquality:   figframe.set_dpi(600.)
918                             else:          figframe.set_dpi(200.)
919                             mframe=fig2img(figframe)
920                             if imov == 0:
921                                moviename='movie' ;W,H = figframe.canvas.get_width_height()
922                                video = VideoSink((H,W), moviename, rate=mrate, byteorder="rgba")
923                             video.run(mframe) ; mpl.pyplot.close()
924                             if imov == iend: video.close()                           
925                           ### THIS IS A WEBPAGE MOVIE
926                           else:
927                             nameframe = "image"+str(1000+imov)
928                             myplot.makeplotres(nameframe,res=100.,disp=False) ; mpl.pyplot.close()
929                             if imov == 0: myfile = open("zepics", 'w')
930                             myfile.write("modImages["+str(imov)+"] = '"+nameframe+"_100.png';"+ '\n')
931                             if imov == iend:
932                                 myfile.write("first_image = 0;"+ '\n')
933                                 myfile.write("last_image = "+str(iend)+";"+ '\n')
934                                 myfile.close()
935                        if var2 and which == "regular":  which = "contour"
936                        imov = imov+1
937                    elif which == "contour":
938                        which = "regular"
939
940       ### Next subplot
941       zevarname = varname
942       if redope is not None: zevarname = zevarname + "_" + redope
943       basename = myplot.getname(var=zevarname,var2=var2,winds=winds,anomaly=anomaly)
944       if len(what_I_plot.shape) > 3:
945           basename = basename + myplot.getstralt(nc,level) 
946       if mrate is not None: basename = "movie_" + basename
947       if typefile in ['meso']:
948            if sslon is not None: basename = basename + "_lon_" + str(int(round(lonp)))
949            if sslat is not None: basename = basename + "_lat_" + str(int(round(latp)))
950            plottitle = basename
951            ### dans le nouveau systeme time=ls,sol,lt cette ligne pourrait ne servir a rien (ou deplacer au dessus)
952            if addchar and indextime is not None:   [addchar,gogol,gogol2] = myplot.getlschar ( all_namefile[index_f] )  ;  plottitle = plottitle + addchar
953            ### en fait redope is None doit etre remplace par : n'est ni maxt ni mint
954            if redope is None and ltst is not None and ( (mapmode == 0) or (proj in ["lcc","laea","merc","nsper"]) ):  plottitle = plottitle + "_LT" + str(ltst)
955       else:
956            if fileref is not None:
957               if (index_f+1)%3 == 0:     plottitle = basename+' '+"fig(1) "+ope+" fig(2)"
958               elif (index_f+2)%3 == 0:   plottitle = basename+' '+fileref
959               else:                        plottitle = basename+' '+all_namefile[index_f]
960            else:                            plottitle = basename+' '+all_namefile[index_f]
961       if mult != 1:                         plottitle = '{:.0e}'.format(mult) + "*" + plottitle
962       if zetitle[0] != "fill":                 
963          if index_f < len(zetitle): plottitle = zetitle[index_f]
964          else: plottitle = zetitle[0]
965          if titleref is "fill":             titleref=zetitle[index_f]
966          if fileref is not None and which != "xy":
967             if (index_f+2)%3 == 0:        plottitle = titleref
968             if (index_f+1)%3 == 0:        plottitle = "fig(1) "+ope+" fig(2)"
969#       if indexlon is not None:      plottitle = plottitle + " lon: " + str(min(lon[indexlon])) +" "+ str(max(lon[indexlon]))
970#       if indexlat is not None:      plottitle = plottitle + " lat: " + str(min(lat[indexlat])) +" "+ str(max(lat[indexlat]))
971#       if indexvert is not None:     plottitle = plottitle + " vert: " + str(min(vert[indexvert])) +" "+ str(max(vert[indexvert]))
972#       if indextime is not None:     plottitle = plottitle + " time: " + str(min(time[indextime])) +" "+ str(max(time[indextime]))
973       if colorb != "onebar": mpl.pyplot.title( plottitle )
974       if nplot >= numplot: error = True
975       nplot += 1
976
977       if len(namefiles) > 1 and len(var) == 1 and which == "unidim": index_f=index_f+1
978       firstpass=False
979
980    if colorb == "onebar":
981        cax = mpl.pyplot.axes([0.1, 0.2, 0.8, 0.03]) # a ameliorer
982        zecb = mpl.pyplot.colorbar(cax=cax, orientation="horizontal", format=myplot.fmtvar(fvar.upper()),\
983                 ticks=np.linspace(zevmin,zevmax,num=min([ticks/2+1,21])),extend='neither',spacing='proportional')
984        if zetitle[0] != "fill": zecb.ax.set_xlabel(zetitle[index_f]) ; zetitle[index_f]=""
985
986
987    ##########################################################################
988    ### Save the figure in a file in the data folder or an user-defined folder
989    if outputname is None:
990       if typefile in ['meso']:   prefix = myplot.getprefix(nc)
991       elif typefile in ['gcm']:            prefix = 'LMD_GCM_'
992       else:                                prefix = ''
993    ###
994       zeplot = prefix + basename
995       if zoom:            zeplot = zeplot + "zoom"+str(abs(zoom))
996       if addchar:         zeplot = zeplot + addchar
997       if numplot <= 0:    zeplot = zeplot + "_LT"+str(abs(numplot))
998    ###
999       if not target:      zeplot = namefile[0:find(namefile,'wrfout')] + zeplot
1000       else:               zeplot = target + "/" + zeplot 
1001    ###
1002    else:
1003       zeplot=outputname
1004
1005    if mrate is None:
1006        pad_inches_value = 0.35
1007        if wlon[1]-wlon[0] < 2.: pad_inches_value = 0.5  # LOCAL MODE (small values)
1008        print "********** SAVE ", save
1009        if save == 'png': 
1010            if display: myplot.makeplotres(zeplot,res=100.,pad_inches_value=pad_inches_value) #,erase=True)  ## a miniature
1011            myplot.makeplotres(zeplot,res=resolution,pad_inches_value=pad_inches_value,disp=False)
1012        elif save in ['eps','svg','pdf']:     myplot.makeplotres(zeplot,pad_inches_value=pad_inches_value,disp=False,ext=save)
1013        elif save == 'gui':                   mpl.pyplot.show()
1014        elif save == 'donothing':             pass
1015        elif save == 'txt':                   print "Saved results in txt file." 
1016        else: 
1017            print "INFO: save mode not supported. using gui instead."
1018            mpl.pyplot.show()
1019
1020    ###################################
1021    #### Getting more out of this video -- PROBLEMS WITH CREATED VIDEOS
1022    #
1023    if mrate is not None and save != "html":
1024        print "Re-encoding movie.. first pass"
1025        video.first_pass(filename=zeplot,quality=mquality,rate=mrate)
1026    #    print "Re-encoding movie.. second pass"
1027    #    video.second_pass(filename=moviename,quality=mquality,rate=mrate)   
1028
1029    ###############
1030    ### Now the end
1031    return zeplot
Note: See TracBrowser for help on using the repository browser.