/[MITgcm]/mitgcm.org/front_content/make_summary
ViewVC logotype

Diff of /mitgcm.org/front_content/make_summary

Parent Directory Parent Directory | Revision Log Revision Log | View Revision Graph Revision Graph | View Patch Patch

revision 1.56 by jmc, Sat Jul 25 00:52:12 2009 UTC revision 1.77 by jmc, Fri Apr 5 21:15:06 2013 UTC
# Line 10  usage() Line 10  usage()
10  {  {
11      echo      echo
12      echo "Usage:  $0 [OPTIONS]"      echo "Usage:  $0 [OPTIONS]"
13      echo      echo
14      echo "where possible OPTIONS are:"      echo "where possible OPTIONS are:"
15      echo "  (-help|-h)           print usage"      echo "  (-help|-h)           print usage"
16      echo "  (-date |-d )PERIOD   run for PERIOD=\"YYYY_MM\""      echo "  (-date |-d )PERIOD   run for PERIOD=\"YYYY_MM\""
17      echo "                         [def=\"$PERIOD\"]"      echo "                         [def=\"$PERIOD\"]"
18      echo      echo
19      exit 1      exit 1
20  }  }
21    
22    export LC_ALL="en_US.UTF-8"
23  CURR_PER=`date +%Y`"_"`date +%m`  CURR_PER=`date +%Y`"_"`date +%m`
24  # defaults  # defaults
25  PERIOD=$CURR_PER  PERIOD=$CURR_PER
# Line 29  for ac_option ; do Line 30  for ac_option ; do
30    
31      # If the previous option needs an argument, assign it.      # If the previous option needs an argument, assign it.
32      if test -n "$ac_prev"; then      if test -n "$ac_prev"; then
33          eval "$ac_prev=\$ac_option"          eval "$ac_prev=\$ac_option"
34          ac_prev=          ac_prev=
35          continue          continue
36      fi      fi
37    
38      ac_optarg=`expr "x$ac_option" : 'x[^=]*=\(.*\)'`      ac_optarg=`expr "x$ac_option" : 'x[^=]*=\(.*\)'`
39    
40      case $ac_option in      case $ac_option in
41            
42          -help | --help | -h | --h)          -help | --help | -h | --h)
43              usage ;;              usage ;;
           
         -date | --date | -d | --d)  
             ac_prev=PERIOD ;;  
         --date=* | -date=*)  
             PERIOD=$ac_optarg ;;  
44    
45          *)          -date | --date | -d | --d)
46                ac_prev=PERIOD ;;
47            --date=* | -date=*)
48                PERIOD=$ac_optarg ;;
49    
50            *)
51              echo "Error: don't understand argument \"$ac_option\""              echo "Error: don't understand argument \"$ac_option\""
52              usage              usage
53              ;;              ;;
54    
55       esac       esac
56    
# Line 66  res_url="http://mitgcm.org/testing/" Line 67  res_url="http://mitgcm.org/testing/"
67  #  Create the links in $OUTFILE :  #  Create the links in $OUTFILE :
68  echo "Creating the \"latest\" file for each machine: "  echo "Creating the \"latest\" file for each machine: "
69  the_date=`date`  the_date=`date`
 cat > $OUTFILE << EOF  
 <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN"  
     "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">  
   
 <html xmlns="http://www.w3.org/1999/xhtml">  
   <head>  
     <title>MITgcm testing summary</title>  
     <meta name="author" content="Ed Hill" />  
   
     <!-- <base href="http://mitgcm.org/testing/summary/" /> -->  
   
     <!-- Hinting for menu generation -->  
     <meta name="add_name_0" content="Testing" />  
     <meta name="add_name_1" content="" />  
     <meta name="add_name_2" content="" />  
     <meta name="add_title" content="Testing" />  
     <!-- Hinting for menu generation -->  
   
   </head>  
   <body>  
     <p>The MITgcm model is tested  
       (compiled and run) in an automated fashion on a varirety of  
       different machines.  The following is a summary of the MITgcm  
       verification suite for the time period: <b>$PERIOD</b>.</p>  
   
     <p>The machine naming scheme is:<br /></p>  
     <table align="center" cellpadding="0" border="0">  
       <tr bgcolor="#00cccc"> <td><b>Machine Type</b></td> <td><b>Nickname</b></td>  
         <td><b>Notes</b></td> </tr>  
   
       <tr bgcolor="#bbddff">  
         <td>Intel P4</td> <td>"faulks"</td> <td>Fedora Core 6 </td> </tr>  
       <tr bgcolor="#bbffdd">  
         <td> Intel P4 </td> <td>"meander"</td> <td>Ubuntu 8.10 </td> </tr>  
       <tr bgcolor="#bbddff">  
         <td> Intel P4 </td> <td>"lagoon"</td> <td>Fedora 8 </td> </tr>  
       <tr bgcolor="#bbffdd">  
         <td> Intel Celeron (P4) </td> <td>"mdvia32"</td> <td>Mandriva 2009.1 </td> </tr>  
       <tr bgcolor="#bbddff">  
         <td> Intel Celeron (P4) </td> <td>"jauntyia32"</td> <td>Ubuntu 9.04 </td> </tr>  
       <tr bgcolor="#bbffdd">  
         <td> Opteron Barcelona </td> <td>"harbor"</td> <td>Ubuntu 8.04 LTS (x86_64)</td> </tr>  
       <tr bgcolor="#bbddff">  
         <td> Intel Xeon (Woodcrest) </td> <td>"dickens"</td> <td>Fedora 10 (x86_64)</td> </tr>  
       <tr bgcolor="#bbffdd">  
         <td> Intel Core 2 duo </td> <td>"danton"</td> <td>Fedora 11 (x86_64)</td> </tr>  
   
       <tr bgcolor="#bbddff">  
         <td> <a href="http://acesgrid.org">ACESgrid Dell Xeon</a> </td>  
         <td>"aces"</td><td>Fedora Core 2</td> </tr>  
   
       <tr bgcolor="#bbffdd">  
         <td><a href="http://www.darwinproject.mit.edu/wiki/">Intel Xeon (Woodcrest) cluster</a>  
         </td> <td>"beagle"</td><td>Rocks 5.2 (x86_64)</td> </tr>  
   
       <!--  
       <tr bgcolor="#bbffdd">  
         <td> Intel P3/P4 Beowulf </td> <td>"myrinet"</td>  
         <td><a href="http://mitgcm.org/projects/MITGCM_CLUSTER/">MITgcm cluster  
         facility </a></td> </tr>  
       <tr bgcolor="#bbddff">  
         <td>Alpha cluster</td> <td>"halem"</td>  
         <td><a href="http://nccstag.gsfc.nasa.gov/halem/quickstart_halem.html">  
         NASA NCCS Halem</a></td> </tr>  
       <tr bgcolor="#bbffdd">  
         <td> SGI Origin 2000 </td> <td>"hopper"</td>  
         <td><a href="http://www.nas.nasa.gov/User/Systemsdocs/O2K/o2k.html">  
         NAS SGI Origin 2000 </a></td> </tr>  
       <tr bgcolor="#bbddff">  
         <td> SGI Origin 3000</td><td>"lomax"/"turing"</td>  
         <td><a href="http://www.nas.nasa.gov/User/Systemsdocs/O3K/o3k.html">  
         NAS SGI Origin 3000 </a></td> </tr>  
       -->  
   
       <tr bgcolor="#bbddff">  
         <td> SGI Altix Cluster </td> <td>"columbia"</td>  
         <td><a href="http://www.nas.nasa.gov/Resources/Systems/columbia.html">  
         NAS Columbia </a></td> </tr>  
   
       <tr bgcolor="#bbffdd">  
         <td> IBM POWER4 SP </td> <td>"edvir"</td> <td> AIX 5.2 </td> </tr>  
       <tr bgcolor="#bbddff">  
         <td> IBM POWER5+ SP </td> <td>"blueice"</td>  
         <td><a href="http://www.scd.ucar.edu/computers/blueice/">NCAR Blueice  
         </a></td> </tr>  
   
       <tr bgcolor="#bbffdd">  
         <td> AMD Opteron </td> <td>"starp"</td> <td>SuSE SLES 10 (AMD64)</td> </tr>  
   
       <tr bgcolor="#bbddff">  
         <td> AMD Opteron </td> <td>"solasrv"</td> <td>Solaris 10</td> </tr>  
       <tr bgcolor="#bbffdd">  
         <td> Sun UltraSparc IV </td> <td>"rays"</td> <td>Solaris 10</td> </tr>  
       <!--  
         <td> Sun UltraSparc IV </td> <td>"solssrv"</td> <td>Solaris 10</td> </tr>  
         <td> Sun UltraSparc IV </td> <td>"model"</td> <td>Solaris 9</td> </tr>  
       -->  
       <tr bgcolor="#bbddff">  
         <td> NEC SX-8 </td> <td>"sx8"</td> <td>Super-UX </td> </tr>  
       <tr bgcolor="#bbffdd">  
         <td> Cray XD1 (AMD Opteron) </td> <td>"xd1"</td>  
         <td>Cray HPC enhanced Linux 2.6.5 </td> </tr>  
       <tr bgcolor="#bbddff">  
         <td> PowerPC970MP cluster </td> <td>"bigred"</td>  
         <td>SuSE SLES 9 (PPC) </td> </tr>  
   
       <!--  
       <tr bgcolor="#bbffdd">  
         <td><a href="http://www.testdrive.hp.com/current.shtml"> HP test-drive </a>  
         (Pentium III) </td> <td>"td152"</td> <td> FreeBSD 6.2 </td> </tr>  
       <tr bgcolor="#bbddff">  
         <td><a href="http://www.testdrive.hp.com/current.shtml"> HP test-drive </a>  
         (Itanium II) </td> <td>"td187"</td> <td>SuSE SLES 10 </td> </tr>  
       <tr bgcolor="#bbffdd">  
         <td><a href="http://www.testdrive.hp.com/current.shtml"> HP test-drive </a>  
         (PA-RISC 8900) </td> <td>"td191"</td> <td> HP-UX 11i 11.11 </td> </tr>  
       <tr bgcolor="#bbddff">  
         <td><a href="http://www.testdrive.hp.com/current.shtml"> HP test-drive </a>  
         (Itanium II) </td> <td>"td194"</td> <td> HP-UX 11i v3 </td> </tr>  
       <tr bgcolor="#bbffdd">  
       -->  
   
       <!--  
       <tr bgcolor="#bbddff"> <td>  </td> <td>""</td>  
         <td></td> </tr>  
       -->  
   
     </table>  
70    
71      <p><br />  sed "s/_PERIOD/$PERIOD/" summary_head > $OUTFILE
72        The complete output for the verification runs can be found in  cat <<EOF >>$OUTFILE
       <a href="http://mitgcm.org/testing/summary/">the summary pages</a>  
       and the <a href="http://mitgcm.org/testing/results/">testing archives</a>.  
       The latest reports are:</p>  
73      <table align="center" cellpadding="0" cellspacing="0" border="0" width="95%">      <table align="center" cellpadding="0" cellspacing="0" border="0" width="95%">
74  <tr bgcolor="#00cccc">  <tr bgcolor="#00cccc">
75    <td height="0"> <b>Nickname</b> </td>    <td height="0"> <b>Nickname</b> </td>
# Line 215  EOF Line 85  EOF
85  color="#bbffdd"  color="#bbffdd"
86  ncolor="#bbddff"  ncolor="#bbddff"
87    
88  MACHINES="faulks meander lagoon harbor dickens danton aces"  MACHINES="aces- acesgrid baudelaire dickens danton beagle"
89  MACHINES="$MACHINES beagle columbia edvir rays solssrv solasrv sx8 xd1"  MACHINES="$MACHINES pleiades iblade sx8 uv100 solasrv stomp weber"
 MACHINES="$MACHINES bigred starp"  
90    
91  ( cd $INDIR ; ls -1 -t */summary.txt | sed 's/\/summary.txt//' ) > ./dir_all  ( cd $INDIR ; ls -1 -t */summary.txt | sed 's/\/summary.txt//' ) > ./dir_all
92    
# Line 225  MALL=`cat ./dir_all | sed -e 's|_| |g' | Line 94  MALL=`cat ./dir_all | sed -e 's|_| |g' |
94  for madd in $MALL ; do  for madd in $MALL ; do
95      present=0      present=0
96      for m in $MACHINES ; do      for m in $MACHINES ; do
97          echo $madd | grep $m > /dev/null 2>&1          echo $madd | grep $m > /dev/null 2>&1
98          RETVAL=$?          RETVAL=$?
99          test $RETVAL = 0  &&  present=1          test $RETVAL = 0  &&  present=1
100          continue          continue
101      done      done
102      test $present = 0  &&  MACHINES="$MACHINES $madd"      test $present = 0  &&  MACHINES="$MACHINES $madd"
103  done  done
104  #MACHINES="faulks"  #MACHINES="baudelaire"
105    
106  for mname in $MACHINES ; do  for mname in $MACHINES ; do
107    
# Line 265  for mname in $MACHINES ; do Line 134  for mname in $MACHINES ; do
134              OPTFILE="not_explicitly_specified"              OPTFILE="not_explicitly_specified"
135          fi          fi
136    
137          ADJOINT=          # EXTRA = non-standard list of experiment
138            ADJOINT=0
139            TANGLIN=0
140            OPENAD=0
141          RESTART=0          RESTART=0
142          NOI3E=0          EXTRA=
143            FAST=0
144            DVLP=0
145            MPI=0
146          MTH=0          MTH=0
147            UR4=0
148          if test -r $dir/summary.txt ; then          if test -r $dir/summary.txt ; then
149              comm=`grep 'ADJOINT=true' $dir/summary.txt 2>/dev/null`              ADJOINT=`grep -c -i '^ADJOINT' $dir/summary.txt`
150              eval $comm              if test "x$ADJOINT" = x1 ; then
151                  OPENAD=`grep -c '^Adjoint .* OpenAD' $dir/summary.txt`
152                fi
153                TANGLIN=`grep -c -i '^TANGLIN' $dir/summary.txt`
154                if test "x$TANGLIN" = x1 ; then
155                  OPENAD=`grep -c '^TangLin .* OpenAD' $dir/summary.txt`
156                fi
157              RESTART=`grep -c 'test 2+2=4 summary' $dir/summary.txt`              RESTART=`grep -c 'test 2+2=4 summary' $dir/summary.txt`
158              NOI3E=`grep -c "^run: .*testreport.* '*-noieee'*" $dir/summary.txt`              comm=`grep '^run: .*testreport.* ' $dir/summary.txt`
159              MTH=`grep -c "^run: .*testreport.* -mth " $dir/summary.txt`              EXTRA=`echo "$comm" | grep " -*-tdir\>" | sed -e "s/^.* -*-tdir\>//" -e "s/ -.*$//"`
160                if test "x$EXTRA" = x ; then
161                    EXTRA=`echo "$comm" | grep " -*-t\>" | sed -e "s/^.*-*-t\>//" -e "s/ -.*$//"`
162                fi
163                if test "x$EXTRA" = x ; then EXTRA=0 ; else
164                    #echo -n "EXTRA=$EXTRA"
165                    nn0=`echo $EXTRA | sed "s/ *' *//g" | wc -w`
166                    nn1=`echo $EXTRA | sed "s/ *' *//g" | tr ' ' '\n' | grep -c "\<monod_"`
167                    nn2=`echo $EXTRA | sed "s/ *' *//g" | tr ' ' '\n' | grep -c "\<darwin_"`
168                    EXTRA=1
169                    if [ $nn1 -ge 2 ] ; then EXTRA=2 ; fi
170                    if [ $nn2 -ge 2 ] ; then EXTRA=3 ; fi
171                    #echo " : nn0=$nn0 ; nn1=$nn1 ; nn2=$nn2"
172                fi
173                FAST=`echo "$comm" | grep -c " -*-fast\>"`
174                if test "x$FAST" = x0 ; then
175                    FAST=`echo "$comm" | grep -c " '*-noieee'*"`
176                fi
177                DVLP=`echo "$comm" | grep -c " -*-devel\>"`
178                MPI=`echo "$comm" | grep -c " -*-mpi\>"`
179                if test "x$MPI" = x0 ; then
180                    MPI=`echo "$comm" | grep -c " -*-MPI\>"`
181                fi
182                MTH=`echo "$comm" | grep -c " -*-mth\>"`
183                UR4=`echo "$comm" | grep -c " -*-use_r4\>"`
184                if test "x$UR4" = x0 ; then
185                    UR4=`echo "$comm" | grep -c " -*-ur4\>"`
186                fi
187          fi          fi
188          if test "x$RESTART" = x0 ; then          if test "x$ADJOINT" = x1 ; then
189              kind="forward"              kind="adjoint-taf" ; order=0
190              test "x$ADJOINT" = xtrue  &&  kind="adjoint"            if test "x$OPENAD" = x1 ; then
191                kind="adjoint-oad" ; order=2
192              fi
193            elif test "x$TANGLIN" = x1 ; then
194                kind="tanglin-taf" ; order=1
195              if test "x$OPENAD" = x1 ; then
196                kind="tanglin-oad" ; order=3
197              fi
198            elif test "x$RESTART" = x0 ; then
199                kind="forward" ; order=4
200          else          else
201              kind="restart"              kind="restart" ; order=5
202            fi
203            order=`expr $order + 10 \* $EXTRA`
204            order=`printf '%3.3i' $order`
205            if test "x$UR4" = x1 ; then
206                OPTFILE="${OPTFILE}.use_r4"
207            fi
208            if test "x$MPI" = x1 ; then
209                yy=`echo $OPTFILE | grep -c '+mpi'`
210                if test $yy = 0 ; then OPTFILE="${OPTFILE}+mpi" ; fi
211          fi          fi
212          if test "x$MTH" = x1 ; then          if test "x$MTH" = x1 ; then
213              yy=`echo $OPTFILE | grep -c '+mth$'`              yy=`echo $OPTFILE | grep -c '+mth$'`
214              if test $yy = 0 ; then OPTFILE="${OPTFILE}+mth" ; fi              if test $yy = 0 ; then OPTFILE="${OPTFILE}+mth" ; fi
215          fi          fi
216          if test "x$NOI3E" = x1 ; then          if test "x$FAST" = x1 ; then
217              OPTFILE="${OPTFILE}.noieee"              OPTFILE="${OPTFILE}.fast"
218            fi
219            if test "x$DVLP" = x1 ; then
220                OPTFILE="${OPTFILE}.dvlp"
221          fi          fi
222    
223          t_pass="--"          t_pass="--"
# Line 305  for mname in $MACHINES ; do Line 235  for mname in $MACHINES ; do
235          for tok in $tokens ; do          for tok in $tokens ; do
236              echo $tok >> ./ms_tmp              echo $tok >> ./ms_tmp
237          done          done
238          DAY=`cat ./ms_tmp | awk '(length($1)==8 && substr($1,0,3)=="200")'`          DAY=`cat ./ms_tmp | awk '(length($1)==8 && substr($1,0,2)=="20")'`
239          rm -f ./ms_tmp          rm -f ./ms_tmp
240    
241          echo "$OPTFILE$kind $DAY $OPTFILE $kind $i $t_pass:$t_tot" >> ./mlist          echo "$OPTFILE$order $DAY $OPTFILE $kind $i $t_pass:$t_tot" >> ./mlist
242    
243      done      done
244    
# Line 320  for mname in $MACHINES ; do Line 250  for mname in $MACHINES ; do
250      if test $num -gt 0 ; then      if test $num -gt 0 ; then
251    
252          # swap colors          # swap colors
253          ctmp=$color          ctmp=$color
254          color=$ncolor          color=$ncolor
255          ncolor=$ctmp          ncolor=$ctmp
256    
257          keys=`cat ./mlist | cut -d " " -f 1 | sort | uniq`          keys=`cat ./mlist | cut -d " " -f 1 | sort | uniq`
258    
# Line 334  for mname in $MACHINES ; do Line 264  for mname in $MACHINES ; do
264              optf=`echo $tline | cut -d " " -f 3`              optf=`echo $tline | cut -d " " -f 3`
265              DAY=`echo $tline | cut -d " " -f 2`              DAY=`echo $tline | cut -d " " -f 2`
266              URL="results/$PERIOD/$ldir"              URL="results/$PERIOD/$ldir"
267                #-- machine name to print:
268                sname=`echo $mname | sed 's/-$//'`
269                alt=`echo $key | sed "s/$optf//"`
270               #if   [ $alt -ge 30 ] ; then sname="${sname}.darwin"
271               #elif [ $alt -ge 20 ] ; then sname="${sname}.monod" ; fi
272              cat <<EOF >>$OUTFILE              cat <<EOF >>$OUTFILE
273  <tr bgcolor="$color">  <tr bgcolor="$color">
274    <td height="0"> $mname </td>    <td height="0"> $sname </td>
275    <td> $optf </td>    <td> $optf </td>
276    <td> $kind </td>    <td> $kind </td>
277    <td> <a href="$res_url$URL">$DAY</a> </td>    <td> <a href="$res_url$URL">$DAY</a> </td>
# Line 357  cat >> $OUTFILE << EOF Line 292  cat >> $OUTFILE << EOF
292      </table>      </table>
293    
294  <p>Examples of the scripts used for these testing runs can be obtained from: <a  <p>Examples of the scripts used for these testing runs can be obtained from: <a
295  href="http://mitgcm.org/cgi-bin/viewcvs.cgi/MITgcm/tools/example_scripts/">  href="http://mitgcm.org/viewvc/MITgcm/MITgcm/tools/example_scripts/">
296  MITgcm/tools/example_scripts</a>.</p>  MITgcm/tools/example_scripts</a>.</p>
297    
298    
Legend:
Removed from v.1.56  
changed lines
  Added in v.1.77
  ViewVC Help
Powered by ViewVC 1.1.22