<div class="gmail_quote"><div>Hey,</div><div> </div><div>        First of all do not use different values of radt for different domains. I suppose they should be same. Keep 30 if possible. The problem looks like due to the memory or input data. You can use &#39;ulimit -s unlimited&#39; to avoid memory problem. However, I am not sure about whether you are inputing the data properly or not. Please check that part carefully. These are my suggestions!</div>
<div> </div><div>best regards</div><div>~Jagabandhu</div><div> </div><div> </div><blockquote style="margin:0px 0px 0px 0.8ex;padding-left:1ex;border-left-color:rgb(204,204,204);border-left-width:1px;border-left-style:solid" class="gmail_quote">

Message: 1<br>
Date: Wed, 15 Aug 2012 23:15:21 +0000<br>
From: Bart Brashers &lt;<a href="mailto:bbrashers@environcorp.com">bbrashers@environcorp.com</a>&gt;<br>
Subject: [Wrf-users] Odd WRF crashes<br>
To: &quot;wrf-users (<a href="mailto:wrf-users@ucar.edu">wrf-users@ucar.edu</a>)&quot; &lt;<a href="mailto:wrf-users@ucar.edu">wrf-users@ucar.edu</a>&gt;<br>
Message-ID: &lt;020B89C32F08C64FAACB3715A54952154388E92C@wcexs1&gt;<br>
Content-Type: text/plain; charset=&quot;us-ascii&quot;<br>
<br>
WRFv3.4, PGI compilers, WPSv3.4 using ERA-Interim + RTG SST initialization, OpenMPI 1.4.3, on 2x3=6 cores of an AMD 6100 series processor.  Some of my settings:<br>
<br>
 max_dom                             = 3,<br>
 e_we                                = 165, 100, 133,<br>
 e_sn                                = 129, 100, 100,<br>
 e_vert                              = 34,   34,  34,<br>
 dx                                  = 36000, 12000, 4000,<br>
 mp_physics                          = 10,   10,   10,<br>
 mp_zero_out                         = 1,<br>
 mp_zero_out_thresh                  = 1.e-8,<br>
 ra_lw_physics                       = 4,     4,    4,<br>
 ra_sw_physics                       = 4,     4,    4,<br>
 radt                                = 30,   10,    5,<br>
 sf_sfclay_physics                   = 2,     2,    2,<br>
 sf_surface_physics                  = 2,     2,    2,<br>
 sf_urban_physics                    = 0,     0,    0,<br>
 bl_pbl_physics                      = 2,     2,    2,<br>
 bldt                                = 0,     0,    0,<br>
 cu_physics                          = 5,     5,    0,<br>
 cudt                                = 0,     0,    0,<br>
 ishallow                            = 0,<br>
 prec_acc_dt                         = 0.,   0.,   0.,<br>
<br>
Many of my 5.5-day inits run OK, but a few here and there are crashing.  Here&#39;s an example of the frustrating lack of details:<br>
<br>
# tail -20 rsl.error.0002<br>
  OBS NUDGING FOR IN,J,KTAU,XTIME,IVAR,IPL:  3 10   936   171.14  2  2 rindx=45.0<br>
 OBS NUDGING: Reading new obs for time window TBACK =    1.902 TFORWD =    3.902 for grid =  3<br>
 ****** CALL IN4DOB AT KTAU =   954 AND XTIME =     174.13:  NSTA =     134 ******<br>
 ++++++CALL ERROB AT KTAU =   954 AND INEST =  3:  NSTA =   134 ++++++<br>
  OBS NUDGING FOR IN,J,KTAU,XTIME,IVAR,IPL:  3 10   954   174.13  3  3 rindx=45.0<br>
  OBS NUDGING FOR IN,J,KTAU,XTIME,IVAR,IPL:  3 10   954   174.13  4  4 rindx=45.0<br>
  OBS NUDGING FOR IN,J,KTAU,XTIME,IVAR,IPL:  3 10   954   174.13  1  1 rindx=45.0<br>
  OBS NUDGING FOR IN,J,KTAU,XTIME,IVAR,IPL:  3 10   954   174.13  2  2 rindx=45.0<br>
 OBS NUDGING: Reading new obs for time window TBACK =    1.956 TFORWD =    3.956 for grid =  3<br>
 ****** CALL IN4DOB AT KTAU =   972 AND XTIME =     177.35:  NSTA =     134 ******<br>
 ++++++CALL ERROB AT KTAU =   972 AND INEST =  3:  NSTA =   134 ++++++<br>
  OBS NUDGING FOR IN,J,KTAU,XTIME,IVAR,IPL:  3 10   972   177.35  3  3 rindx=45.0<br>
  OBS NUDGING FOR IN,J,KTAU,XTIME,IVAR,IPL:  3 10   972   177.35  4  4 rindx=45.0<br>
  OBS NUDGING FOR IN,J,KTAU,XTIME,IVAR,IPL:  3 10   972   177.35  1  1 rindx=45.0<br>
  OBS NUDGING FOR IN,J,KTAU,XTIME,IVAR,IPL:  3 10   972   177.35  2  2 rindx=45.0<br>
[compute-0-3:19366] *** Process received signal ***<br>
[compute-0-3:19366] Signal: Segmentation fault (11)<br>
[compute-0-3:19366] Signal code:  (128)<br>
[compute-0-3:19366] Failing at address: (nil)<br>
[compute-0-3:19366] *** End of error message ***<br>
<br>
It&#39;s repeatable.  Happens whether I use adaptive time stepping or not.  Happens whether I use OBS nudging or not.<br>
<br>
Any suggestions for how to track down this error?<br>
<br>
Bart Brashers<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
<br>
Ignore Mordac:<br>
<br>
<br>
________________________________<br>
This message contains information that may be confidential, privileged or otherwise protected by law from disclosure. It is intended for the exclusive use of the Addressee(s). Unless you are the addressee or authorized agent of the addressee, you may not review, copy, distribute or disclose to anyone the message or any information contained within. If you have received this message in error, please contact the sender by electronic reply to <a href="mailto:email@environcorp.com">email@environcorp.com</a> and immediately delete all copies of the message.<br>

<br>
<br>
------------------------------<br>
<br>
<br clear="all"><br>-- <br></blockquote></div><div>###########################################################################</div><div>Dr. Jagabandhu Panda, PhD</div><div>Division of Physics and Applied Physics</div><div>
School of Physical and Mathematical Sciences</div><div>Nanyang Technological University</div><div>21 Nanyang Link, SPMS-PAP-04-19</div><div>Singapore 637371</div><div>Email: <a href="mailto:jpanda@ntu.edu.sg" target="_blank">jpanda@ntu.edu.sg</a>, <a href="mailto:jagabandhu@gmail.com" target="_blank">jagabandhu@gmail.com</a> </div>
<div><div>Personal Web Page: <a href="http://jagabandhupanda.wordpress.com/" target="_blank">http://jagabandhupanda.wordpress.com/</a></div></div><div>Group Home Page: <a href="http://www1.spms.ntu.edu.sg/~sunshine/WeatherWeb/html/index.html" target="_blank">http://www1.spms.ntu.edu.sg/~sunshine/WeatherWeb/html/index.html</a></div>
<div>School Home Page: <a href="http://www.spms.ntu.edu.sg/" target="_blank">http://www.spms.ntu.edu.sg/</a></div><div>###########################################################################</div><br>