<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=iso-8859-1">
<style type="text/css" style="display:none;"><!-- P {margin-top:0;margin-bottom:0;} --></style>
</head>
<body dir="ltr">
<div id="divtagdefaultwrapper" style="font-size:12pt;color:#000000;font-family:Calibri,Arial,Helvetica,sans-serif;" dir="ltr">
<br>
<div style="color: rgb(0, 0, 0);">
<div>
<div id="divtagdefaultwrapper" dir="ltr" style="font-size:12pt; color:#000000; font-family:Calibri,Arial,Helvetica,sans-serif">
<p>Dear WRF users,</p>
<p><br>
</p>
<p>I am doing a couple of experiments that are all identical (using exactly the same wrf.exe, the same namelist, the same time frame) except that I restart from different restart files (which I modify myself from original wrfrst files). I had 12 identical experiments
 in total, and 2 experiments that suddenly stopped after&nbsp;<span>2007-11-25_14:00:00</span> because of this:</p>
<p><br>
</p>
<p>----------------------------------------------<br>
</p>
<p></p>
<div>&nbsp;d01 2007-11-25_14:00:00&nbsp; MMINLU error on input<br>
&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 2 input_wrf: wrf_get_next_time current_date: 2007-11-25_14:00:00 Sta<br>
&nbsp;tus =&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; -11<br>
&nbsp;-------------- FATAL CALLED ---------------<br>
&nbsp;FATAL CALLED FROM FILE:&nbsp; &lt;stdin&gt;&nbsp; LINE:&nbsp;&nbsp;&nbsp;&nbsp; 895<br>
&nbsp; ... Could not find matching time in input file ^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@<br>
&nbsp;^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@<br>
&nbsp;-------------------------------------------<br>
<br>
<br>
So I decided to run these 2 experiments again. One finished without any problem. The second stopped suddenly during
<span>wrfout_d01_2007-11-19</span>, for the same reason as above, just on a different day.<br>
<br>
So I decided to run again the last experiment. It stopped after&nbsp;<span>2007-11-22_14:00:00</span> because the same thing again:<br>
<br>
---------------------------------------------<br>
<div>&nbsp;d01 2007-11-22_14:00:00&nbsp; MMINLU error on input<br>
&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 2 input_wrf: wrf_get_next_time current_date: 2007-11-22_14:00:00 Sta<br>
&nbsp;tus =&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; -11<br>
&nbsp;-------------- FATAL CALLED ---------------<br>
&nbsp;FATAL CALLED FROM FILE:&nbsp; &lt;stdin&gt;&nbsp; LINE:&nbsp;&nbsp;&nbsp;&nbsp; 895<br>
&nbsp; ... Could not find matching time in input file ^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@<br>
&nbsp;^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@^@<br>
&nbsp;-------------------------------------------</div>
<br>
According to Google, it seems that other people have solved the issue by adding &quot;ulimit -s unlimited&quot; or &quot;limit stacksize unlimited&quot;. But this is already in my run_mpi script which launches the model. Other people suggested that it would be related to the maximum
 number of output time allowed (10000 in my simulation). I don't believe in this second argument because I'm doing exactly the same kind of experiments about 12 independent times, and it only failed with the last 2 ones.<br>
<br>
Do you have any thought on why that might be?<br>
<br>
At the moment, I'm re-running it again... We'll see how random the whole thing is. Even though, it doesn't always seem to be on the same day, 14:00 seems to be the time when it fails.<br>
<br>
<span>I attach a few relevant files.</span><br>
<br>
Thank you,<br>
<br>
Maxime<br>
</div>
<br>
<p></p>
<p><br>
</p>
<div id="Signature">
<div id="divtagdefaultwrapper" dir="ltr" style="font-size:12pt; color:rgb(0,0,0); font-family:Calibri,Arial,Helvetica,sans-serif,&quot;EmojiFont&quot;,&quot;Apple Color Emoji&quot;,&quot;Segoe UI Emoji&quot;,NotoColorEmoji,&quot;Segoe UI Symbol&quot;,&quot;Android Emoji&quot;,EmojiSymbols">
<p><font face="Calibri,Arial,Helvetica,sans-serif" size="3" color="black"></font></p>
<font face="Calibri,Arial,Helvetica,sans-serif" size="3" color="black">
<pre style="margin-top:14pt; margin-bottom:14pt"><font face="Candara,sans-serif" size="2"><span style="font-size:9pt">Maxime Colin</span></font><font face="Candara,sans-serif" size="2"><span style="font-size:9pt"> <br>---------------------------------------------</span></font><font face="Candara,sans-serif" size="2"><span style="font-size:9pt"> <br>PhD candidate</span></font><font face="Candara,sans-serif" size="2"><span style="font-size:9pt"> <br>Climate Change Research Centre &amp; ARC Centre of Excellence for Climate</span></font><font face="Candara,sans-serif" size="2"><span style="font-size:9pt"> System Science, UNSW, Australia</span></font><font face="Candara,sans-serif" size="2"><span style="font-size:9pt"> <br>and</span></font><font face="Candara,sans-serif" size="2"><span style="font-size:9pt"> Laboratoire de Météorologie Dynamique, UPMC, France</span></font><font face="Candara,sans-serif" size="2"><span style="font-size:9pt"> </span></font><br><a href="http://www.ccrc.unsw.edu.au/ccrc-team/students/maxime-colin" target="_blank" id="LPNoLP"><span id="LPNoLP"><font face="Candara,sans-serif" size="2"><span style="font-size:9pt">http://www.ccrc.unsw.edu.au/ccrc-team/students/maxime-colin</span></font></span></a><font face="Candara,sans-serif" size="2"><span style="font-size:9pt"> </span></font><br><a href="http://www.climatescience.org.au/staff/profile/mcolin" target="_blank" id="LPNoLP"><span id="LPNoLP"><font face="Candara,sans-serif" size="2"><span style="font-size:9pt">http://www.climatescience.org.au/staff/profile/mcolin</span></font></span></a><font face="Candara,sans-serif" size="2"><span style="font-size:9pt"> <br>---------------------------------------------</span></font><font face="Candara,sans-serif" size="2"><span style="font-size:9pt"> <br>&#43;61 (0)421 620 779    /    &#43;33 (0)6 25 57 81 93</span></font><font face="Candara,sans-serif" size="2"><span style="font-size:9pt"> </span></font><font face="Candara,sans-serif" size="2"><span style="font-size:9pt"><br>m.colin@unsw.edu.au    /     </span></font><a href="https://www.normalesup.org/phare/squirrelmail/src/compose.php?send_to=maxime.colin%40normalesup.org" target="_blank" id="LPNoLP"><span id="LPNoLP"><font face="Candara,sans-serif" size="2"><span style="font-size:9pt">colinmaxime@hotmail.fr</span></font></span></a></pre>
</font><br>
<p></p>
</div>
</div>
</div>
</div>
</div>
</div>
</body>
</html>