<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=iso-8859-1">
<meta name="Generator" content="Microsoft Word 12 (filtered medium)">
<!--[if !mso]><style>v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style><![endif]--><style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Tahoma;
        panose-1:2 11 6 4 3 5 4 4 2 4;}
@font-face
        {font-family:Consolas;
        panose-1:2 11 6 9 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman","serif";
        color:black;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
pre
        {mso-style-priority:99;
        mso-style-link:"HTML Preformatted Char";
        margin:0cm;
        margin-bottom:.0001pt;
        font-size:10.0pt;
        font-family:"Courier New";
        color:black;}
span.HTMLPreformattedChar
        {mso-style-name:"HTML Preformatted Char";
        mso-style-priority:99;
        mso-style-link:"HTML Preformatted";
        font-family:Consolas;
        color:black;}
span.EmailStyle19
        {mso-style-type:personal-reply;
        font-family:"Calibri","sans-serif";
        color:#1F497D;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:612.0pt 792.0pt;
        margin:72.0pt 72.0pt 72.0pt 72.0pt;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body bgcolor="#FFFFCC" lang="EN-GB" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,&quot;sans-serif&quot;;color:#1F497D">Jamie,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,&quot;sans-serif&quot;;color:#1F497D"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,&quot;sans-serif&quot;;color:#1F497D">There will be a telco at 16:00GMT on Tuesday.&nbsp; We have several candidate topics for discussion at the moment (See http://esgf.org/wiki/Esgf/Cmip5Meetings) but
 checksums is not one of them.&nbsp; Let me coordinate a realistic agenda and I'll try and ensure there is some time to discuss this.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,&quot;sans-serif&quot;;color:#1F497D"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,&quot;sans-serif&quot;;color:#1F497D">Cheers,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,&quot;sans-serif&quot;;color:#1F497D">Stephen.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,&quot;sans-serif&quot;;color:#1F497D"><o:p>&nbsp;</o:p></span></p>
<div>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Consolas;color:#1F497D">---<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Consolas;color:#1F497D">Stephen Pascoe&nbsp; &#43;44 (0)1235 445980<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Consolas;color:#1F497D">Centre of Environmental Data Archival<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:10.5pt;font-family:Consolas;color:#1F497D">STFC Rutherford Appleton Laboratory, Harwell Oxford, Didcot OX11 0QX, UK<o:p></o:p></span></p>
</div>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,&quot;sans-serif&quot;;color:#1F497D"><o:p>&nbsp;</o:p></span></p>
<div>
<div style="border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0cm 0cm 0cm">
<p class="MsoNormal"><b><span lang="EN-US" style="font-size:10.0pt;font-family:&quot;Tahoma&quot;,&quot;sans-serif&quot;;color:windowtext">From:</span></b><span lang="EN-US" style="font-size:10.0pt;font-family:&quot;Tahoma&quot;,&quot;sans-serif&quot;;color:windowtext"> go-essp-tech-bounces@ucar.edu
 [mailto:go-essp-tech-bounces@ucar.edu] <b>On Behalf Of </b>Kettleborough, Jamie<br>
<b>Sent:</b> 16 March 2012 10:27<br>
<b>To:</b> Gavin M. Bell; Barron Jr, Tom O.<br>
<b>Cc:</b> go-essp-tech@ucar.edu<br>
<b>Subject:</b> Re: [Go-essp-tech] What is the risk that science is done using 'deprecated' data?<o:p></o:p></span></p>
</div>
</div>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:&quot;Arial&quot;,&quot;sans-serif&quot;;color:blue">Hello,</span><o:p></o:p></p>
<p class="MsoNormal">&nbsp;<o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:&quot;Arial&quot;,&quot;sans-serif&quot;;color:blue">when is the next telco, and is this issue on the agenda?</span><o:p></o:p></p>
<p class="MsoNormal">&nbsp;<o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:&quot;Arial&quot;,&quot;sans-serif&quot;;color:blue">Thanks,</span><o:p></o:p></p>
<p class="MsoNormal">&nbsp;<o:p></o:p></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:&quot;Arial&quot;,&quot;sans-serif&quot;;color:blue">Jamie</span><o:p></o:p></p>
<blockquote style="border:none;border-left:solid blue 1.5pt;padding:0cm 0cm 0cm 4.0pt;margin-left:3.75pt;margin-top:5.0pt;margin-right:0cm;margin-bottom:5.0pt">
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<div class="MsoNormal" align="center" style="text-align:center"><span lang="EN-US">
<hr size="2" width="100%" align="center">
</span></div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><b><span lang="EN-US" style="font-size:10.0pt;font-family:&quot;Tahoma&quot;,&quot;sans-serif&quot;">From:</span></b><span lang="EN-US" style="font-size:10.0pt;font-family:&quot;Tahoma&quot;,&quot;sans-serif&quot;"> go-essp-tech-bounces@ucar.edu [mailto:go-essp-tech-bounces@ucar.edu]
<b>On Behalf Of </b>Gavin M. Bell<br>
<b>Sent:</b> 12 March 2012 22:21<br>
<b>To:</b> Barron Jr, Tom O.<br>
<b>Cc:</b> go-essp-tech@ucar.edu<br>
<b>Subject:</b> Re: [Go-essp-tech] What is the risk that science is done using 'deprecated' data?</span><span lang="EN-US"><o:p></o:p></span></p>
<p class="MsoNormal">Hi Tom, <br>
<br>
I don't envy your (ORNL's .et al) position, but this is what must be done.&nbsp; This is why Balaji was so adamant about making checksums *required* from the very beginning of this endeavor.&nbsp; He was right.&nbsp; Though, to be honest it was always something that was known...
 this is not a surprise to anyone.&nbsp; I think that having it be &quot;optional&quot; in the publisher was the sticky point.&nbsp; Putting it in the publisher is, IMHO, or should be the checksum of last resort.&nbsp; Folks should have schemes to calculate these things out of band
 and integrating them back into the publisher... a feature that made it's way into the publisher albeit a bit after the bell.&nbsp; It is no one's fault just a comedy of errors but... now we are all enlightened and know *why* we need checksums (hashes) in a distributed
 system that requires integrity assertions made about said data.<br>
<br>
Oh well :-(...<br>
<br>
At least we are relatively early in the game... if that is any consolation :-\<br>
<br>
checksums or bust.<br>
<br>
P.S.<br>
Regarding the catalogs, the topic Stephen has been shepherding, there are cool things we can do with having the constituent files' checksums.&nbsp; Mmmwwaaahhh aahhh aahhhh.... (evil laugh).<br>
<br>
<br>
On 3/12/12 9:46 AM, Barron Jr, Tom O. wrote: <o:p></o:p></p>
<pre>Thanks for the reply, Gavin. I understand what you say.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>I just wanted to highlight that a significant amount of data has been published without checksums at ORNL on the ESG2 gateway. Extracting it all from the HPSS archive for checksumming in preparation for republishing on the ESGF portal will take significant time. I'm not saying we shouldn't do it. Just that we shouldn't expect to get it done quickly.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Tom<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>On 2012.0309, at 17:24, Gavin M. Bell wrote:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>Hi Tom,<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>In the simplest form of the assertions we have made about checksums... If you can't get the checksums then it shouldn't / can't be published, period.&nbsp; So access must be gotten and checksums computed.&nbsp; Otherwise you simply can't *trust* the data is &quot;who it says it is&quot;.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>On 3/9/12 11:10 AM, Barron Jr, Tom O. wrote:<o:p></o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>How will a requirement for checksums affect the ability to publish offline datasets that are not immediately accessible for computing a checksum?<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>On 2012.0309, at 03:47, Gavin M. Bell wrote:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>With checksums, we can put in client-side sanity checking tools to give users peace of mind.&nbsp; The other side benefit would be alerting offending sites that something is wrong.&nbsp; I agree with you, Bryan, checksums are a must.&nbsp; We can enforce it mechanically in the publisher.&nbsp; This is worth bringing up at the next call - without spending too much time on it.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>On 3/9/12 12:20 AM, Bryan Lawrence wrote:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>Karl has written to modellng centres requiring them to do this, and I think we should start enforcing it.<o:p></o:p></pre>
<pre>Bryan<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>Hello,<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>If we enforced checksums to be done as a part of publication, then this<o:p></o:p></pre>
<pre>would address this issue, right?<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>On 3/8/12 8:39 AM,<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="mailto:stephen.pascoe@stfc.ac.uk">stephen.pascoe@stfc.ac.uk</a><o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre> wrote:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>Tobias, sorry I miss-typed your name :-)<o:p></o:p></pre>
<pre>S.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>On 8 Mar 2012, at 16:00,<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="mailto:stephen.pascoe@stfc.ac.uk">&lt;stephen.pascoe@stfc.ac.uk&gt;</a><o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre> wrote:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>Hi Thomas,<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>As you say, it's too late to do much re-engineering of the system now -- we've attempted to put in place various identifier systems and none of them are working particularly well -- however I think there is another perspective to your proposal:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>1. ESG/CMIP5 is deployed globally across multiple administrative domains and each domain has the ability to cut corners to get things done, e.g. replacing files silently without changing identifiers.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>2. ESG/CMIP5 system is so complex that who'd blame a sys-admin for doing #1 to get the data to scientists when they need it.&nbsp; Any system that makes it impossible, or even only difficult, to change the underlying data is going to be more complex and difficult to administer than a system that doesn't, unless that system was very rigorously designed, implemented and tested.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Because of #1 I'm convinced that a fit-for-purpose identifier system wouldn't use randomly generated UUIDs but would take the GIT approach of hashing invariants of the dataset so that any changes behind the scenes can be detected.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Because of #2 I'm convinced that now is not the time to start building more software to do this.&nbsp; We have to stabilise the system and learn the lessons of CMIP5 first.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Cheers,<o:p></o:p></pre>
<pre>Stephen.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>On 8 Mar 2012, at 15:32, Tobias Weigel wrote:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>Jamie/All,<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>these are important questions I have been wondering about as well; we just had a small internal meeting yesterday with Estani and Martina, so I'll try to sum some points up here. I am not too familiar with the ESG publishing process, so I can only guess that Stephen's #1 has something to do with the bending of policies that are for pragmatic reasons not enforced in the CMIP5 process. (My intuition is that *ideally* it should be impossible to make data available without going through the whole publication process. Please correct me if I am misunderstanding this.)<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Most of what I have been thinking about however concerns point #2. I'd claim that the risk here should not be underestimated; data consumers being unable to find the data they need is bad (&quot;the advanced search issue&quot;), but users relying on deprecated data - most likely without being aware of it - is certainly dangerous for scientific credibility.<o:p></o:p></pre>
<pre>My suggestion to address this problem is to use globally persistent identifiers (PIDs) that are automatically assigned to data objects (and metadata etc.) on ESG-publication; data should ideally not be known by its file name or system-internal ID, but via a global identifier that never changes after it has been published. Of course, this sounds like the DOIs, but these are extremely coarse grained and very static. The idea is to attach identifiers to the low-level entities and provide solutions to build up a hierarchical ID system (virtual collections) to account for the various layers used in our data. Such persistent identifiers should then be placed prominently in any user interface dealing with managed data. The important thing is: If data is updated, we don't update the data behind identifier x, but assign a new identifier y and create a typed link between these two (which may be the most challenging part) and perhaps put a small annotation on x that this data is depreca<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>ted. A clever user interface should then redirect a user consistently to the latest version of a dataset if a user accesses the old identifier.<o:p></o:p></pre>
<pre>This does not make it impossible to use deprecated data, but at least it raises the consumer's awareness of the issue and lowers the barrier to re-retrieve valid data.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>As for the point in time; I'd be certain that it is too late now, but it is always a good idea to have plans for future improvement.. :)<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Best, Tobias<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Am 08.03.2012 13:06, schrieb Kettleborough, Jamie:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>Thanks for the replies on this - any other replies are still very welcome.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Stephen - being selfish - we aren't too worried about 2 as its less of an issue for us (we do a daily trawl of thredds catalogues for new datasets), but I agree it is a problem more generally.&nbsp; I don't have a feel for which of the problems 1-3 would minimise the risk most if you solved it.&nbsp; I think making sure new data has a new version is a foundation though.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Part of me wonders though whether its already too late to really do anything with versioning in its current form.&nbsp; *But* I may be overestimating the size of the problem of new datasets appearing without versions being updated.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Jamie<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>-----Original Message-----<o:p></o:p></pre>
<pre>From:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="mailto:go-essp-tech-bounces@ucar.edu">go-essp-tech-bounces@ucar.edu</a><o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>[<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="mailto:go-essp-tech-bounces@ucar.edu">mailto:go-essp-tech-bounces@ucar.edu</a><o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>] On Behalf Of Sébastien Denvil<o:p></o:p></pre>
<pre>Sent: 08 March 2012 10:41<o:p></o:p></pre>
<pre>To:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="mailto:go-essp-tech@ucar.edu">go-essp-tech@ucar.edu</a><o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Subject: Re: [Go-essp-tech] What is the risk that science is<o:p></o:p></pre>
<pre>done using 'deprecated' data?<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Hi Stephen, let me add a third point:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>3. Users are aware of a new versions but can't download files<o:p></o:p></pre>
<pre>so as to have a coherent set of files.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>With respect to that point the p2p transition (especially the<o:p></o:p></pre>
<pre>attribut caching on the node) will be a major step forward.<o:p></o:p></pre>
<pre>GFDL just upgrad and we have an amazing success rate of 98%.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>And I agree with Ashish.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Regards.<o:p></o:p></pre>
<pre>Sébastien<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Le 08/03/2012 11:34,<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="mailto:stephen.pascoe@stfc.ac.uk">stephen.pascoe@stfc.ac.uk</a><o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre> a écrit :<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>Hi Jamie,<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>I can imagine there is a risk of papers being written on<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
<pre>deprecated data in two scenarios:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre> 1. Data is being updated at datanodes without creating a<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
<pre>new version<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre> 2. Users are unaware of new versions available and<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
<pre>therefore using<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>deprecated data<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Are you concerned about both of these scenarios?&nbsp; Your<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
<pre>email seems to mainly address #1.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>Thanks,<o:p></o:p></pre>
<pre>Stephen.<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>On 8 Mar 2012, at 10:21, Kettleborough, Jamie wrote:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>Hello,<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Does anyone have a feel for the current level of risk that<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
</blockquote>
<pre>analysists<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>are doing work (with the intention to publish) on data<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
</blockquote>
<pre>that has been<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>found to be wrong by the data providers and so deprecated (in some<o:p></o:p></pre>
<pre>sense)?<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>My feeling is that versioning isn't working (that may be<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
</blockquote>
<pre>putting it a<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>bit strongly.&nbsp; It is too easy for data providers - in their<o:p></o:p></pre>
<pre>understandable drive to get their data out - to have<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
</blockquote>
<pre>updated files on<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>disk without publishing a new version.&nbsp;&nbsp; How big a deal does anyone<o:p></o:p></pre>
<pre>think this is?<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>If the risk that papers are being written based on<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
</blockquote>
<pre>deprecated data is<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>sufficiently large then is there an agreed strategy for<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
</blockquote>
<pre>coping with<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<pre>this?&nbsp; Does it have implications for the requirements of the data<o:p></o:p></pre>
<pre>publishing/delivery system?<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Thanks,<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Jamie<o:p></o:p></pre>
<pre>_______________________________________________<o:p></o:p></pre>
<pre>GO-ESSP-TECH mailing list<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="mailto:GO-ESSP-TECH@ucar.edu">GO-ESSP-TECH@ucar.edu</a><o:p></o:p></pre>
<pre><a href="http://mailman.ucar.edu/mailman/listinfo/go-essp-tech">http://mailman.ucar.edu/mailman/listinfo/go-essp-tech</a><o:p></o:p></pre>
</blockquote>
</blockquote>
<pre>--<o:p></o:p></pre>
<pre>Sébastien Denvil<o:p></o:p></pre>
<pre>IPSL, Pôle de modélisation du climat<o:p></o:p></pre>
<pre>UPMC, Case 101, 4 place Jussieu,<o:p></o:p></pre>
<pre>75252 Paris Cedex 5<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Tour 45-55 2ème étage Bureau 209<o:p></o:p></pre>
<pre>Tel: 33 1 44 27 21 10<o:p></o:p></pre>
<pre>Fax: 33 1 44 27 39 02<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
<pre>_______________________________________________<o:p></o:p></pre>
<pre>GO-ESSP-TECH mailing list<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="mailto:GO-ESSP-TECH@ucar.edu">GO-ESSP-TECH@ucar.edu</a><o:p></o:p></pre>
<pre><a href="http://mailman.ucar.edu/mailman/listinfo/go-essp-tech">http://mailman.ucar.edu/mailman/listinfo/go-essp-tech</a><o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
<pre>Department of Data Management<o:p></o:p></pre>
<pre>Deutsches Klimarechenzentrum GmbH (German Climate Computing Center)<o:p></o:p></pre>
<pre>Bundesstr. 45a<o:p></o:p></pre>
<pre>20146 Hamburg<o:p></o:p></pre>
<pre>Germany<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Tel.: &#43;49 40 460094 104<o:p></o:p></pre>
<pre>E-Mail:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="mailto:weigel@dkrz.de">weigel@dkrz.de</a><o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Website:<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="http://www.dkrz.de">www.dkrz.de</a><o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Managing Director: Prof. Dr. Thomas Ludwig<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>Sitz der Gesellschaft: Hamburg<o:p></o:p></pre>
<pre>Amtsgericht Hamburg HRB 39784<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>_______________________________________________<o:p></o:p></pre>
<pre>GO-ESSP-TECH mailing list<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="mailto:GO-ESSP-TECH@ucar.edu">GO-ESSP-TECH@ucar.edu</a><o:p></o:p></pre>
<pre><a href="http://mailman.ucar.edu/mailman/listinfo/go-essp-tech">http://mailman.ucar.edu/mailman/listinfo/go-essp-tech</a><o:p></o:p></pre>
</blockquote>
</blockquote>
</blockquote>
</blockquote>
<pre>--<o:p></o:p></pre>
<pre>Bryan Lawrence<o:p></o:p></pre>
<pre>University of Reading:&nbsp; Professor of Weather and Climate Computing.<o:p></o:p></pre>
<pre>National Centre for Atmospheric Science: Director of Models and Data.<o:p></o:p></pre>
<pre>STFC: Director of the Centre for Environmental Data Archival.<o:p></o:p></pre>
<pre>Ph: &#43;44 118 3786507 or 1235 445012; Web:home.badc.rl.ac.uk/lawrence<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
<pre>--<o:p></o:p></pre>
<pre>Gavin M. Bell<o:p></o:p></pre>
<pre>--<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre> &quot;Never mistake a clear view for a short distance.&quot;<o:p></o:p></pre>
<pre>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; -Paul Saffo<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>_______________________________________________<o:p></o:p></pre>
<pre>GO-ESSP-TECH mailing list<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="mailto:GO-ESSP-TECH@ucar.edu">GO-ESSP-TECH@ucar.edu</a><o:p></o:p></pre>
<pre><a href="http://mailman.ucar.edu/mailman/listinfo/go-essp-tech">http://mailman.ucar.edu/mailman/listinfo/go-essp-tech</a><o:p></o:p></pre>
</blockquote>
<pre>_______________________________________________<o:p></o:p></pre>
<pre>GO-ESSP-TECH mailing list<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><a href="mailto:GO-ESSP-TECH@ucar.edu">GO-ESSP-TECH@ucar.edu</a><o:p></o:p></pre>
<pre><a href="http://mailman.ucar.edu/mailman/listinfo/go-essp-tech">http://mailman.ucar.edu/mailman/listinfo/go-essp-tech</a><o:p></o:p></pre>
</blockquote>
<pre>--<o:p></o:p></pre>
<pre>Gavin M. Bell<o:p></o:p></pre>
<pre>--<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre> &quot;Never mistake a clear view for a short distance.&quot;<o:p></o:p></pre>
<pre>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; -Paul Saffo<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
</blockquote>
<p class="MsoNormal"><br>
<br>
<o:p></o:p></p>
<pre>-- <o:p></o:p></pre>
<pre>Gavin M. Bell<o:p></o:p></pre>
<pre>Lawrence Livermore National Labs<o:p></o:p></pre>
<pre>--<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre> &quot;Never mistake a clear view for a short distance.&quot;<o:p></o:p></pre>
<pre>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;-Paul Saffo<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre>(GPG Key - <a href="http://rainbow.llnl.gov/dist/keys/gavin.asc">http://rainbow.llnl.gov/dist/keys/gavin.asc</a>)<o:p></o:p></pre>
<pre><o:p>&nbsp;</o:p></pre>
<pre> A796 CE39 9C31 68A4 52A7&nbsp; 1F6B 66B7 B250 21D5 6D3E<o:p></o:p></pre>
</blockquote>
</div>

<br><p>-- 
<BR>Scanned by iCritical.
</p>
<br></body>
</html>