<div dir="ltr"><div>I have a small handful of use cases where it would be nice to save a serialized projection.  The primary case I'm thinking of is making projections on a supercomputer and downloading the serialized files locally to make images.  However, if we're totally rethinking what yt should be doing on its own with writing files, I am totally in favor of making it an explicit, opt-in thing.  Is it simple enough to set the serialization keyword default to False?<br>
<br></div>In general, performing analysis on supercomputers and then downloading reduced data to my laptop to make figures is how I do almost everything.<br></div><div class="gmail_extra"><br><br><div class="gmail_quote">
On Fri, Apr 19, 2013 at 11:18 AM, Matthew Turk <span dir="ltr"><<a href="mailto:matthewturk@gmail.com" target="_blank">matthewturk@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
Dave, out of curiosity, how long does a projection of one of your datasets take?<br>
<div class="HOEnZb"><div class="h5"><br>
On Fri, Apr 19, 2013 at 11:17 AM, david collins <<a href="mailto:antpuncher@gmail.com">antpuncher@gmail.com</a>> wrote:<br>
><br>
> I use serialized projections quite frequently.  As long as the current<br>
> behavior, or some reasonable facsimile, is still available I'm for doing it<br>
> now.<br>
><br>
><br>
> On Fri, Apr 19, 2013 at 9:05 AM, Matthew Turk <<a href="mailto:matthewturk@gmail.com">matthewturk@gmail.com</a>> wrote:<br>
>><br>
>> On Fri, Apr 19, 2013 at 11:02 AM, Stephen Skory <<a href="mailto:s@skory.us">s@skory.us</a>> wrote:<br>
>> > Just to play devil's advocate here, what would it take to "fix"<br>
>> > serialization? Adding a checksum so that data changes can be detected?<br>
>> > More than that?<br>
>><br>
>> That would partly fix the issue of fields/hierarchy changes not being<br>
>> detected (unless you manually mess with the data).  But it wouldn't<br>
>> fix the deeper problem, which is that a) we scatter files willy nilly<br>
>> about the directory, which I am coming to feel is a really gross<br>
>> violation of expectations, and b) the process of auto-serialization<br>
>> doesn't save a huge amount of time in most cases.  JohnW and I<br>
>> spitballed last fall about some of the biggest hierarchies he's dealt<br>
>> with in Enzo and I promised to write a Cython parser, which I never<br>
>> succeeded at.<br>
>><br>
>> -Matt<br>
>><br>
>> ><br>
>> ><br>
>> ><br>
>> > --<br>
>> > Stephen Skory<br>
>> > <a href="mailto:s@skory.us">s@skory.us</a><br>
>> > <a href="http://stephenskory.com/" target="_blank">http://stephenskory.com/</a><br>
>> > <a href="tel:510.621.3687" value="+15106213687">510.621.3687</a> (google voice)<br>
>> > _______________________________________________<br>
>> > yt-dev mailing list<br>
>> > <a href="mailto:yt-dev@lists.spacepope.org">yt-dev@lists.spacepope.org</a><br>
>> > <a href="http://lists.spacepope.org/listinfo.cgi/yt-dev-spacepope.org" target="_blank">http://lists.spacepope.org/listinfo.cgi/yt-dev-spacepope.org</a><br>
>> _______________________________________________<br>
>> yt-dev mailing list<br>
>> <a href="mailto:yt-dev@lists.spacepope.org">yt-dev@lists.spacepope.org</a><br>
>> <a href="http://lists.spacepope.org/listinfo.cgi/yt-dev-spacepope.org" target="_blank">http://lists.spacepope.org/listinfo.cgi/yt-dev-spacepope.org</a><br>
><br>
><br>
><br>
><br>
> --<br>
> Sent from my computer.<br>
><br>
> _______________________________________________<br>
> yt-dev mailing list<br>
> <a href="mailto:yt-dev@lists.spacepope.org">yt-dev@lists.spacepope.org</a><br>
> <a href="http://lists.spacepope.org/listinfo.cgi/yt-dev-spacepope.org" target="_blank">http://lists.spacepope.org/listinfo.cgi/yt-dev-spacepope.org</a><br>
><br>
_______________________________________________<br>
yt-dev mailing list<br>
<a href="mailto:yt-dev@lists.spacepope.org">yt-dev@lists.spacepope.org</a><br>
<a href="http://lists.spacepope.org/listinfo.cgi/yt-dev-spacepope.org" target="_blank">http://lists.spacepope.org/listinfo.cgi/yt-dev-spacepope.org</a><br>
</div></div></blockquote></div><br></div>