<div dir="auto">I'm down to help cobble together the needed hardware and help get it all online. Would be good experience. :)<div dir="auto"><br></div><div dir="auto">--Robert</div></div><div class="gmail_extra"><br><div class="gmail_quote">On Dec 14, 2016 00:30, "Isaac (.ike) Levy" <<a href="mailto:ike@blackskyresearch.net">ike@blackskyresearch.net</a>> wrote:<br type="attribution"><blockquote class="quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Word,<br>
<div class="quoted-text"><br>
> On Dec 13, 2016, at 9:36 PM, Mirimir <<a href="mailto:mirimir@riseup.net">mirimir@riseup.net</a>> wrote:<br>
><br>
> On 12/13/2016 05:07 PM, Pete Wright wrote:<br>
>> Not to go super political on this list - but I'm personally pretty keen<br>
>> to preserve climate science related data-sets for future generations (as<br>
>> well as our own).  So in that light - wondering if anyone has taken a<br>
>> look at this:<br>
>><br>
>> <a href="http://climatemirror.org/" rel="noreferrer" target="_blank">http://climatemirror.org/</a><br>
>><br>
>> I'm investigating now to see if there are any datasets I can help mirror<br>
>> - if anyone else on this list is interested let me know, maybe we can<br>
>> make a large scale effort?<br>
<br>
</div>I’m 100% in.  Any job for a big ZFS server and a lot of disk makes me quite happy :)<br>
<br>
[x] Colo: If there is general consensus that this is worthwhile, NYC*BUG does have colo space for a big isolated storage box.<br>
<br>
[x] Admins: There is certainly enough admin experience around NYC*BUG to keep some storage/mirrors online, and I’d be quite enthused to take lead to get this one bootstrapped.<br>
<br>
[?] Server(s): Acquiring the hardware, and a box of 8tb disks, well- that may take a second to get a HW donation which works…<br>
<div class="quoted-text"><br>
><br>
> Some of these datasets are humongous. Many TB.<br>
<br>
</div>In-deedy :)<br>
<div class="quoted-text"><br>
> I wonder about<br>
> alternatives to straight-up mirrors. I mean, a 100TB server is a<br>
> nontrivial investment.<br>
<br>
</div>Nontrivial, but not impossible.  Shooting from the hip, based on a brand-new supermicro storage without many frills:<br>
<br>
- 3u supermicro with 24x SATA drive bays, 32g ram, a few cheap bottom-of-curve CPU’s<br>
$5000<br>
- 20 pcs 8TB sata disks, $220 * 20<br>
$4400<br>
<br>
So lets say 9500 bucks.  I’m already thinking of vendors to ping for straight donations.<br>
(By December end, I know there will be some 3-year-old inventory that would serve our purposes)<br>
<div class="quoted-text"><br>
<br>
> Maybe torrents, IPFS, ...? Or a collaborative<br>
> distributed file system. Perhaps using QFS, MFS or LFS?<br>
<br>
</div>While I just got pretty excited about NYC*BUG’s ability to take this on whole hog, I ABSOLUTELY would love to see this explored further.<br>
<br>
Could you propose something we could get involved in as a group from NYC*BUG, perhaps something people can run to donate a small chunk of their own smaller servers?<br>
<br>
Best,<br>
.ike<br>
<div class="elided-text"><br>
<br>
><br>
>> -pete<br>
>><br>
><br>
> ______________________________<wbr>_________________<br>
> talk mailing list<br>
> <a href="mailto:talk@lists.nycbug.org">talk@lists.nycbug.org</a><br>
> <a href="http://lists.nycbug.org/mailman/listinfo/talk" rel="noreferrer" target="_blank">http://lists.nycbug.org/<wbr>mailman/listinfo/talk</a><br>
<br>
______________________________<wbr>_________________<br>
talk mailing list<br>
<a href="mailto:talk@lists.nycbug.org">talk@lists.nycbug.org</a><br>
<a href="http://lists.nycbug.org/mailman/listinfo/talk" rel="noreferrer" target="_blank">http://lists.nycbug.org/<wbr>mailman/listinfo/talk</a></div></blockquote></div><br></div>