Not the most helpful answer I'm afraid, but Sean did a talk on something similar at LRUG and it was pretty cool stuff, might be worth a watch?<br><br><a href="http://skillsmatter.com/event/ajax-ria/lrug-889/rl-311">http://skillsmatter.com/event/ajax-ria/lrug-889/rl-311</a><br>
<br><div class="gmail_quote">On 7 September 2011 10:14, Neil Middleton <span dir="ltr"><<a href="mailto:neil.middleton@gmail.com">neil.middleton@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;">

                <div>
                    Simply put - I've got a requirement to capture a crap load of data from an API and stuff it all into a queue to be processed later on.  We would be receiving hundreds of new items per second, over a sustained period.
                </div><div><br></div><div>We're looking at hosting on EngineYard so ideally need to stick with what's available there.</div><div><br></div><div>We cannot really lose any of the received data before processing.</div>
<div><br></div><div>Any ideas?</div>
                <div><br><font color="#888888">Neil<br></font></div>
            <br>_______________________________________________<br>
Chat mailing list<br>
<a href="mailto:Chat@lists.lrug.org">Chat@lists.lrug.org</a><br>
<a href="http://lists.lrug.org/listinfo.cgi/chat-lrug.org" target="_blank">http://lists.lrug.org/listinfo.cgi/chat-lrug.org</a><br>
<br></blockquote></div><br>