<div dir="ltr">On Mon, Jun 30, 2014 at 3:47 PM, Vladimir Blagojevic <span dir="ltr">&lt;<a href="mailto:vblagoje@redhat.com" target="_blank">vblagoje@redhat.com</a>&gt;</span> wrote:<br><div class="gmail_extra"><div class="gmail_quote">
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div class="">On 2014-06-26, 10:12 AM, Galder Zamarreño wrote:<br>
&gt; On 23 Jun 2014, at 11:04, Gustavo Fernandes &lt;<a href="mailto:gustavonalle@gmail.com">gustavonalle@gmail.com</a>&gt; wrote:<br>
&gt;<br>
&gt;&gt; - I read with great interest the Spark paper [9]. Spark provides a DSL with functional language constructs like map, flatMap and filter to process distributed data in memory. In this scenario, Map Reduce is just a special case achieved by chaining functions [10]. As Spark is much more than Map Reduce, and can run many machine learning algorithms efficiently, I was wondering if we should shift attention to Spark rather than focusing too much on Map Reduce. Thoughts?<br>

&gt; I’m not an expert on these topics, but I like the look and the approach of Spark :). The fact that it’s not tight to a single paradigm is particularly interesting, and secondly, the fact that it’s tries to make the most out of functional constructs, which seem to provide more elegant ways of dealing with data.<br>

&gt;<br>
&gt;<br>
</div>Gustavo thanks for your email and the references. I like Spark as well!<br>
I read the Spark paper over the weekend, definitely not an easy digest<br>
and I will continue to read about this topic but this seems to be the<br>
direction we should steer ourselves - data analytics platform!<br></blockquote><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<br>
As for Hadoop implementation not sure that it make sense to<br>
implement/support Hadoop v1.x unless it is super easy and low<br>
maintenance. How hard would it be to implement YARN?<br></blockquote><div><br></div><div>From Map Reduce perspective, v2 is binary compatible with v1, so the same jar containing the job can run on both Map Reduce 1.x and YARN Map Reduce.<br>
</div><div>It also should be straightforward to support YARN API directly as well<br></div><div> <br></div><div>Gustavo<br></div><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">

<br>
Regards,<br>
Vladimir<br>
<div class="HOEnZb"><div class="h5">_______________________________________________<br>
infinispan-dev mailing list<br>
<a href="mailto:infinispan-dev@lists.jboss.org">infinispan-dev@lists.jboss.org</a><br>
<a href="https://lists.jboss.org/mailman/listinfo/infinispan-dev" target="_blank">https://lists.jboss.org/mailman/listinfo/infinispan-dev</a><br>
</div></div></blockquote></div><br></div></div>