title: 与Hadoop对比，如何看待Spark技术？
desc: 最近公司邀请来王家林老师来做培训，其浮夸的授课方式略接受不了。其强烈推崇Spark技术，宣称Spark是大数据的未来，同时宣布了Hadoop的死刑。<br>那么与Hadoop相比，Spark技术如何？现工业界大数据技术都在使用何种技术？<br><br>-----------补充------------<br>希望大家能将关注点放在Spark上。另Spark圈内应该会有人对此人有了解。此人在51CTO上有100期的课程，并号称7岁接触代码，现年28岁，2010年阅读完Android源码后，专注大数据。<br><br>王家林简介摘自百度百科<br><blockquote>王家林：Spark亚太研究院院长和
topic: 云计算
content: 主要是先看MapReduce模型有什么问题？ 第一：需要写很多底层的代码不够高效，第二：所有的事情必须要转化成两个操作MapReduce，这本身就很奇怪，也不能解决所有的情况。其实Spark出现就是为了解决上面的问题。介绍一些Spark的起源。发自 2010年Berkeley AMPLab，发表在hotCloud 是一个从学术界到工业界的成功典范，也吸引了顶级VC：Andreessen Horowitz的 注资 AMPLab这个实验室非常厉害，做大数据，云计算，跟工业界结合很紧
answerer_tags: Learning without limit