要做一个介绍大数据的PPT,求大神帮帮忙，感激不尽！
问题描述不清楚哟，不过还是提供点信息给你吧。1.大数据是什么？怎么理解大数据？数据就好比地球上的水，单个数据就是一滴水，小溪、河流、湖泊，对应不同的数据体量，所有的水最终汇到海洋，大数据就象地球上的海洋，它足够大，水滴足够多，多到用人工数不清楚，里面的资源超级丰富，那些资源也是数据。这么说，你明白大数据了吗？就是把超级多数据信息汇集到一起，然后在里面“钓大鱼”。 2.都说大数据有4V的特征，是什么意思？大数据的4V，就是“容量大Volume”“多样性Variety”“价值高Value”“速度快Velocity”，同样以海洋为例：A.容量大：地球表面有70%左右都是海洋，想想里面都有多少水滴？大数据时代，每一个人、每一件物品的信息、状态，都能够形成一系列随时更新的数据，数据量也呈现出指数级的增长；B.多样性：海洋里面的物产非常多样化，就拿海鲜来说，小智一天吃一种，这辈子都可能吃不完一遍（所以小智不会纠结吃什么的问题），太平洋的海水和大西洋的海水是有区别的，不同地方海水里面蕴含的物质、生活的物种都有不同，海洋就是超级大宝藏，里面有原油、有萌宠、也有大白鲨之类的猎手……大数据也和海洋一样复杂，各种结构化、非结构化数据，汇成了数据海洋；C.价值高：说到这个，资深吃货口水直流，海里好吃的有大龙虾、石斑鱼、三文鱼……更不用说其它宝贝啦，数据海洋里面各种资源同样丰富到极致，人们利用海洋，开发海洋中无穷的价值；D.速度快，有两个层面的意思，一是海水流动快，二是随着技术的提升，我们对海水的利用也加快了速度（看看快艇、游轮的发展），毕竟嘛，先来吃肉、后来喝汤，这个道理，你懂的。3.对大数据的处理，以海洋捕鱼为例：通过技术手段，在茫茫大海中找到鱼群较集中的地点，这是数据挖掘；捕到的鱼进行初步分类，把太小的鱼放回海中（养大了才好吃，原谅我是吃货），这是数据清洗；然后把鱼运上岸，仔细分类，根据实际情况决定哪些鱼送到海鲜市场卖活的，哪些鱼用于做鱼干，这是数据分析；鱼干、鱼罐头、鱼子酱、鱼肝油……目不暇接的海产品最终呈现在我们面前，此为数据可视化。更多的，可进一步交流。
所有的系统都会用spark做么
王家林每日Spark语录0001腾讯的Spark集群已经达到8000台的规模，是目前已知最大的Spark集群，每天运行超过1万各种作业。王家林每日Spark语录0002Spark基于RDD近乎完美的实现了分布式内存的抽象，且能够基于位置感知性调度、自动容错、负载均衡和高度的可扩展性，Spark中允许用户在执行多个查询时显式的将工作集缓存起来以供后续查询重用，这极大的提高了查询的速度。王家林每日Spark语录0003Spark一体化多元化的解决方案极大的减少了开发和维护的人力成本和部署平台的物力成本，并在性能方面有极大的优势，特别适合于迭代计算，例如机器学习和和图计算；同时Spark对Scala和Python交互式shell的支持也极大的方便了通过shell直接来使用Spark集群来验证解决问题的方法，这对于原型开发至关重要，对数据分析人员有着无法拒绝的吸引力！王家林每日Spark语录0004Spark中RDD采用高度受限的分布式共享内存，且新的RDD的产生只能够通过其它RDD上的批量操作来创建，依赖于以RDD的Lineage为核心的容错处理，在迭代计算方面比Hadoop快20多倍，同时还可以在5~7秒内交互式的查询TB级别的数据集。王家林每日Spark语录0005Spark RDD是被分区的，对于RDD来说，每个分区都会被一个计算任务处理，并决定并行计算的粒度；RD的每次转换操作都会生成新的RDD，在生成RDD时候，一般可以指定分区的数量，如果不指定分区数量，当RDD从集合创建时候，则默认为该程序所分配到的资源的CPU核数，如果是从HDFS文件创建，默认为文件的Block数。王家林每日Spark语录0006基于RDD的整个计算过程都是发生在Worker中的Executor中的。RDD支持三种类型的操作：Transformation、Action以及Persist和CheckPoint为代表的控制类型的操作，RDD一般会从外部数据源读取数据，经过多次RDD的Transformation（中间为了容错和提高效率，有可能使用Persist和CheckPoint），最终通过Action类型的操作一般会把结果写回外部存储系统。王家林每日Spark语录0007RDD的所有Transformation操作都是Lazy级别的，实际上这些Transformation级别操作的RDD在发生Action操作之前只是仅仅被记录会作用在基础数据集上而已，只有当Driver需要返回结果的时候，这些Transformation类型的RDD才会真正作用数据集，基于这样设计的调度模式和运行模式让Spark更加有效率的运行。王家林每日大数据语录Spark篇0008（2015.10.31于北京）王家林每日大数据语录Spark篇0008（2015.10.31于北京）:持久化（包含Memory、Disk、Tachyon等类型）是Spark构建迭代算法和快速交互式查询的关键，当通过persist对一个RDD持久化后，每一个节点都将把计算的分片结果保存在内存或者磁盘或者Tachyon上，并且对此数据集或者衍生出来的数据集进行的其它Action级别的炒作都可以重用当前RDD的计算结果，这是的后续的的操作通常会快10到100倍。王家林每日大数据语录Spark篇0009（2015.11.1于北京）Spark的CheckPoint是在计算完成之后重新建立一个Job来进行计算的，用户可以通过调用RDD.checkpoint()来指定RDD需要checkpoint的机制；为了避免重复计算，建议先对RDD进行persist操作，这样可以保证checkpoint更加快速的完成。王家林每日大数据语录Spark篇0010（2015.11.2于深圳）SparkContext是用户程序和Spark交互的接口，它会负责连接到Spark集群，并且根据系统默认配置和用户设置来申请计算资源，完成RDD的创建等工作。王家林每日大数据语录Spark篇0011（2015.11.2于深圳）RDD的saveAsTextFile方法会首先生成一个MapPartitionsRDD，该RDD通过雕工PairRDDFunctions的saveAsHadoopDataset方法向HDFS等输出RDD数据的内容，并在在最后调用SparkContext的runJob来真正的向Spark集群提交计算任务。王家林每日大数据语录Spark篇0012（2015.11.2于深圳）可以从两个方面来理解RDD之间的依赖关系，一方面是RDD的parent RDD(s)是什么，另一方面是依赖于parent RDD(s)哪些Partions(s); 根据依赖于parent RDD(s)哪些Partions(s)的不同情况，Spark讲Dependency分为宽依赖和窄依赖两种。王家林每日大数据语录Spark篇0013（2015.11.3于广州）RDD有narrow dependency和wide dependency两种不同的类型的依赖，其中的narrow dependency指的是每一个parent RDD 的Partition最多被child RDD的一个Partition所使用，而wide dependency指的是多个child RDDs的Partition会依赖于同一个parent RDD的Partition。王家林每日大数据语录Spark篇0014（2015.11.4于南宁）对于Spark中的join操作，如果每个partition仅仅和特定的partition进行join那么就是窄依赖；对于需要parent RDD所有partition进行join的操作，即需要shuffle,此时就是宽依赖。王家林每日大数据语录Spark篇0015（2015.11.5于南宁）Spark中宽依赖指的是生成的RDD的每一个partition都依赖于父 RDD(s) 所有partition，宽依赖典型的操作有groupByKey, sortByKey等，宽依赖意味着shuffle操作，这是Spark划分stage的边界的依据，Spark中宽依赖支持两种Shuffle Manager，即HashShuffleManager和SortShuffleManager，前者是基于Hash的Shuffle机制，后者是基于排序的Shuffle机制。王家林每日大数据语录Spark篇0016（2015.11.6于南宁）RDD在创建子RDD的时候，会通过Dependency来定义他们之间的关系，通过Dependency，子RDD可以获得parent RDD(s)和parent RDD(s)的Partition(s).王家林每日大数据语录Spark篇0017（2015.11.6于南宁）在Spark的Stage内部的每个Partition都会被分配一个计算任务Task，这些Task是并行执行的; Stage之间的依赖关系变成了一个大粒度的DAG，Stage只有在它没有parent Stage或者parent Stage都已经执行完成后才可以执行，也就是说DAG中的Stage是从前往后顺序执行的。王家林每日大数据语录Spark篇0018（2015.11.7于南宁）在Spark的reduceByKey操作时会触发Shuffle的过程，在Shuffle之前，会有本地的聚合过程产生MapPartitionsRDD，接着具体Shuffle会产生ShuffledRDD,之后做全局的聚合生成结果MapPartitionsRDD.王家林每日大数据语录Spark篇0019（2015.11.10于重庆）park中的Task分为ShuffleMapTask和ResultTask两种类型，在Spark中DAG的最后一个Stage内部的任务都是ResultTask，其余所有的Stage(s)的内部都是ShuffleMapTask，生成的Task会被Driver发送到已经启动的Executor中执行具体的计算任务，执行的实现是在TaskRunner.run方法中完成的。王家林每日大数据语录Spark篇0020（2015.11.11于重庆）Spark中生成的不同的RDD中有的喝用户的逻辑显式的对于，例如map操作会生成MapPartitionsRDD，而又的RDD则是Spark框架帮助我们隐式生成的，例如reduceByKey操作时候的ShuffledRDD.王家林每日大数据语录Spark篇0021（2015.11.18于珠海）Spark RDD实现基于Lineage的容错机制，基于RDD的各项transformation构成了compute chain，在部分计算结果丢失的时候可以根据Lineage重新计算恢复。在窄依赖中，在子RDD的分区丢失要重算父RDD分区时，父RDD相应分区的所有数据都是子RDD分区的数据，并不存在冗余计算；在宽依赖情况下，丢失一个子RDD分区重算的每个父RDD的每个分区的所有数据并不是都给丢失的子RDD分区用的，会有一部分数据相当于对应的是未丢失的子RDD分区中需要的数据，这样就会产生冗余计算开销和巨大的性能浪费。王家林每日大数据语录Spark篇0022（2015.11.18于珠海）Spark Checkpoint通过将RDD写入Disk做检查点，是Spark lineage容错的辅助，lineage过长会造成容错成本过高，这时候在中间阶段做检查点容错，如果之后有节点出现问题而丢失分区，从做检查点的RDD开始重做Lineage，就会减少开销。Checkpoint主要适用于以下两种情况：1. DAG中的Lineage过长，如果重算时会开销太大，例如在PageRank、ALS等；2. 尤其适合于在宽依赖上做Checkpoint，这个时候就可以避免应为Lineage重新计算而带来的冗余计算。
求免费《Spark 》电子版书籍网盘资源
《Spark 》电子版书籍网盘资源链接: https://pan.baidu.com/s/14BzwQ4ncZKBHWNHzB4kBkA 提取码：fnbn 基本介绍书籍目录点评信息 书籍内容 主要内容 ·大数据技术和Spark概述。 ·通过实例学习DataFrame、SQL、Dataset等Spark的核心API。 ·了解Spark的低级API实现,包括RDD以及SQL和DataFrame的执行...
有哪些好的 Spark 书籍值得推荐
《Spark大数据处理技术》以Spark 0.9版本为基础进行编写，是一本全面介绍Spark及Spark生态圈相关技术的书籍，是国内首本深入介绍Spark原理和架构的技术书籍。主要内容有Spark基础功能介绍及内部重要模块分析，包括部署模式、调度框架、存储管理以及应用监控；同时也详细介绍了Spark生态圈中其他的和模块，包括SQL处理引擎Shark和Spark SQL、流式处理引擎Spark Streaming、图计算框架Graphx以及分布式内存文件系统Tachyon。《Spark大数据处理技术》从概念和原理上对Spark核心框架和生态圈做了详细的解读，并对Spark的应用现状和未来发展做了一定的介绍，旨在为大数据从业人员和Spark爱好者提供一个更深入学习的。
《Spark大数据处理技术》适合任何大数据、Spark领域的从业人员阅读，同时也为架构师、开发工程师和大数据爱好者展现了一个现代大数据框架的架构原理和实现细节。相信通过学《Spark大数据处理技术》，读者能够熟悉和掌握Spark这一当前流行的大数据框架，并将其投入到生产实践中去。
《Spark大数据处理：技术、应用与性能优化》根据最新技术版本，系统、全面、详细讲解Spark的各项功能使用、原理机制、技术细节、应用方法、性能优化，以及BDAS生态系统的相关技术。
通过上面两本熟悉Spark的原理架构以及应用，想深入学习的话，还有《Apache Spark源码剖析》，它全面、系统地介绍了Spark源码，深入浅出。
大数据培训哪家机构好哪个好
大数据培训机构推荐：北京千锋教育、光环大数据、江苏万和计算机培训中心、千锋教育、烟台大数据培训。1、北京千锋教育千锋教育开设HTML5前端、Java、Python、全链路设计、云计算、软件测试、大数据、智能物联网、Unity游戏开发、Go语言开发、网络安全、互联网营销学科，并推出软考、Adobe认证、PMP认证、红帽RHCE认证课程，千锋年培养优质人才20000余人，全国同期在校学员8000余人。2、光环大数据国内大数据培训机构，光环大数据是专注大数据、人工智能垂直领域高薪就业培训机构，多年来专注大数据人才培养，携18年IT培训经验，与中关村软件园共同建立国家大数据人才培养基地，并与全球知名大厂商cloudera战略合作培养中国大数据高级人才。3、江苏万和计算机培训中心创办于1993年，自创办之日起我们就专注于信息服务和培训领域。开展就业培训、认证培训、院校专业共建、企业培训、软件研发与外包（万顺和）等业务。其中企业培训面向政企客户提供专业的一站式IT培训和顾问服务，包括网络技术、开发技术、数据库技术、商业智能（BI）、中间件技术、信息安全、虚拟化技术、云计算及大数据应用等主题的专业化技术服务。4、千锋教育千锋深圳大数据培训课程从宏观上讲述了大数据的特点，商业应关系，对不同类型的大数据分析及处理系统、解决方案及行业案例进行剖析和讲解。千锋大数据培训配备科学的大数据学习路线，为学员们提供完整的大数据开发知识体系，其中的主要内容包含Linux&Hadoop生态体系、大数据计算框架体系、云计算体系、机器学习&深度学习。5、烟台大数据培训烟台大数据培训进程是一个冗长的阶段，需要人对大数据网络专业的学习有稠密的乐趣，有能力实现大数据专业的学习。整合各部门、单位分散的信息资源，建立全市统一的数据、信息和网络三大平台，实现全市综合数据信息共享，为各级领导科学地决策提供全面、准确、及时、可靠的信息，为部门及县市区的信息化建设提供技术支撑，为城市信息化提供技术标准和业务指导。负责烟台市民卡工程的建设、管理和运营。
大数据培训哪家好
大数据培训机构比较好的有传智播客、光环国际、千锋教育、达内等。1、传智播客传智教育从创立之初至今，已经涵盖JavaEE、Python+数据分析、人工智能开发、HTML&JavaScript+前端、UI/UE设计、大数据等十余门学科。传智教育所有学科的开设都紧跟时代的发展，不断更新迭代，更因技术新、课程深、项目广，让学员始终走在技术前端。2、光环国际光环国际创办于2001年，至今已成立18年，主要业务在IT培训，旗下设有Java、PMP、软考、敏捷、项目管理、大数据、Python、前端开发，H5可视化，ACP等十余种课程，累计培养技术人才100000余人，并在业界取得了令人瞩目的业绩。3、千锋教育千锋教育开设HTML5前端、Java、Python、全链路设计、云计算、软件测试、大数据、智能物联网、Unity游戏开发、Go语言开发、网络安全、互联网营销学科，并推出软考、Adobe认证、PMP认证、红帽RHCE认证课程，千锋年培养优质人才20000余人，全国同期在校学员8000余人。4、达内教育达内教育由美国国际数据集团IDG投资，由来自SUN、IBM、亚信、华为、东软、用友等国际知名IT公司的技术骨干、海外留学生和加拿大专业技术人员创办，直接引进北美IT技术，结合中国IT企业的现状，定制化培养高端IT人才。
大数据为什么要选择Spark
Spark，是一种"One Stackto rule them all"的大数据计算框架，期望使用一个技术堆栈就完美地解决大数据领域的各种计算任务。Apache官方，对Spark的定义就是：通用的大数据快速处理引擎。Spark除了一站式的特点之外，另外一个最重要的特点，就是基于内存进行计算，从而让它的速度可以达到MapReduce、Hive的数倍甚至数十倍！现在已经有很多大公司正在生产环境下深度地使用Spark作为大数据的计算框架，包括eBay、Yahoo!、BAT、网易、京东、华为、大众点评、优酷土豆、搜狗等等。
超强的通用性
Spark提供了Spark RDD、Spark SQL、SparkStreaming、Spark MLlib、Spark GraphX等技术组件，可以一站式地完成大数据领域的离线批处理、交互式查询、流式计算、机器学习、图计算等常见的任务。
东时大数据学习java语言基础、java面向对象、Java框架、web前端、Linux入门、hadoop开发、Spark等内容。
Spark技术的核心是什么？优势有哪些？
Spark是基于内存，是云计算领域的继Hadoop之后的下一代的最热门的通用的并行计算框架开源项目，尤其出色的支持Interactive Query、流计算、图计算等。
Spark在机器学习方面有着无与伦比的优势，特别适合需要多次迭代计算的算法。同时Spark的拥有非常出色的容错和调度机制，确保系统的稳定运行，Spark目前的发展理念是通过一个计算框架集合SQL、Machine Learning、Graph Computing、Streaming Computing等多种功能于一个项目中，具有非常好的易用性。
目前SPARK已经构建了自己的整个大数据处理生态系统，如流处理、图技术、机器学习、NoSQL查询等方面都有自己的技术，并且是Apache顶级Project，可以预计的是2014年下半年在社区和商业应用上会有爆发式的增长。
Spark最大的优势在于速度，在迭代处理计算方面比Hadoop快100倍以上；Spark另外一个无可取代的优势是：“One Stack to rule them all”，Spark采用一个统一的技术堆栈解决了云计算大数据的所有核心问题，这直接奠定了其一统云计算大数据领域的霸主地位；
哪位老师讲解的hadoop比较好?
王家林老师是Hadoop源码级专家，曾负责某知名公司的类Hadoop框架开发工作，专注于Hadoop一站式解决方案的提供，同时也是云计算分布式大数据处理的最早实践者之一； 在Spark、Hadoop、Android等方面有丰富的源码、实务和性能优化经验。彻底研究了Spark从0.5.0到0.9.1共13个版本的Spark源码，并已完成2014年5月31日发布的Spark1.0源码研究。
如何用好spark？
Spark是一种快速、通用、可扩展的大数据分析引擎，2009年诞生于加州大学伯克利分校AMPLab，2010年开源，2013年6月成为Apache孵化项目，2014年2月成为Apache顶级项目。目前，Spark生态系统已经发展成为一个包含多个子项目的集合，其中包含SparkSQL、Spark Streaming、GraphX、MLlib等子项目，Spark是基于内存计算的大数据并行计算框架。Spark基于内存计算，提高了在大数据环境下数据处理的实时性，同时保证了高容错性和高可伸缩性，允许用户将Spark部署在大量廉价硬件之上，形成集群。Spark得到了众多大数据公司的支持，这些公司包括Hortonworks、IBM、Intel、Cloudera、MapR、Pivotal、百度、阿里、腾讯、京东、携程、优酷土豆。当前百度的Spark已应用于凤巢、大搜索、直达号、百度大数据等业务；阿里利用GraphX构建了大规模的图计算和图挖掘系统，实现了很多生产系统的推荐算法；腾讯Spark集群达到8000台的规模，是当前已知的世界上最大的Spark集群。与Hadoop的MapReduce相比，Spark基于内存的运算要快100倍以上，基于硬盘的运算也要快10倍以上。Spark实现了高效的DAG执行引擎，可以通过基于内存来高效处理数据流。 Spark支持Java、Python和Scala的API，还支持超过80种高级算法，使用户可以快速构建不同的应用。而且Spark支持交互式的Python和Scala的shell，可以非常方便地在这些shell中使用Spark集群来验证解决问题的方法。 Spark可以非常方便地与其他的开源产品进行融合。比如，Spark可以使用Hadoop的YARN和Apache Mesos作为它的资源管理和调度器，器，并且可以处理所有Hadoop支持的数据，包括HDFS、HBase和Cassandra等。这对于已经部署Hadoop集群的用户特别重要，因为不需要做任何数据迁移就可以使用Spark的强大处理能力。Spark也可以不依赖于第三方的资源管理和调度器，它实现了Standalone作为其内置的资源管理和调度框架，这样进一步降低了Spark的使用门槛，使得所有人都可以非常容易地部署和使用Spark。此外，Spark还提供了在EC2上部署Standalone的Spark集群的工具。
