[其他] 零基础学习Spark 1.x应用编程开发系列课程 内核分析和环境分析案例 |
|
零基础学习Spark 1.x应用编程开发系列课程 内核分析和环境分析案例
零基础学习Spark 1.x应用编程开发系列课程 内核分析和环境分析案例
零基础学习Spark 1.x应用编程开发系列课程 内核分析和环境分析案例
课程介绍: MapReduceMapReduceMapReduceMapReduceMapReduceMapReduceMapReduceMapReduceMapReduce与 SparkSparkSparkSparkSpark相比,有哪些异同点 相比,有哪些异同点 相比,有哪些异同点 1、 基本原理上: a) MapReduceMapReduceMapReduceMapReduceMapReduceMapReduceMapReduceMapReduceMapReduce:基于磁盘的大数据批量处理系统 :基于磁盘的大数据批量处理系统 :基于磁盘的大数据批量处理系统 b) SparkSparkSparkSparkSpark:基于 :基于 RDDRDDRDD(弹性分布式 弹性分布式 弹性分布式 数据集) 数据集) 数据处理 数据处理 ,显 式的 将 RDDRDDRDD数据 存储到磁盘和内中。 2、 模型 上: a) MapReduceMapReduceMapReduceMapReduceMapReduceMapReduceMapReduceMapReduceMapReduce:可以处理超大规模的数据,适合日志分析挖掘等 :可以处理超大规模的数据,适合日志分析挖掘等 :可以处理超大规模的数据,适合日志分析挖掘等 :可以处理超大规模的数据,适合日志分析挖掘等 :可以处理超大规模的数据,适合日志分析挖掘等 :可以处理超大规模的数据,适合日志分析挖掘等 :可以处理超大规模的数据,适合日志分析挖掘等 :可以处理超大规模的数据,适合日志分析挖掘等 :可以处理超大规模的数据,适合日志分析挖掘等 较少的迭代 的长任务需求 ;结合了数据的分布式计算。 结合了数据的分布式计算。 结合了数据的分布式计算。 结合了数据的分布式计算。 结合了数据的分布式计算。 b) SparkSparkSparkSparkSpark:适合 数据的挖掘 ,机器学习等多伦迭代式计算任务 机器学习等多伦迭代式计算任务 机器学习等多伦迭代式计算任务 机器学习等多伦迭代式计算任务 机器学习等多伦迭代式计算任务 详细目录: │ 《企业级Hive实战课程》大纲(第一版).pdf │ ├─01 Spark介绍(20150519) │ 001 本系列公开课程说明.exe │ 002 What is Spark详细讲解(四大特性).exe │ 003 MapReduce与Spark异同点和优势比较.exe │ 004 实时在线答疑交流.mp4 │ 01 Spark介绍.pdf │ Lesson 01.pdf │ ├─02 Spark 1.3 编译(20150520) │ 005 回顾上次课内容和Spark 学习的基础.mp4 │ 006 Spark 1.x编译的三种方式和如何使用Make方式编译(注意事项详解).mp4 │ 007 Spark运行Local模式讲解.mp4 │ 008 课程实时在线答疑交流.mp4 │ ├─03 Spark 环境搭建(20150521) │ 009 Spark 1.x安装前的准备(安装HDFS).mp4 │ 010 安装部署Spark 1.x Standalone模式集群.mp4 │ 011 运行Spark Shell进行测试以及对细节进行说明.mp4 │ 012 使用Spark 编写大数据处理经典案例WordCount程序.mp4 │ 03 Spark 环境搭建.pdf │ 20150521-spark-setup.txt │ Lesson 03【Spark 环境搭建】.pdf │ ├─04 Spark RDD讲解(20150525) │ 013 深入讲解使用Spark编程WordCount程序.mp4 │ 014 Spark RDD详解.mp4 │ 015 实时在线答疑.exe │ 04 Spark RDD讲解.pdf │ Lesson 04【Spark RDD讲解】.pdf │ 代码.txt │ ├─05 如何使用IDEA开发程序(20150528) │ 016 回顾总结前面内容及如何学习Spark.mp4 │ 017 Spark Cluster与Application中的重要概念以及如何提交应用spark-submit.mp4 │ 018 如何安装IDEA、安装Scala插件以及导入Spark 源码.mp4 │ 019 如何使用IDEA创建Scala Project、编写Spark应用及local测试.mp4 │ 020 如何使用IDEA对Spark Application进行打包测试.mp4 │ 05 如何使用IDEA开发程序.pdf │ ideaIC-14.1.1.tar.gz │ Lesson 05【如何使用IDEA开发程序】.pdf │ scala-intellij-bin-1.4.15.zip │ spark-1.3.0-src.tar.gz │ ├─06 RDD操作详解(20150622) │ 06 RDD操作详解.pdf │ 21 Spark RDD创建的两种方式一.mp4 │ 22 Spark RDD创建的两种方式二.mp4 │ 23 Spark RDD两种类型的操作(Transformation和action).mp4 │ 24 Spark RDD操作之Transformation讲解(结合源码分析).mp4 │ 25 Spark RDD操作之Action讲解(结合源码分析).mp4 │ 26 Spark RDD缓存persistent讲解(cache、结合源码分析).mp4 │ Lesson 06【RDD 操作详解】.docx │ tx-spark-lesson 06.txt │ ├─07 Spark JobHistory与Spark on YARN(20150624) │ 07 Spark JobHistory与Spark on YARN.pdf │ 27 Spark Application Monitor(应用运行时监控).mp4 │ 28 Spark JobHistory(应用完成以后监控).mp4 │ 29 Hadoop YARN如何进行资源管理和调度应用.mp4 │ 30 Spark Application如何运行在YARN上.mp4 │ 31 Spark应用运行时的部署模式client与cluster.mp4 │ 32 Spark App运行在YARN上.mp4 │ Lesson 07【Spark JobHistory与Spark on YARN】.pdf │ tx-spark-lesson 07.txt │ └─08 Spark内核分析(20160626) 08 Spark内核分析.pdf 33 Spark编程模型SparkContext详解.mp4 34 通过源码分析SparkConf的作用.mp4 35 Spark内核分析之Spark Scheduler讲解(结合WordCoun程序).mp4 36 Spark内核分析之通过代码调试分析SparkContext启动过程一.mp4 37 Spark内核分析之通过代码调试分析SparkContext启动过程二.mp4 38 Spark内核分析之跟踪源码分析Spark 如何提交应用.mp4 Lesson 08【Spark内核分析】.pdf tx-spark-lesson08.txt 资源批量下载地址: ---> http://bbs.vlan5.com/forum-94-1.html 更多精品资源,打包下载(可按知识点/发布日期/培训班/讲师等方式批量下载视频/文档/资料/电子书) 本贴附件下载链接:
购买主题
已有 1 人购买
本主题需向作者支付 60 金币 才能浏览
|
相关帖子
|
| |
| |
| |
| |
| |
| |
| |