实例介绍
【实例简介】
【实例截图】
【实例截图】
【核心代码】
目录 前言 第1章 Spark简介 1.1 Spark是什么 1.2 Spark生态系统BDAS 1.3 Spark架构 1.4 Spark分布式架构与单机多核架构的异同 1.5 Spark的企业级应用 1.5.1 Spark在Amazon中的应用 1.5.2 Spark在Yahoo！的应用 1.5.3 Spark在西班牙电信的应用 1.5.4 Spark在淘宝的应用 1.6 本章小结 第2章 Spark集群的安装与部署 2.1 Spark的安装与部署 2.1.1 在Linux集群上安装与配置Spark 2.1.2 在Windows上安装与配置Spark 2.2 Spark集群初试 2.3 本章小结 第3章 Spark计算模型 3.1 Spark程序模型 3.2 弹性分布式数据集 3.2.1 RDD简介 3.2.2 RDD与分布式共享内存的异同 3.2.3 Spark的数据存储 3.3 Spark算子分类及功能 3.3.1 Value型Transformation算子 3.3.2 Key-Value型Transformation算子 3.3.3 Actions算子 3.4 本章小结 第4章 Spark工作机制详解 4.1 Spark应用执行机制 4.1.1 Spark执行机制总览 4.1.2 Spark应用的概念 4.1.3 应用提交与执行方式 4.2 Spark调度与任务分配模块 4.2.1 Spark应用程序之间的调度 4.2.2 Spark应用程序内Job的调度 4.2.3 Stage和TaskSetManager调度方式 4.2.4 Task调度 4.3 Spark I/O机制 4.3.1 序列化 4.3.2 压缩 4.3.3 Spark块管理 4.4 Spark通信模块 4.4.1 通信框架AKKA 4.4.2 Client、Master和Worker间的通信 4.5 容错机制 4.5.1 Lineage机制 4.5.2 Checkpoint机制 4.6 Shuffle机制 4.7 本章小结 第5章 Spark开发环境配置及流程 5.1 Spark应用开发环境配置 5.1.1 使用Intellij开发Spark程序 5.1.2 使用Eclipse开发Spark程序 5.1.3 使用SBT构建Spark程序 5.1.4 使用Spark Shell开发运行Spark程序 5.2 远程调试Spark程序 5.3 Spark编译 5.4 配置Spark源码阅读环境 5.5 本章小结 第6章 Spark编程实战 6.1 WordCount 6.2 Top K 6.3 中位数 6.4 倒排索引 6.5 CountOnce 6.6 倾斜连接 6.7 股票趋势预测 6.8 本章小结 第7章 Benchmark使用详解 7.1 Benchmark简介 7.1.1 Intel Hibench与Berkeley BigDataBench 7.1.2 Hadoop GridMix 7.1.3 Bigbench、BigDataBenchmark与TPC-DS 7.1.4 其他Benchmark 7.2 Benchmark的组成 7.2.1 数据集 7.2.2 工作负载 7.2.3 度量指标 7.3 Benchmark的使用 7.3.1 使用Hibench 7.3.2 使用TPC-DS 7.3.3 使用BigDataBench 7.4 本章小结 第8章 BDAS简介 8.1 SQL on Spark 8.1.1 使用Spark SQL的原因 8.1.2 Spark SQL架构分析 8.1.3 Shark简介 8.1.4 Hive on Spark 8.1.5 未来展望 8.2 Spark Streaming 8.2.1 Spark Streaming简介 8.2.2 Spark Streaming架构 8.2.3 Spark Streaming原理剖析 8.2.4 Spark Streaming调优 8.2.5 Spark Streaming实例 8.3 GraphX 8.3.1 GraphX简介 8.3.2 GraphX的使用 8.3.3 GraphX架构 8.3.4 运行实例 8.4 MLlib 8.4.1 MLlib简介 8.4.2 MLlib的数据存储 8.4.3 数据转换为向量（向量空间模型VSM） 8.4.4 MLlib中的聚类和分类 8.4.5 算法应用实例 8.4.6 利用MLlib进行电影推荐 8.5 本章小结 第9章 Spark性能调优 9.1 配置参数 9.2 调优技巧 9.2.1 调度与分区优化 9.2.2 内存存储优化 9.2.3 网络传输优化 9.2.4 序列化与压缩 9.2.5 其他优化方法 9.3 本章小结
标签：
好例子网口号：伸出你的我的手 — 分享！
小贴士
感谢您为本站写下的评论，您的评论对其它用户来说具有重要的参考价值，所以请认真填写。
- 类似“顶”、“沙发”之类没有营养的文字，对勤劳贡献的楼主来说是令人沮丧的反馈信息。
- 相信您也不想看到一排文字/表情墙，所以请不要反馈意义不大的重复字符，也请尽量不要纯表情的回复。
- 提问之前请再仔细看一遍楼主的说明，或许是您遗漏了。
- 请勿到处挖坑绊人、招贴广告。既占空间让人厌烦，又没人会搭理，于人于己都无利。
关于好例子网
本站旨在为广大IT学习爱好者提供一个非营利性互相学习交流分享平台。本站所有资源都可以被免费获取学习研究。本站资源来自网友分享，对搜索内容的合法性不具有预见性、识别性、控制性，仅供学习研究，请务必在下载后24小时内给予删除，不得用于其他任何用途，否则后果自负。基于互联网的特殊性，平台无法对用户传输的作品、信息、内容的权属或合法性、安全性、合规性、真实性、科学性、完整权、有效性等进行实质审查；无论平台是否已进行审查，用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。本站所有资源不代表本站的观点或立场，基于网友分享，根据中国法律《信息网络传播权保护条例》第二十二与二十三条之规定，若资源存在侵权或相关问题请联系本站客服人员，点此联系我们。关于更多版权及免责申明参见 版权及免责申明
网友评论
我要评论