10.友盟-公共模块抽取-web程序配置运行-phone发送-json数据处理_大数据系列教程-Spark生态体系教程_Spark培训视频_课课家

返回课程主页10

10.友盟-公共模块抽取-web程序配置运行-phone发送-json数据处理

购买该课程后可享受以下付费特权：
24小时內讲师答疑购买课程返学分
 所有课时永久观看

价　　格： ￥398.00（新用户单课程可享约7折优惠，前往领劵>>）

套餐购买折扣更低，最高可省1164元，前往查看>>

购买课程尚未登录，点击重新登录点击试听试学课

大数据系列教程-Spark生态体系教程

大数据系列教程-Spark生态体系教程

(1份评价)

目录讨论笔记推荐

章节1Spark第一天

第1节[试学课]01.spark安装

第2节[试学课]02.spark体验wordcount实现

第3节[试学课]03.spark安装

第4节04.spark体验wordcount实现

第5节05.spark独立集群模式搭建

第6节06.sparkjob部署

第7节07.spark 两次shuffle

第8节08.spark RDD-PairRDD-shuffle-宽窄依赖

章节2Spark第二天

第1节01.taggen scala版spark实现

第2节02.taggen java版spark实现

第3节03.spark作业提交流程

第4节04.spark作业提交流程-2

第5节05.spark作业提交流程-3

第6节06.spark作业提交流程-4

章节3Spark第三天

第1节01.spark提交流程回顾

第2节02.spark常见变换和动作

第3节03.spark数据倾斜问题

第4节04.spark aggregateByKey

第5节05.spark资源分配启动进程

第6节06.sparkjob执行独立模式的考察

章节4Spark第四天

第1节01.standalone job提交过程

第2节02.yarn模式下job执行过程

第3节03.spark.yarn.archive属性配置

第4节04.spark hashshuffle下的文件合并

第5节05.spark shuffle管理器

第6节06.spark sort shuffle manager

第7节07.spark bypass merge shuffle writer

第8节08.spark SortShuffleWriter

章节5Spark第五天

第1节01.shuffle回顾

第2节02.SerialShuffleHandle-UnsafeShuffleWriter-ExternalShuffleSorter-InMemoryShuffleSorter

第3节03.BaseShuffleHandle-SortShuffleWriter-ExternalSorter-PartitionedAppendOnlyMap-ParititionPairBuffer

第4节04.shuffle总结

第5节05.内存管理器-内存优化

章节6Spark第六天

第1节01.内存管理回顾

第2节02.spark广播变量

第3节03.spark广播变量2

第4节04.spark广播变量原理

第5节05.spark blockmanager

第6节06.spark累加器

第7节07.spark累加器-自定义累加器

第8节08.spark RDD失败重试-累加器注意事项

第9节09.spark RDD持久化

章节7Spark第七天

第1节01.spark SQL体验

第2节02.spark SQL编程

第3节03.spark SQL编程-java实现

第4节04.spark SQL编程-java实现聚合查询

第5节05.spark SQL编程-自定义聚合函数

第6节06.spark SQL编程-自定义聚合函数实现气温双向聚合

第7节07.spark SQL数据的保存与加载

第8节08.spark SQL集成Hive

第9节09.spark SQL代码集成hive注意事项

第10节10.spark SQL分布式查询引擎

第11节11.spark SQL调优-命令行

第12节12.spark streaming体验

章节8Spark第八天

第1节01.流计算注意事项

第2节02.流计算windows操纵

第3节03.流计算updateStateByKey

第4节04.流计算updateStateByKey实现windows操作

第5节05.流处理外部存储

第6节06.流应用部署需要

章节9Spark第九天

第1节01.spark streaming sqljava实现

第2节02.spark streaming kafka集成

第3节03.spark streaming位置策略处理

第4节04.spark streaming使用jars参数指定类库执行流job

第5节05.kafka与spark streaming分区对应关系

第6节06.spark streaming总结

第7节07.word中文分词

第8节08.机器学习

章节10Spark第十天

第1节01.spark逻辑回归判断酒质量好坏

第2节02.逻辑回归实现垃圾邮件分类

第3节03.贝叶斯分类器集合svm文件实现分类

第4节04.Kmean

第5节05.ALS推荐实现电影

第6节06.友盟项目描述和术语说明

第7节07.友盟项目描述和术语说明2

第8节08.友盟-手机端日志数据模拟

第9节09.友盟-日志聚合体转成json数据(单行)

第10节10.友盟-公共模块抽取-web程序配置运行-phone发送-json数据处理