Spark进阶 大数据离线与实时项目实战 /百度网盘

课程介绍

本课程以Spark为项目主线,整合Redis和HBase打造以Spark技术栈为核心的离线处理项目以及实时处理项目,以功能实现为基础,并通过调优及重构功能实现,达到满足企业级生产的水平,带你在实战中进行Spark进阶。另外,课程最后讲解了Alluxio整合Hadoop和Spark的使用,以更好的拓展大家的视野

课程目录

├──第1章 课程介绍&学习指南
| ├──1-1 课程介绍.mp4 16.66M
| └──1-2 学前必读(助你平稳踩坑,畅学无忧,课程学习与解决问题指南).jpg 253.51kb
├──第2章 Redis入门
| ├──2-1 课程目录.mp4 2.26M
| ├──2-10 Redis基本数据类型之set.mp4 22.13M
| ├──2-11 使用Jedis对Redis进行操作.mp4 35.00M
| ├──2-12 Redis工具类开发.mp4 14.57M
| ├──2-2 Redis概述.mp4 14.76M
| ├──2-3 Redis特性.mp4 21.38M
| ├──2-4 Redis应用场景.mp4 7.00M
| ├──2-5 Redis部署&服务启停&客户端连接.mp4 71.11M
| ├──2-6 Redis多数据库特性.mp4 11.33M
| ├──2-7 Redis基础命令的使用.mp4 18.29M
| ├──2-8 Redis数据类型之string.mp4 28.80M
| └──2-9 Redis数据类型之list.mp4 27.55M
├──第3章 HBase入门
| ├──3-1 数据存储现状.mp4 8.04M
| ├──3-10 ZooKeeper环境部署.mp4 12.59M
| ├──3-11 HBase环境部署.mp4 48.51M
| ├──3-12 HBase shell DDL操作.mp4 19.87M
| ├──3-13 HBase shell DML操作.mp4 25.26M
| ├──3-14 HBase API编程之开发前置准备工作.mp4 32.92M
| ├──3-15 HBase API编程之创建表以及查询表和所有列族.mp4 28.23M
| ├──3-16 HBase API编程之添加和修改记录.mp4 33.21M
| ├──3-17 HBase API编程之通过RowKey获取值.mp4 18.77M
| ├──3-18 HBase API编程之Scan.mp4 38.36M
| ├──3-19 HBase API编程之Filter.mp4 24.49M
| ├──3-2 HBase是什么.mp4 10.70M
| ├──3-20 HBase API编程之总结.mp4 3.42M
| ├──3-3 HBase在生态圈中的位置以及列式存储带来的好处.mp4 12.33M
| ├──3-4 HBase的特点.mp4 7.13M
| ├──3-5 HBase vs RDBMS vs HDFS.mp4 6.34M
| ├──3-6 HBase的优势.mp4 2.27M
| ├──3-7 HBase数据模型.mp4 16.12M
| ├──3-8 JDK环境搭建.mp4 18.40M
| └──3-9 Hadoop环境部署(详解一个常见的错误解决方案).mp4 59.73M
├──第4章 离线项目实战V1
| ├──4-1 课程目录.mp4 2.56M
| ├──4-10 开发环境依赖使用说明.mp4 27.07M
| ├──4-11 功能开发之解析日志成DataFrame并为DataFrame添加字段信息.mp4 46.42M
| ├──4-12 功能开发之将DF内容转成HBase要存储的列.mp4 77.94M
| ├──4-13 功能开发之整体ETL流程详解及如何传参设计.mp4 42.49M
| ├──4-14 功能开发之创建HBase表.mp4 55.54M
| ├──4-15 功能开发之HBase Rowkey设计_1.mp4 40.78M
| ├──4-16 功能开发之完成ETL数据到HBase落地的全过程.mp4 45.26M
| ├──4-17 功能开发之完成第一个指标的统计分析.mp4 75.94M
| ├──4-18 功能开发之完成第二个指标的统计分析.mp4 17.79M
| ├──4-19 性能优化之缓存的使用.mp4 20.94M
| ├──4-2 项目背景.mp4 21.47M
| ├──4-20 功能开发之统计功能使用DataFrame API以及SQL API来完成.mp4 31.61M
| ├──4-21 本章小结.mp4 4.38M
| ├──4-3 项目处理流程.mp4 18.49M
| ├──4-4 项目离线和实时架构图.mp4 15.40M
| ├──4-5 明确架构图中每个步骤使用的技术以及职责所在.mp4 30.08M
| ├──4-6 项目指标需求.mp4 5.84M
| ├──4-7 功能开发之UserAgent解析(掌握如何获取技能).mp4 55.22M
| ├──4-8 功能开发之IP解析思路.mp4 4.63M
| └──4-9 功能开发之Spark和HBase依赖整合.mp4 13.10M
├──第5章 离线项目实战优化
| ├──5-1 课程目录.mp4 2.05M
| ├──5-10 Spark产生HFile整个流程实现并总结.mp4 56.62M
| ├──5-2 Spark on YARN.mp4 46.81M
| ├──5-3 Linux时间获取.mp4 6.38M
| ├──5-4 shell封装Spark作业提交脚本.mp4 140.26M
| ├──5-5 将统计结果写入到MySQL中.mp4 40.34M
| ├──5-6 统计结果写入到MySQL调优.mp4 11.58M
| ├──5-7 Spark ETL到HBase优化之禁用WAL.mp4 73.64M
| ├──5-8 Spark ETL到HBase的HFile思路.mp4 10.77M
| └──5-9 Spark产生HFile文件格式准备工作.mp4 50.39M
├──第6章 实时项目实战
| ├──6-1 课程目录.mp4 1.74M
| ├──6-10 功能实现之每天的粒度统计.mp4 68.12M
| ├──6-11 功能开发之调优.mp4 25.88M
| ├──6-12 功能实现小结.mp4 8.50M
| ├──6-13 功能实现之每小时统计及代码重构.mp4 40.80M
| ├──6-14 SparkStreaming对接Kafka offset管理.mp4 41.24M
| ├──6-2 项目背景.mp4 2.73M
| ├──6-3 项目架构及处理流程.mp4 7.47M
| ├──6-4 项目需求.mp4 3.83M
| ├──6-5 开发环境准备及参数配置统一管理.mp4 42.18M
| ├──6-6 Kafka部署及测试.mp4 29.01M
| ├──6-7 Mock数据.mp4 24.73M
| ├──6-8 发送数据到Kafka.mp4 86.58M
| └──6-9 SparkStreaming对接Kafka数据.mp4 27.82M
├──第7章 初识Alluxio
| ├──7-1 课程目录.mp4 1.73M
| ├──7-10 Alluxio整合MapReduce使用.mp4 32.69M
| ├──7-11 Alluxio整合Spark使用.mp4 25.75M
| ├──7-12 Alluxio案例分享之在百度的使用.mp4 39.93M
| ├──7-13 Alluxio案例分享之在去哪儿的应用.mp4 40.20M
| ├──7-2 概述.mp4 10.77M
| ├──7-3 Spark应用存在的问题分析.mp4 11.64M
| ├──7-4 Alluxio能为我们带来什么.mp4 24.44M
| ├──7-5 Alluxio特点.mp4 22.85M
| ├──7-6 在Spark实战项目中引入Alluxio.mp4 8.08M
| ├──7-7 Alluxio部署.mp4 30.65M
| ├──7-8 Alluxio文件系统命令行操作.mp4 25.65M
| └──7-9 Alluxio整合HDFS使用.mp4 38.80M
├──第8章 Spark优化
| ├──8-1 课程目录.mp4 3.58M
| ├──8-10 调优之广播变量.mp4 22.18M
| ├──8-2 调优之资源设置.mp4 36.05M
| ├──8-3 调优之算子的合理选择.mp4 21.74M
| ├──8-4 扩展之自定义排序一.mp4 19.77M
| ├──8-5 扩展之自定义排序二(附带经典面试题).mp4 25.15M
| ├──8-6 扩展之自定义排序(隐式转换).mp4 14.25M
| ├──8-7 Spark Streaming调优之Kafka限速.mp4 17.08M
| ├──8-8 Spark Streaming对接Kafka能真正做到仅消费一次吗.mp4 10.25M
| └──8-9 调优之序列化.mp4 27.74M
└──coding357-master.zip 4.64M

文件信息

Total objects: 103个文件 13个文件夹
Total size: 2.69G

付费资源
© 版权声明
THE END
喜欢就支持以下吧
点赞0
分享
评论 抢沙发

请登录后发表评论