Spark大数据处理技术与应用

所属专业：大数据技术学时安排：54小时课程属性：专业基础课
《Spark大数据处理技术与应用》课程是一门具有全面性、实践性、前沿性和综合性等特点的课程，对于培养大数据技术类相关专业学生的专业技能和综合能力具有重要意义。课程内容涵盖了Spark的概述、工作原理、集群环境搭建、核心组件（如Spark Core、Spark SQL、Spark Streaming等）的详细介绍和实践操

资源25个

作业0个

笔记0条

学习人数76人

开始学习

简介

  • 第一章 Spark概述
    收起列表
    展开列表

    1.1 认识Spark及搭建Spark集群

    1.2 了解Spark运行架构与原理

    1.3 课后习题

  • 第二章 Scala基础
    收起列表
    展开列表

    2.1 安装与运行Scala

    2.2 定义函数识别号码类型

    2.3 统计广州号码段数量

    2.4 根据归属地对手机号码段分组

    2.5 编写手机号码归属地信息查询程序

    2.6 课后习题

  • 第三章 Spark编程基础
    收起列表
    展开列表

    3.1 读取员工薪资数据创建RDD

    3.2 查询上半年实际薪资排名前3的员工信息

    3.3 查询上半年或下半年实际薪资大于20万的员工

    3.4 输出每位员工2020年总实际薪资

    3.5查询每位员工2020年的月均实际薪资

    3.6 存储汇总后的员工薪资为文本文件

    3.7 课后习题

  • 第四章 Spark编程进阶
    收起列表
    展开列表

    4.1 搭建Spark开发环境

    4.2 统计分析竞赛网站用户访问日志数据

    4.3 课后习题

对不起，目前没有课程公告

课程评论


   
共0条评论
共0条笔记
主讲教师
王玲莉

助教
教学团队
平台简介 联系我们 意见反馈