大数据原理与应用(从零搭建集群版)

2 人学过

大数据原理与应用(从零搭建集群版)

课程内容
共7个章节 24个实验
1 第1章 Hadoop

Hadoop 

实验1 实验1:Hadoop安装部署
基于Docker的Hadoop安装部署
实验2 实验2:HDFS操作
HDFS操作
实验3 实验3:HDFS编程
HDFS编程
实验4 实验4:MapReduce编程
MapReduce编程
实验5 实验5:Hadoop集群的扩展性测试
Hadoop集群的扩展性测试
2 第2章 Spark

Spark

实验1 实验6:Spark安装部署
Spark安装部署
实验2 实验7:Spark操作实验
Spark操作实验
实验3 实验8:Spark GraphX基本原理
Spark GraphX 基础:基本原理
实验4 实验9:Spark GraphX 设计与实现
Spark GraphX 基础:设计与实现
实验5 实验10:Spark GraphX 操作
Spark GraphX基础:GraphX 操作
实验6 实验11:Spark SQL DataFrame 编程模型
Spark SQL基础:DataFrame 编程模型
实验7 实验12:Spark SQL DataFrame 常见操作
Spark SQL 基础:DataFrame 常见操作
实验8 实验13:Spark Streaming 数据源
Spark Streaming 基础:数据源
实验9 实验14:Spark Streaming DStream 基本操作
Spark Streaming 基础:DStream 基本操作
3 第3章 HBase

HBase

实验1 实验15:HBase安装
HBase安装
实验2 实验16:HBase操作
HBase操作
实验3 实验17:HBase编程
HBase编程
4 第4章 Hive

Hive

实验1 实验18、Hive安装部署
Hive-实验2、Hive安装部署
实验2 实验19、Hive常用命令
Hive常用命令
实验3 实验20、Hive使用进阶
Hive的复杂数据类型、内置函数与自定义函数
实验4 实验21、YouTube网站TopN指标统计
Hive的复杂数据类型、内置函数与自定义函数
实验5 实验22、Hive综合实验
Hive的复杂数据类型、内置函数与自定义函数
5 第5章 NoSQL

NoSQL

实验1 实验23、Redis与MongoDB安装部署
基于Docker的NoSQL数据库安装部署
实验2 实验24:表创建、增、删、改、查等
Redis基本操作:表创建、增、删、改、查等
实验3 实验25:常见命令解析
本实验介绍了Redis的一些常见命令。
实验4 实验26:调用Redis的API实现增删改查
Redis编程:调用Redis的API实现增删改查
实验5 实验27:数据库和集合的创建与删除
本实验介绍了MongoDB的基本概念,以及利用MongoDB创建和删除数据库,以及对集合的增删操作。
实验6 实验28:文档的增删改查
本实验介绍了利用MongoDB对文档进行增删改查操作。
实验7 实验29:条件语句和操作符
本实验介绍了MongoDB中条件语句的运用和典型的操作符。
实验8 实验30:常用方法解析
本实验介绍了利用MongoDB的一些常用方法:limit、skip、sort、index、aggregate
实验9 实验31:MongoDB API调用
MongoDB编程:调用MongoDB的API实现增删改查等
6 第6章 数据采集

数据采集

实验1 实验32、数据采集工具的安装部署
数据采集工具Flume、Kafka和数据迁移工具Sqoop的安装部署
实验2 实验33、使用Flume接收数据
使用Flume接收数据
实验3 实验34、使用Sqoop读取MySQL数据
使用Sqoop读取MySQL数据
实验4 实验35、Sqoop迁移数据实例
Sqoop迁移数据实例
实验5 实验36、使用Kafka接收数据
使用Kafka接收数据
实验6 实验37、Kafka编程实践
本实验学习如何使用JAVA API使用Kafka
7 第7章 Storm

Storm

实验1 实验38、Storm安装部署
本实验介绍如何在Docker上安装部署Storm集群
实验2 实验39、Storm编程实验
本实验主要通过编程实现在Storm上进行wordcount
实验3 实验40、StormACK机制
本实验通过编程了解Storm中的ACK机制
实验4 实验41、Storm Trident编程实践
本实验通过使用Storm的Trident进行编程,让学生掌握Trident的基本使用
实验5 实验42、Storm Kafka集成
本实验学习Storm如何与外部数据源kafka进行集成
实验6 实验43、Strom 分布式RPC
本实验主要学习如何使用Storm实现分布式RPC
大数据原理与应用(从零搭建集群版)

共24个实验

参加本课程