初级
提供者 : Chintan Thakkar
4 课时 · 18m
语言:阿拉伯语, 德语, 英语, 西班牙语, 法语, 葡萄牙语, 乌尔都语, 简体中文
课程描述
要处理大数据,您需要一个集中式应用程序,该应用程序允许您将数据提交并存储到关系数据库中。在本大数据系统和分析课程中,您将了解为大数据设计的存储系统,例如Hadoop及其架构,其中包括Hadoop分布式文件系统、MapReduce和不同类型的可用节点。
Hadoop分布式文件系统提供可靠性、可扩展性和可用性。借助 MapReduce,Hadoop使用存储在分布式文件系统上的数据执行作业,并帮助用户进行计算。 Apache Pig建立在MapReduce算法之上。它帮助用户创建数据分析程序并分析大型数据集。本课程将解释如何在Hadoop上运行大数据分析的过程。
您将学到的内容
- 识别MapReduce算法的功能
- 解释Hadoop分布式文件系统(HDFS)的含义及其与大数据的关系
- 列举Apache Pig最常见的用途
- 回顾HDFS架构中的节点
- 解释在HDFS中创建文件的步骤
- 描述如何在Hadoop上运行大数据分析
关键要点
- 处理大数据需要一个集中式应用程序,使您能够将数据提交并存储到关系数据库中。
- Hadoop是专为大数据设计的存储系统,其架构包括Hadoop分布式文件系统、MapReduce以及多种可用节点类型。
- Hadoop分布式文件系统提供可靠性、可扩展性和高可用性。
- 借助MapReduce,Hadoop使用存储在分布式文件系统中的数据执行作业,并帮助用户进行计算。
- Apache Pig构建于MapReduce算法之上,帮助用户创建数据分析程序并分析大型数据集。
常见问题
本课程涵盖哪些内容?
本课程涵盖专为大数据设计的存储系统(如Hadoop)及其架构,包括Hadoop分布式文件系统、MapReduce和多种可用节点类型,以及Apache Pig和在Hadoop上运行大数据分析的流程。
Hadoop分布式文件系统是什么?它对大数据有何意义?
Hadoop分布式文件系统提供可靠性、可扩展性和高可用性,本课程将介绍其含义及其与大数据的关系。
根据本课程,Apache Pig有什么用途?
Apache Pig构建于MapReduce算法之上,帮助用户创建数据分析程序并分析大型数据集;本课程还列举了其最常见的用途。
学完本课程后我将获得哪些技能?
您将掌握大数据、大数据分析、数据处理系统、数据库系统、Hadoop分布式文件系统(HDFS)以及Oracle大数据等方面的技能。
各课时教授哪些主题?
课时内容包括Hadoop简介、Hadoop架构、如何在Hadoop和HDFS上运行大数据分析,以及MapReduce算法。










