...

Hadoop案例视频-20个案例

课程介绍: 通过该课程可以轻松掌握MapReduce各种应用场景的开发手段和优化技巧,并能对MapReduce相关的所有源代码进行深入了解,全面掌握MapReduce的运行原理和机制,帮助快速提升MapReduce开发能力。

课时相关:共 44 课时,更新至第 44 课时

付费服务:所有课时永久观看(不提供下载);专属课件下载。

分享 分享获取学分

01   Hadoop案例实战课程-案例概述   【免费观看】     

1、Hadoop案例实战课程 概述

02   Hadoop实例1-通过采集的气象数据分析每年的最高温度-1   【免费观看】     

2、Hadoop 实例1-----通过采集的气象数据分析每年的最高温度--MapReduce API浅析、MapReduce工程环境搭建、需求分析

03   Hadoop实例1-通过采集的气象数据分析每年的最高温度-2   【免费观看】     

3、Hadoop 实例1-----通过采集的气象数据分析每年的最高温度--编写Map、Reduce代码,Job源码分析

04   Hadoop实例1-通过采集的气象数据分析每年的最高温度-3   【免费观看】     

4、Hadoop 实例1-----通过采集的气象数据分析每年的最高温度--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

05   Hadoop 案例2----数据去重问题--需求分析、编写Map、Reduce代码     

5、Hadoop 案例2----数据去重问题--需求分析、编写Map、Reduce代码

06   Hadoop 案例2----数据去重问题--2     

6、Hadoop 案例2----数据去重问题--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

07   Hadoop 案例3----数据排序--需求分析、编写Map、Reduce代码-1     

7、Hadoop 案例3----数据排序--需求分析、编写Map、Reduce代码

08   Hadoop 案例3----数据排序--2     

8、Hadoop 案例3----数据排序--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

09   Hadoop 案例4----平均成绩--需求分析-1     

9、Hadoop 案例4----平均成绩--需求分析,InputFormat、FileInputFormat、TextInputFormat、KeyValueInputFormat、LineRecodeReader、RecodeReader源码分析

10   Hadoop 案例4----平均成绩--编写Map、Reduce代码、Job     

10、Hadoop 案例4----平均成绩--编写Map、Reduce代码

11   Hadoop 案例5-----求最大最小值问题-1     

11、Hadoop 案例5-----求最大最小值问题:SELECT MAX(NUMBER),MIN(NUMBER) FROM TABLE 获取某列的最大值和最小值--需求分析、编写Map、Reduce代码

12   Hadoop 案例5-----求最大最小值问题-2     

12、Hadoop 案例5-----求最大最小值问题:SELECT MAX(NUMBER),MIN(NUMBER) FROM TABLE 获取某列的最大值和最小值--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

13   Hadoop 案例6-----TopN问题:求最大的K个值并排序--1     

13、Hadoop 案例6-----TopN问题:求最大的K个值并排序--需求分析、编写Map、Reduce代码;Mapper、Reducer源代码分析

14   Hadoop 案例6-----TopN问题:求最大的K个值并排序--2     

14、Hadoop 案例6-----TopN问题:求最大的K个值并排序--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

15   Hadoop 案例7-----日志分析:分析URL的访问量-1     

15、Hadoop 案例7-----日志分析:分析URL的访问量--需求分析、编写Map、Reduce代码

16   Hadoop 案例7-----日志分析:分析URL的访问量-2     

16、Hadoop 案例7-----日志分析:分析URL的访问量--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

17   Hadoop 实例8 Join讲解1--需求分析、设计思路分解-1     

17、Hadoop 实例8 Join讲解1: 获取员工所在部门信息,输出格式要求:员工编号,员工姓名,部门名称,部门编号--需求分析、设计思路分解

18   Hadoop 实例8 Join讲解1--编写Map、Reduce代码-2     

18、Hadoop 实例8 Join讲解1: 获取员工所在部门信息,输出格式要求:员工编号,员工姓名,部门名称,部门编号--编写Map、Reduce代码

19   Hadoop 实例8 Join讲解1--编写Job代码,准备基础数据-3     

19、Hadoop 实例8 Join讲解1: 获取员工所在部门信息,输出格式要求:员工编号,员工姓名,部门名称,部门编号--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

20   Hadoop 实例9 Join讲解2--需求分析、设计思路分解-1     

20、Hadoop 实例9 Join讲解2: 将人员的地址ID完善成为地址名称,输出格式要求:人员Id,姓名,地址--需求分析、设计思路分解、编写Map、Reduce代码

21   Hadoop 实例9 Join讲解2--编写Job代码,准备基础数据-2     

21、Hadoop 实例9 Join讲解2: 将人员的地址ID完善成为地址名称,输出格式要求:人员Id,姓名,地址--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

22   Hadoop 实例10 Join讲解3-优化方案--优化方案设计讲解-1     

22、Hadoop 实例10 Join讲解3: 将人员的地址ID完善成为地址名称,输出格式要求:人员Id,姓名,地址 ----优化方案--优化方案设计讲解

23   Hadoop 实例10 Join讲解3-优化方案---2     

23、Hadoop 实例10 Join讲解3: 将人员的地址ID完善成为地址名称,输出格式要求:人员Id,姓名,地址 ----优化方案--编写自定义Key、ValueType和自定义Group类

24   Hadoop 实例10 Join讲解3-优化方案---3     

24、Hadoop 实例10 Join讲解3: 将人员的地址ID完善成为地址名称,输出格式要求:人员Id,姓名,地址 ----优化方案--编写Mapper、Reducer实现

25   Hadoop 实例11-----二次排序讲解与案例分析--1     

25、Hadoop 实例11-----二次排序讲解与案例分析--需求分析、编写Map、Reduce代码

26   Hadoop 实例11-----二次排序讲解与案例分析--2     

26、Hadoop 实例11-----二次排序讲解与案例分析--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

27   Hadoop 案例12-----自连接问题案例分析--1     

27、Hadoop 案例12-----自连接问题案例分析--需求分析、编写Map、Reduce代码

28   Hadoop 案例12-----自连接问题案例分析--2     

28、Hadoop 案例12-----自连接问题案例分析--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

29   Hadoop 案例13-----倒排索引案例分析--1     

29、Hadoop 案例13-----倒排索引案例分析--需求分析、编写Map、Reduce代码

30   Hadoop 案例13-----倒排索引案例分析--2     

30、Hadoop 案例13-----倒排索引案例分析--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

31   Hadoop 案例14-----多维度排序:多字段排序--1     

31、Hadoop 案例14-----多维度排序:多字段排序--需求分析、设计思路讲解

32   Hadoop 案例14-----多维度排序:多字段排序--2     

32、Hadoop 案例14-----多维度排序:多字段排序----编写Map、Reduce代码

33   Hadoop 案例14-----多维度排序:多字段排序--3     

33、Hadoop 案例14-----多维度排序:多字段排序--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

34   Hadoop 实例15-----MultipleInputs实战1--1     

34、Hadoop 实例15-----MultipleInputs实战1:多文件输入执行join操作--需求分析、编写Map、Reduce代码

35   Hadoop 实例15-----MultipleInputs实战1--2     

35、Hadoop 实例15-----MultipleInputs实战1:多文件输入执行join操作--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

36   Hadoop 实例16-----MultipleInputs实战2--1     

36、Hadoop 实例16-----MultipleInputs实战2:多种自定义文件格式的文件输入处理--需求分析、编写Map、Reduce代码

37   Hadoop 实例16-----MultipleInputs实战2--2     

37、Hadoop 实例16-----MultipleInputs实战2:多种自定义文件格式的文件输入处理--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

38   Hadoop 实例17-----MultipleOutputs实战--1     

38、Hadoop 实例17-----MultipleOutputs实战:结果输出到多个文件夹或者文件中--需求分析、编写Map、Reduce代码

39   Hadoop 实例17-----MultipleOutputs实战--2     

39、Hadoop 实例17-----MultipleOutputs实战:结果输出到多个文件夹或者文件中--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

40   Hadoop 实例18----链式ChainMapper、ChainReducer--1     

40、Hadoop 实例18----链式MapReduce:ChainMapper、ChainReducer--需求分析、编写Map、Reduce代码

41   Hadoop 实例18----链式ChainMapper、ChainReducer--2     

41、Hadoop 实例18----链式MapReduce:ChainMapper、ChainReducer--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

42   Hadoop 实例19----迭代式MapReduce:解决PR计算问题--1     

42、Hadoop 实例19----迭代式MapReduce:解决PR计算问题--需求分析、编写Map、Reduce代码

43   Hadoop 实例19----迭代式MapReduce:解决PR计算问题--2     

43、Hadoop 实例19----迭代式MapReduce:解决PR计算问题--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

44   Hadoop 实例20----优化     

44、Hadoop 实例20----优化

1、Hadoop案例实战课程 概述
2、Hadoop 实例1-----通过采集的气象数据分析每年的最高温度--MapReduce API浅析、MapReduce工程环境搭建、需求分析
3、Hadoop 实例1-----通过采集的气象数据分析每年的最高温度--编写Map、Reduce代码,Job源码分析
4、Hadoop 实例1-----通过采集的气象数据分析每年的最高温度--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看
5、Hadoop 案例2----数据去重问题--需求分析、编写Map、Reduce代码
6、Hadoop 案例2----数据去重问题--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看
7、Hadoop 案例3----数据排序--需求分析、编写Map、Reduce代码

8、Hadoop 案例3----数据排序--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看
9、Hadoop 案例4----平均成绩--需求分析,InputFormat、FileInputFormat、TextInputFormat、KeyValueInputFormat、LineRecodeReader、RecodeReader源码分析
10、Hadoop 案例4----平均成绩--编写Map、Reduce代码

11、Hadoop 案例5-----求最大最小值问题:SELECT MAX(NUMBER),MIN(NUMBER) FROM TABLE 获取某列的最大值和最小值--需求分析、编写Map、Reduce代码
12、Hadoop 案例5-----求最大最小值问题:SELECT MAX(NUMBER),MIN(NUMBER) FROM TABLE 获取某列的最大值和最小值--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看
13、Hadoop 案例6-----TopN问题:求最大的K个值并排序--需求分析、编写Map、Reduce代码;Mapper、Reducer源代码分析
14、Hadoop 案例6-----TopN问题:求最大的K个值并排序--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看
15、Hadoop 案例7-----日志分析:分析URL的访问量--需求分析、编写Map、Reduce代码
16、Hadoop 案例7-----日志分析:分析URL的访问量--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看


17、Hadoop 实例8  Join讲解1: 获取员工所在部门信息,输出格式要求:员工编号,员工姓名,部门名称,部门编号--需求分析、设计思路分解
18、Hadoop 实例8  Join讲解1: 获取员工所在部门信息,输出格式要求:员工编号,员工姓名,部门名称,部门编号--编写Map、Reduce代码
19、Hadoop 实例8  Join讲解1: 获取员工所在部门信息,输出格式要求:员工编号,员工姓名,部门名称,部门编号--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看
20、Hadoop 实例9  Join讲解2: 将人员的地址ID完善成为地址名称,输出格式要求:人员Id,姓名,地址--需求分析、设计思路分解、编写Map、Reduce代码
21、Hadoop 实例9  Join讲解2: 将人员的地址ID完善成为地址名称,输出格式要求:人员Id,姓名,地址--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

22、Hadoop 实例10  Join讲解3: 将人员的地址ID完善成为地址名称,输出格式要求:人员Id,姓名,地址 ----优化方案--优化方案设计讲解
23、Hadoop 实例10  Join讲解3: 将人员的地址ID完善成为地址名称,输出格式要求:人员Id,姓名,地址 ----优化方案--编写自定义Key、ValueType和自定义Group类
24、Hadoop 实例10  Join讲解3: 将人员的地址ID完善成为地址名称,输出格式要求:人员Id,姓名,地址 ----优化方案--编写Mapper、Reducer实现


25、Hadoop 实例11-----二次排序讲解与案例分析--需求分析、编写Map、Reduce代码
26、Hadoop 实例11-----二次排序讲解与案例分析--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看
27、Hadoop 案例12-----自连接问题案例分析--需求分析、编写Map、Reduce代码
28、Hadoop 案例12-----自连接问题案例分析--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看
29、Hadoop 案例13-----倒排索引案例分析--需求分析、编写Map、Reduce代码
30、Hadoop 案例13-----倒排索引案例分析--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看
31、Hadoop 案例14-----多维度排序:多字段排序--需求分析、设计思路讲解
32、Hadoop 案例14-----多维度排序:多字段排序----编写Map、Reduce代码
33、Hadoop 案例14-----多维度排序:多字段排序--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

34、Hadoop 实例15-----MultipleInputs实战1:多文件输入执行join操作--需求分析、编写Map、Reduce代码
35、Hadoop 实例15-----MultipleInputs实战1:多文件输入执行join操作--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看

36、Hadoop 实例16-----MultipleInputs实战2:多种自定义文件格式的文件输入处理--需求分析、编写Map、Reduce代码
37、Hadoop 实例16-----MultipleInputs实战2:多种自定义文件格式的文件输入处理--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看




38、Hadoop 实例17-----MultipleOutputs实战:结果输出到多个文件夹或者文件中--需求分析、编写Map、Reduce代码
39、Hadoop 实例17-----MultipleOutputs实战:结果输出到多个文件夹或者文件中--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看
40、Hadoop 实例18----链式MapReduce:ChainMapper、ChainReducer--需求分析、编写Map、Reduce代码
41、Hadoop 实例18----链式MapReduce:ChainMapper、ChainReducer--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看
42、Hadoop 实例19----迭代式MapReduce:解决PR计算问题--需求分析、编写Map、Reduce代码
43、Hadoop 实例19----迭代式MapReduce:解决PR计算问题--编写Job代码,准备基础数据、打jar包执行hadoop mapreduce程序,结果查看
44、Hadoop 实例20----优化









暂时还没有资料!!

JQuery视频教程

JQuery视频教程

135 人观看

kafka视频教程

kafka视频教程

270 人观看

Flume视频教程

Flume视频教程

406 人观看

相关笔记
01    Hive 随谈(二)– Hive 结构

Hive 的结构如图所示,主要分为以下几个部分:用户接口,包括 CLI,Client,WUI。元数据存储,通常是存储在关系数据库如 mysql, derby 中。解释器、编译器、优化器、执行器。Hadoop:用 HDFS 进行存储,利用 MapReduce 进行计算。用户接口主要有三个:CLI,Client 和 WUI。其中最常用的是 CLI,Cli 启动的时候,会同时启动一个 Hive 副本。Client 是 Hive 的客户端,用户连接至 Hive Server。在启动 Client 模式的时候,需要

02    Hive 随谈(一)

Hive 是什么在接触一个新的事物首先要回到的问题是:这是什么?这里引用 Hive wiki 上的介绍:Hive is a data warehouse infrastructure built on top of Hadoop. It provides tools to enable easy data ETL, a mechanism to put structures on the data, and the capability to querying and analysis of large

03    Hadoop权威指南1

1、MapReduce作业(job)是客户端需要执行的一个工作单元:它包括输入数据,MapReduce程序和配置信息。Hadoop将作业分成若干个小任务(task)来执行,其中包括两类任务:map任务和reduce任务。 2、两类节点控制着作业的执行过程:一个是jobtracker及一系列的tasktracker。jobtracker通过调度tasktracker上运行的任务,来协调所有运行在系统上的作业。tasktracker在运行任务的同时将运行进度报告发送给jobtracker,jobtr

友情链接