热点推荐

查看: 8814|回复: 26

大数据开发协作框架及工具:Sqoop+Flume+Oozie+Hue实战视频教程

[复制链接]

1418

主题

1532

帖子

3万

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
39191
发表于 2018-7-20 08:21:01 | 显示全部楼层 |阅读模式
大数据开发协作框架及工具:Sqoop+Flume+Oozie+Hue实战视频教程


课程介绍:3 {' {7 b. s, o

Sqoop(发音:skup)是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。
6 Z, g+ y3 ]( Q3 r9 K. R4 z$ p
1 x5 ]% X" C( \3 r) h# H: u  @
Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。
7 U2 Z5 ~+ W1 P" b5 m4 z% V1 b0 [

Oozie是一种框架,它让我们可以把多个Map/Reduce作业组合到一个逻辑工作单元中。本文是对该框架的基本介绍。
  n! Q) ^( {! d5 u- E! ?  D
' M4 L2 h# t. o% p- ^0 N! P9 ^5 H/ m2 K
Hue是一个可快速开发和调试Hadoop生态系统各种应用的一个基于浏览器的图形化用户接口。
6 |* Y* N6 X1 D' T$ {* C+ V
-------------------课程目录-------------------

│  ├<第1章 数据转换工具Sqoop>9 u8 b/ W  h+ V  [5 R5 C3 O( N
│  │  ├1.02_02_01_01 大数据Hadoop 2.x协作.框架的功能 网页.mp4
│  │  ├1.02_02_01_02 Sqoop 功能概述和版本、架构讲解 网页.mp40 J, j( X* Z$ W- O; q. ^
│  │  ├1.02_02_01_03 Sqoop 使用要点(核心)及企业版本讲解.mp4
│  │  ├1.02_02_01_04 使用CDH 5.3.6版本快速搭建Hadoop 2.x和Hive伪分布式环境 网页.mp4
│  │  ├1.02_02_01_05 Sqoop 1安装及基本使用讲解 网页.mp4
│  │  ├1.02_02_01_06 使用Sqoop导入数据到HDFS及本质分析 网页.mp4
│  │  ├1.02_02_01_07 Sqoop导入数据设置数据存储格式parquet 网页.mp4
│  │  ├1.02_02_01_08 Sqoop导入数据使用query讲解 网页.mp4! k* q: F# N9 {5 F) D! }: E7 j
│  │  ├1.02_02_01_09 Sqoop导入数据设置数据压缩为sanppy 网页.mp4
│  │  ├1.02_02_01_10 对snappy压缩数据结合Hive进行数据的导入与分析 网页.mp4! c, W+ \) f0 U8 R7 }9 H) `
│  │  ├1.02_02_01_11 Sqoop导入数据时两种增量方式导入 网页.mp4$ L0 o* u' k$ x( T5 d# C/ ~  I
│  │  ├1.02_02_01_12 Sqoop导入数据direct使用讲解 网页.mp4' ^( F" }" }6 @# K: C6 ?
│  │  ├1.02_02_01_13 Sqoop导出数据Export使用讲解 网页.mp41 Y8 D  h0 S" Z8 n6 |, t
│  │  ├1.02_02_01_14 Sqoop如何将RDBMS表中的数据导入到Hive表中 网页.mp4
│  │  ├1.02_02_01_15 Sqoop如何导出Hive表中数据到RDBMS中 网页.mp4
│  │  ├1.02_02_01_16 Sqoop使用--options-file进行运行任务讲解 网页.mp4
│  │  └1.02_02_01_17 回顾复习Sqoop的使用及布置作业(oracle与hadoop数据的import) 网页.mp4- E8 q  Q3 A/ i! x
│  ├<第2章 文件收集框架Flume>" K/ Q) ?. M& E  D* b/ M
│  │  ├2.02_02_02_01 Flume功能概述讲解 网页.mp40 L3 J! t+ {2 }1 C, n) Q
│  │  ├2.02_02_02_02 Flume架构设计讲解 网页.mp4" c6 s$ {- z. M5 o5 O
│  │  ├2.02_02_02_03 Flume Agent编程及flume-ng命令使用讲解 网页.mp4
│  │  ├2.02_02_02_04 Flume第一个Agent应用编写(实时读取数据) 网页.mp4
│  │  ├2.02_02_02_05 Flume Agent三大组件Source、Channe、Sink常用类型讲解 网页.mp4+ Y7 g, v( p9 {9 S
│  │  ├2.02_02_02_06 Flume第二个Agent应用讲解(实时监控读取日志数据,存储hdfs文件系统) 网页.mp4# H0 i, ]1 Y7 I) \0 n
│  │  ├2.02_02_02_07 Flume收集数据存储hdfs上的一些高级配置.mp4
│  │  ├2.02_02_02_08 Flume在企业大数据仓库中数据收集架构 网页.mp40 S3 p* m9 d* {% h% s$ }; p0 K4 X
│  │  ├2.02_02_02_09 Flume收集数据存储hdfs上的企业需求讲解 网页.mp4
│  │  └2.02_02_02_10 Flume实在案例讲解(监控日志目录日志数据,实时抽取之hdfs系统上) 网页.mp47 e/ m3 G  v+ R9 V2 I/ o
│  ├<第3章 任务调度框架Oozie>1 B/ S# {0 K* B
│  │  ├3.02_02_03_01 工作流调度框架Oozie功能初步认识 网页.mp4
│  │  ├3.02_02_03_02 Linux Crontab调度讲解 网页.mp4
│  │  ├3.02_02_03_03 大数据Hadoop常用三种调度框架讲解 网页.mp4
│  │  ├3.02_02_03_04 Oozie 功能架构及三大Server讲解 网页.mp48 ]$ ^8 r3 j7 K+ r. j" [5 q
│  │  ├3.02_02_03_05 Oozie安装部署讲解一 网页.mp4# E5 X% {5 F5 M9 Z
│  │  ├3.02_02_03_06 Oozie安装部署讲解二 网页.mp4: N3 j- {7 R1 I
│  │  ├3.02_02_03_07 Oozie案例运行MapReduce Wordflow讲解 网页.mp4
│  │  ├3.02_02_03_08 如何定义Ooozie Workflow讲解 网页.mp4
│  │  ├3.02_02_03_09 Oozie Workflow中MapReduce Action定义讲解 网页.mp4  Q2 k! i1 a: q! ^
│  │  ├3.02_02_03_10 如何编写新API中MapReduce Action讲解 网页.mp4! ~" P: }; N5 r
│  │  ├3.02_02_03_11 编写Oozie Workflow的MapReduce Action并运行 网页.mp4+ W: ?% r, N. `3 @$ ?8 r* v  Z
│  │  ├3.02_02_03_12 回顾复习Oozie Workflow编程要点及MapReduce Action的使用 网页.mp4# ]2 L: m3 l, D6 ]% l! D9 D( ~
│  │  ├3.02_02_03_13 Oozie WorkFlow中Hive Action使用案例讲解一 网页.mp4. n. J2 y' e5 \" c  N2 @3 q+ p
│  │  ├3.02_02_03_14 Oozie WorkFlow中Hive Action使用案例讲解二 网页.mp45 K, V( Z3 Y+ H# B
│  │  ├3.02_02_03_15 Oozie WorkFlow中Sqoop Action使用案例讲解一 网页.mp4
│  │  ├3.02_02_03_16 Oozie WorkFlow中Sqoop Action使用案例讲解二 网页.mp4
│  │  ├3.02_02_03_17 Oozie WorkFlow中Shell Action使用案例讲解 网页.mp4
│  │  ├3.02_02_03_18 Oozie WorkFlow作业布置 网页.mp4
│  │  ├3.02_02_03_19 Oozie Coordinator调度讲解及系统时区配置与定时触发两种配置方式 网页.mp4
│  │  ├3.02_02_03_20 Oozie Coordinator配置定时触发案例演示 网页.mp4
│  │  ├3.02_02_03_21 Oozie Coordinator·配置调度MapReduce· WordCount程序 网页.mp4
│  │  ├3.02_02_03_22 Oozie企业使用案例(Hive Action、Sqoop Actoion及定时调度)讲解一 网页.mp4$ B' c. T8 [0 W& H  c
│  │  ├3.02_02_03_23 Oozie企业使用案例(Hive Action、Sqoop Actoion及定时调度)讲解二 网页.mp43 ]0 k+ Y, E& W
│  │  ├3.02_02_03_24 Oozie企业使用案例(Hive Action、Sqoop Actoion及定时调度)讲解三 网页.mp4/ e" E5 W8 b' N8 q
│  │  ├3.02_02_03_25 Oozie中Coordinator中的数据可用性及Bundle讲解(1) 网页.mp4. f) K( i1 F- P, D$ `4 P% t$ @
│  │  └3.02_02_03_26 Oozie中Coordinator中的数据可用性及Bundle讲解(2) 网页.mp4) ?9 b) v# n9 f+ z+ D2 g1 \
│  ├<第4章 大数据WEB工具Hue>
│  │  ├4.02_02_04_01 Hue架构功能讲解 网页.mp4" l0 w1 m6 f! f& V  }% d. b1 d
│  │  ├4.02_02_04_02 Hue编译安装讲解 网页.mp46 j8 f% w4 S" g8 O+ q
│  │  ├4.02_02_04_03 Hue集成HDFS、YARN配置功能演示讲解 网页.mp4  a: y* g& r, O+ n+ ^* Z6 x) c( C& Y
│  │  ├4.02_02_04_04 Hue集成Hive配置讲解(HiveServer2及MetaStore) 网页.mp4! L3 _2 S$ x! E3 G* n, c, h, z, M
│  │  ├4.02_02_04_05 Hue集成RDBMS配置讲解 网页.mp43 g1 s3 ~1 |$ T: S) H
│  │  └4.02_02_04_06 Hue集成Oozie配置讲解及作业布置 网页.mp4



下载地址回复可见:
游客,如果您要查看本帖隐藏内容请回复

回复

使用道具 举报

3

主题

297

帖子

983

积分

永久VIP会员

Rank: 3Rank: 3

积分
983
发表于 2018-7-20 08:32:47 | 显示全部楼层
感谢分享~~~
回复

使用道具 举报

0

主题

693

帖子

1745

积分

永久VIP会员

Rank: 3Rank: 3

积分
1745
发表于 2018-7-20 09:04:25 | 显示全部楼层
好东西哦!!
回复

使用道具 举报

0

主题

199

帖子

673

积分

永久VIP会员

Rank: 3Rank: 3

积分
673
发表于 2018-7-20 09:29:30 | 显示全部楼层
正在学习大数据
回复

使用道具 举报

2

主题

119

帖子

448

积分

永久VIP会员

Rank: 3Rank: 3

积分
448
发表于 2018-7-20 17:49:22 | 显示全部楼层
这个可以有
回复

使用道具 举报

0

主题

237

帖子

710

积分

永久VIP会员

Rank: 3Rank: 3

积分
710
发表于 2018-7-21 09:37:13 | 显示全部楼层
111111111111111111
回复

使用道具 举报

0

主题

399

帖子

1369

积分

永久VIP会员

Rank: 3Rank: 3

积分
1369
发表于 2018-7-21 21:36:22 | 显示全部楼层
数据开发协作框架及
回复

使用道具 举报

1

主题

235

帖子

875

积分

永久VIP会员

Rank: 3Rank: 3

积分
875
发表于 2018-7-22 00:38:12 | 显示全部楼层
谢谢楼主
回复

使用道具 举报

0

主题

6

帖子

15

积分

Lv1码农小白

Rank: 1

积分
15
发表于 2018-7-22 08:31:10 | 显示全部楼层
这个没学习过,血药学习下,可惜收费啊
回复

使用道具 举报

0

主题

212

帖子

631

积分

Lv1码农小白

Rank: 1

积分
631
发表于 2018-7-23 14:50:10 | 显示全部楼层

不错的资源谢谢
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐上一条 /1 下一条

快速回复 返回顶部 返回列表