小小千想和您聊一聊

当前位置: 首页> 视频教程> 2019最新快速玩转Flume教程

2019最新快速玩转Flume教程高级

   评分9.4

30节课

11303人已学

下载本章视频你能学到什么?

在本课程中,你将学习到,Flume架构原理、安装配置、拓扑结构、使用Flume搭建监控端口采集数据、监控本地(或HDFS)文件(或文件夹)采集数据、多数据源采集数据、多数据出口收集日志、Flume负载均衡以及对于Flume的监控Ganglia的运用。

千锋大数据官方①群(857910996)——猛戳进入


课程介绍

Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。是大数据大数据开发工程师必须会的框架之一。有利于代码的开发和维护。

章节目录


第1节 Flume的产生 第16节 thrift节 source
第2节 Flume的client 第17节 HDFS节 sink
第3节 flume的source 第18节 avro节 sink
第4节 flume的channel 第19节 hbase sink 
第5节 flume的sink 第20节 file channel
第6节 flume的interceptor 第21节 flume memory channel
第7节 flume的selector 第22节 flume interceptor
第8节 flume的event 第23节 flume的扇出机制
第9节 flume的agent 第24节 flume的扇出机制
第10节 flume的数据模型 第25节 flume的多层代理
第11节 flume的安装 第26节 flume的负载均衡
第12节 flume的版本区别 第27节 案例一
第13节 flume的avro_source 第28节 案例二
第14节 flume的exec_source 第29节 案例三
第15节 spooldir节 source 第30节 案例四

  • Scala系列之对象

    在Scala中没有静态方法和静态字段,但是可以使用object这个语法结构来达到同样的目的。

    457
  • Scala系列之抽象类

    如果某个类至少存在一个抽象方法或一个抽象字段,则该类必须声明为abstract。

    510
  • Scala系列之闭包

    闭包通常来讲可以简单的认为是可以访问一个函数里面局部变量的另外一个函数。

    567
  • Scala系列之闭包

    闭包是一个函数,返回值依赖于声明在函数外部的一个或多个变量。

    765
  • Scala系列之抽象类

    如果某个类至少存在一个抽象方法或一个抽象字段,则该类必须声明为abstract。

    733
  • Scala系列之映射Map

    Scala系列之映射Map

    867
  • Scala系列之集合操作函数

    系列之集合操作函数

    1086
  • Scala系列之List、set、元祖

    映射是K/V对偶的集合,对偶是元组的最简单形式,元组可以装着多个不同类型的值,是不同类型的值的聚集。

    1145
  • Hive分区和分桶

    当单个表数据量越来越大的时候,hive查询通常会全表扫描,这将会浪费我们不关心数据的扫描,浪费大量时间。从而hive引出分区概念partition

    825
  • 大数据编程之UDF函数

     UDF:user difine function,用户自定义函数,一对一。常用 udaf:user define aggregate function,用户自定义聚合函数,多对一。 udtf:user define table_generate function,用户自定义表生成函数,一对多。

    1103

他们都在看