沙盒资源网 大数据云计算 云计算视频教程 Flume视频教程分布式的海量日志采集 Flume日志收集利器视频教程


云计算视频教程 Flume视频教程分布式的海量日志采集 Flume日志收集利器视频教程

2019-08-22 1007
爱伤了
爱伤了 发帖专员   
资源介绍

云计算视频教程 Flume视频教程分布式的海量日志采集 Flume日志收集利器视频教程

云计算视频教程 Flume视频教程分布式的海量日志采集 Flume日志收集利器视频教程Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。

当前Flume有两个版本Flume 0.9X版本的统称Flume-og,Flume1.X版本的统称Flume-ng。由于Flume-ng经过重大重构,与Flume-og有很大不同,使用时请注意区分。1flume简介-基础知识讲述flume的基础知识包括flume的基本概念和核心组件。flume是一个分布式、可靠、高可用的海量日志聚合系统,支持在系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据的简单处理,并写到各种数据接收方的能力。2flume安装与测试讲述flume安装与测试,主要包括flume单机安装与测试、flume集群安装与测试、Arvo环境的搭建以及安装过程中的一些异常的解决方案讲解。3flume部署方式讲述flume部署种类、流配置。其中详细讲解了单一代理、多代理、多路复用流的配置说明。4flume source相关配置及测试讲述flume source相关的配置和案例分析,包括了Avro Source配置、Thrift Source配置、Exec Source配置、JMS Source配置、NetCat Source配置、Spooling Directory Source配置、Sequence Generator Source配置、Syslog TCP Source配置、Multiport Syslog TCP Source配置、Syslog UDP Source配置、Http Source配置、Custom Source配置。5flume sink相关配置及测试讲述flume sink相关的配置以及flume channel配置和案例分析,包括了HDFS Sink配置、Logger Sink配置、Avro Sink配置、Thrift Sink配置、IRC Sink配置、File Roll Sink配置、Null Sink配置、Hbase Sink配置、AsyncHbase Sink配置、Custom Sink配置;Memory Channel配置、JDBC Channel配置、File Channel配置、Pseudo Transaction Channel配置、Custom Channel配置。6flume selector 相关配置与案例分析讲述 flume selector相关配置和案例分析,包括了Replicating Channel Selector配置、Multiplexing Channel Selector配置、Custom Channel Selector配置。7Flume Sink Processors相关配置和案例分析讲述 Flume Sink Processors相关配置和案例分析,包括了Default Sink Processor配置、Failover Sink Processor配置、Load balancing Sink Processor配置。8Flume Interceptors相关配置和案例分析讲述 Flume Event Serializers、Flume Interceptors相关配置和案例分析,包括了Body Text Serializer配置、Avro Text Serializer配置、Timestamp Interceptor配置、Host Interceptor配置、Static Interceptor配置、Regex Filtering Interceptor配置。9Flume RPC Client开发讲述如何进行 flume RPC Client开发,这个是在通常应用中使用的较多的一种方式。10Flume Sink和Flume Source开发讲述如何进行 flume Sink、flume Source开发。




标签:

问题反馈


百度网盘可以用手机平板电脑在线播放,也可以下载之后播放

本帖资源评论
数据结构深度实战专题班
[Hadoop] 新版Hadoop视频教程 段海涛老师Hadoop八天完全攻克Hadoop视频教程 Hadoop开发
老男孩OpenStack企业私有云公开培训
尚硅谷2018大数据全套
挑战阿里P7P8年薪 NX顶级大数据架构师就业班教程 153G 近500集最新大数据课程
[发布版]若泽数据-大数据零基础班
2017 最新大数据集群生态环境搭建 视频教程 教学视频
牛客网 直通BAT面试算法精讲 共12章 包含课件源码
Hadoop&Spark企业应用实战
人工智能与大数据特训班视频课程 包含基础理论和项目实战
[云计算] 10套 国外顶级 数据分析视频 全英文 带字幕 带笔记 高大上
尚学堂肖斌分布式云平台Hadoop数据处理实战视频教程 67课
[大数据] 大数据分析/数学建模-MATLAB多套视频教程合集+200多本MATLAB技术文档+电
Hadoop-Spark企业应用实战
传智播客Hadoop7天培训全套完整视频教程
大数据架构师成长之路(视频、课件、代码)
基于VN.PY框架打造量化交易系统
2017算法与数据结构C++精解-慕课网
清华大学计算机系邓俊辉教授 数据结构(上、下)
[数据挖掘] 数据挖掘与分析应用+电商数据化运营+轻松驾驭统计学+EXCEL大数据分
没有账号? 注册