大数据学习必备之Kafka分布式消息系统

Kafka分布式消息系统

（本视频教程资料由北风网提供，希望各位大数据学习者都能从中有所收获。更多视频教程可访问北风网官网或关注头条号“小北IT”了解更多）

Kafka是分布式的消息队列，作为云计算服务的基石，它广泛的应用在实时数据流方面，是实时数据处理的数据中枢，广泛应用在很多互联网企业，例如：linkedin，facebook，腾讯，百度，阿里等。

什么是消息系统

实时数据流是现在互联网公司、甚至拥有大规模数据的传统企业的主要模式， 实时数据(Real-time Activity Data)就是那些非交易，不需要秒级响应的数据， 但在后续的分析中产生极大作用，例如个性化推荐、运营服务监控、精细化营销、报表等 。

基本结构

本套视频教程由北风网讲师Collen7788主讲，Collen7788老师毕业于清华大学，拥有超过13年的工作经验。Oracle高级技术顾问，拥有6年以上授课经验。精通Oracle数据库、中间（Weblogic）和大数据Hadoop的管理和开发，精通Java语言。曾为湖北移动，北京市公安局，中国人寿，AutoDesk（中国）有限公司，成都运达科技股份有限公司，中国电信，中国移动，山东教育网进行培训。由于其认真负责的授课态度和基于本质的课程内容解释，深受学员的追捧。

Kafka与Hadoop的集成

课程系统性地介绍Kafka分布式消息系统，掌握了Kafka，你就拿到了大数据处理领域消息处理机制的钥匙，能够轻松上手开发分布式消息系统应用程序开发和维护，笑傲大数据处理技术。学完本课程，你可以掌握：

1.Kafka的部署方式

2.Kafka的原理

3.Kafka与其他大数据组件的集成

4.基于Kafka的程序开发

大数据岗位必备技能点

课程完整大纲目录如下，对IT编程、大数据、数据分析、人工智能感兴趣的朋友们可以访问北风网官网或关注小编了解更多哦！

第一章　Kafka的基本介绍

1.1 什么是消息系统

1.2 消息队列的分类

1.3 Kafka的基本架构和概念

1.4 ZooKeeper简介和安装

第二章　Kafka的原理解析

2.1 Kafka的Producer处理逻辑

2.2 Kafka的broker处理逻辑

2.3 Kafka的Consumer处理逻辑

2.4 Kafka集群部署在zk里的存储结构

第三章　Kafka的部署方式

3.1 Kafka伪集群部署模式

3.2 Kafka集群部署模式

3.3 核心配置文件server.properties

第四章 Kafka的Java应用开发

4.1 Producer端的实现

4.2 Consumer端的实现

第五章 Kafka的Scala应用开发

5.1 Scala的Producer的实现

5.2 Scala的Producer的实现

第六章　Kafka与Hadoop的集成

6.1 Hadoop简介和配置

6.2 集成Kafka和Hadoop

第七章　Kafka与Flume的集成

7.1 Flume简介和使用

7.2 集成Kafka和Flume

第八章　Kafka与Storm的集成

8.1 Storm的运行机制和部署

8.2 Storm编程案例

8.3 集成Kafka和Storm