Kafka安装步骤-创新互联

Kafka是由Java编写的一个开源流处理平台，因为它强大的动作流数据处理功能而备受大数据开发者的欢迎。因而作为大数据的开发者，掌握Kafka也就掌握了大数据最重要的一项核心技术。本文是一篇新手入门Kafka的安装教程，下面小编将手把手结合图片详细的指导大家安装Kafka。

成都创新互联公司服务项目包括永和网站建设、永和网站制作、永和网页制作以及永和网络营销策划等。多年来，我们专注于互联网行业，利用自身积累的技术优势、行业经验、深度合作伙伴关系等，向广大中小型企业、政府机构等提供互联网行业的解决方案，永和网站推广取得了明显的社会效益与经济效益。目前，我们服务的客户以成都为中心已经辐射到永和省份的部分城市，未来相信会继续扩大服务区域并继续获得客户的支持与信任！

 

 

1、认识Kafka

 

Kakfa 是一个分布式的基于发布/订阅模式的消息队列（message queue），所谓的消息队列是指一个用户要注册信息，当用户信息写入数据库后，后面还有一些其他流程，比如发送短信，则需要等这些流程处理完成后，再返回给用户。Kafka 的基础架构主要有 broker、生产者、消费者组构成，当前还包括 ZooKeeper。目前Kakfa主要应用于大数据的实时处理领域。

 

2、 安装 Kafka

 

步骤一：Kafka 的安装只需要解压安装包就可以完成安装。

 

tar -zxvf kafka_2.11-2.1.1.tgz -C /usr/local/

 

步骤二： 查看配置文件。

 

[root@es1 config]# pwd

 

/usr/local/kafka/config

 

[root@es1 config]# ll

 

total 84

 

-rw-r--r--. 1 root root  906 Feb  8  2019 connect-console-sink.properties

 

-rw-r--r--. 1 root root  909 Feb  8  2019 connect-console-source.properties

 

-rw-r--r--. 1 root root 5321 Feb  8  2019 connect-distributed.properties

 

-rw-r--r--. 1 root root  883 Feb  8  2019 connect-file-sink.properties

 

-rw-r--r--. 1 root root  881 Feb  8  2019 connect-file-source.properties

 

-rw-r--r--. 1 root root 1111 Feb  8  2019 connect-log4j.properties

 

-rw-r--r--. 1 root root 2262 Feb  8  2019 connect-standalone.properties

 

-rw-r--r--. 1 root root 1221 Feb  8  2019 consumer.properties

 

-rw-r--r--. 1 root root 4727 Feb  8  2019 log4j.properties

 

-rw-r--r--. 1 root root 1925 Feb  8  2019 producer.properties

 

-rw-r--r--. 1 root root 6865 Jan 16 22:00 server-1.properties

 

-rw-r--r--. 1 root root 6865 Jan 16 22:00 server-2.properties

 

-rw-r--r--. 1 root root 6873 Jan 16 03:57 server.properties

 

-rw-r--r--. 1 root root 1032 Feb  8  2019 tools-log4j.properties

 

-rw-r--r--. 1 root root 1169 Feb  8  2019 trogdor.conf

 

-rw-r--r--. 1 root root 1023 Feb  8  2019 zookeeper.properties

 

（3）修改配置文件 server.properties。

 

设置 broker.id 这个是 Kafka 集群区分每个节点的唯一标志符。

 

步骤三：设置 Kafka 的数据存储路径。

 

 

步骤四：设置是否可以删除 topic，默认 Kafka 的 topic 是不允许删除的。

 

 

步骤五：Kafka 的数据保留的时间，默认是 7 天。

 

步骤六：Log 文件大的大小，如果 log 文件超过 1 G 会创建一个新的文件。

 

 

步骤七：Kafka 连接的 ZooKeeper 的地址和连接 Kafka 的超时时间。

 

 

步骤八：默认的 partition 的个数。

 

步骤九：安装成功，启动 Kafka，每个 Kakfa 节点都需要手动启动，下面的方式阻塞的方式启动。

 

 

如何安装Kafka？相信大家看完新手安装Kafka教程指导，对于这个问题应该已经有了自己的答案。当然安装Kafka只是第一步，要想更加深入学习大数据的相关技术，可以来创新互联成都网站设计公司报名相关课程。

另外有需要云服务器可以了解下创新互联scvps.cn，海内外云服务器15元起步，三天无理由+7*72小时售后在线，公司持有idc许可证，提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案，具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势，专为企业上云打造定制，能够满足用户丰富、多元化的应用场景需求。

网站栏目：Kafka安装步骤-创新互联
分享路径：http://cdiso.cn/article/dciees.html