湖北省城乡和住房建设厅网站,做ppt好的模板下载网站,外贸网站优势,静安做网站公司前言上篇文章讲解了 Kafka 的基础概念和架构#xff0c;了解了基本概念之后#xff0c;必须得实践一波了#xff0c;所谓“实践才是检验真理的唯一办法”#xff0c;后续系列关于 Kafka 的文章都以 kafka_2.11-0.9.0.0 为例#xff1b;另外为了让大家快速入门#xff0c;…前言上篇文章讲解了 Kafka 的基础概念和架构了解了基本概念之后必须得实践一波了所谓“实践才是检验真理的唯一办法”后续系列关于 Kafka 的文章都以 kafka_2.11-0.9.0.0 为例另外为了让大家快速入门本文只提供单机版的安装实战教程如果有想尝试集群方案的后面在出一篇集群安装的教程废话不多说了直接开干。安装1. 下载版本号kafka_2.11-0.9.0.0下载地址http://kafka.apache.org/downloads2. 安装# 安装目录
$ pwd
/Users/my/software/study# 减压
$ sudo tar -zxvf kafka_2.11-0.9.0.0.tgz# 重命名
$ sudo mv kafka_2.11-0.9.0.0.tgz kafka-0.9# 查看目录结构
$ cd kafka-0.9 ls
LICENSE NOTICE bin config libs site-docs# 目录结构介绍
# bin: 存放kafka 客户端和服务端的执行脚本
# config: 存放kafka的一些配置文件
# libs: 存放kafka运行的的jar包
# site-docs: 存放kafka的配置文档说明# 配置环境变量方便在任意目录下运行kafka命令
# 博主使用的Mac所以配置在了 ~/.bash_profile文件中
# Linux中则配置在 ~/.bashrc 或者 ~/.zshrc文件中
$ vim ~/.bash_profileexport KAFKA_HOME/Users/haikuan1/software/study/kafka-0.9
export PATH$PATH:$JAVA_HOME:$KAFKA_HOME/bin# 使得环境变量生效
$ source ~/.bash_profile3.运行3.1 启动 zookeeper# 启动zookeeper因为kafka的元数据需要保存到zookeeper中
$ bin/zookeeper-server-start.sh config/zookeeper.properties# 若出现如下信息则证明zookeeper启动成功了
[2020-04-25 16:23:44,493] INFO Server environment:user.dir/Users/haikuan1/software/study/kafka-0.10 (org.apache.zookeeper.server.ZooKeeperServer)
[2020-04-25 16:23:44,505] INFO tickTime set to 3000 (org.apache.zookeeper.server.ZooKeeperServer)
[2020-04-25 16:23:44,505] INFO minSessionTimeout set to -1 (org.apache.zookeeper.server.ZooKeeperServer)
[2020-04-25 16:23:44,505] INFO maxSessionTimeout set to -1 (org.apache.zookeeper.server.ZooKeeperServer)
[2020-04-25 16:23:44,548] INFO binding to port 0.0.0.0/0.0.0.0:2181 (org.apache.zookeeper.server.NIOServerCnxnFactory)
3.2 启动 Kafka server# 以守护进程的方式启动kafka服务端去掉 -daemon 参数则关闭当前窗口服务端自动退出
$ bin/kafka-server-start.sh -daemon config/server.properties
3.3 kafka 基础命令使用# 1. 创建一个topic
# --replication-factor指定副本个数
# --partition指定partition个数
# --topic指定topic的名字
$ bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partition 1 --topic mytopic# 2. 查看创建成功的topic
$ kafka-topics.sh --list --zookeeper localhost:2181# 3. 创建生产者和消费者# 3.1 启动kafka消费端
# --from-beginning从头开始消费该特性也表明kafka消息具有持久性
$ bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic mytopic --from-beginning# 3.2 启动kafka生产端
# --broker-list当前的Broker列表即提供服务的列表
$ bin/kafka-console-producer.sh --broker-list localhost:9092 --topic mytopic4.使用 Java 连接 kafka 进行测试4.1 创建一个 maven 工程引入如下 pom 依赖dependencygroupIdorg.apache.kafka/groupIdartifactIdkafka-clients/artifactIdversion0.9.0.0/version
/dependencydependencygroupIdorg.apache.kafka/groupIdartifactIdkafka_2.11/artifactIdversion0.9.0.0/version
/dependency
4.2 消费者端代码4.3 生产者端代码4.4 消费者端效果图5.总结本文介绍了 kafka 单机版安装及简单命令使用然后使用 Java 实现了生产者和消费者的简单功能虽然内容可能比较简单但还是强烈建议大家手动去实践一下从而对 kafka 的架构有一个更深入的理解。下篇文章我们来介绍一下 Kafka 常用参数及其背后的原理敬请期待。系列文章尽在微信公众号【z小赵】关注作者系列文章不迷路。
