Windows平台kafka环境的搭建

注意:Kafka的运行依赖于Zookeeper,所以在运行Kafka之前我们需要安装并运行Zookeeper

下载安装文件: http://kafka.apache.org/downloads.html
1 解压文件(本文解压到 D:\kafka_2.9.2-0.8.2.2)

2 打开D:\kafka_2.9.2-0.8.2.2\config\ server.properties

3 把 log.dirs的值改成 log.dirs=D:\data\logs\kafka

4 D:\kafka_2.9.2-0.8.2.2\bin文件夹下的.sh命令脚本是在shell下运行的,此文件夹下还有个 windows文件夹,里面是windows下运行的.bat命令脚本

5 在D:\kafka_2.9.2-0.8.2.2文件夹中”Shift+鼠标右键”点击空白处打开命令提示窗口

6 输入并执行一下命令以打开kafka:

.\bin\windows\kafka-server-start.bat .\config\server.properties

如果运行提示java内存不够之类的:

可以修改kafka-server-start.bat里面的配置。

一般都需要去掉kafka-run-class.bat里面的  -XX:+UseCompressedOops  才能运行。

7.创建topics
7.1在D:\kafka_2.9.2-0.8.2.2\bin\windows文件夹中”Shift+鼠标右键”点击空白处打开命令提示窗口

kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

8.打开一个Producer
8.1在D:\kafka_2.9.2-0.8.2.2\bin\windows文件夹中”Shift+鼠标右键”点击空白处打开命令提示窗口

kafka-console-producer.bat --broker-list localhost:9092 --topic test

9.打开一个Consumer
9.1在D:\kafka_2.9.2-0.8.2.2\bin\windows文件夹中”Shift+鼠标右键”点击空白处打开命令提示窗口

kafka-console-consumer.bat --zookeeper localhost:2181 --topic test

注意:以上打开的窗口不要关闭
然后就可以在Producer控制台窗口输入消息了。在消息输入过后,很快Consumer窗口就会显示出Producer发送的消息:

原文地址:https://www.cnblogs.com/xuwanchao/p/10565202.html

时间: 2024-08-28 19:53:54

Windows平台kafka环境的搭建的相关文章

zookeeper以及kafka环境的搭建  

linux上的系统环境变量  在安装zookeeper时不需要配置 1. 下载zookeeper二进制安装包(可以下载附件内容或者到官网下载http://www.apache.org/dyn/closer.cgi/zookeeper/) 2解压到linux上任意一路径  本文新建在了/home/hadoop/下 tar -zxvf zookeeper-3.4.6.tar.gz 本人选择 zookeeper-3.4.6.tar.gz   因为3.4.6版本属于稳定版本 3,配置zookeeper

Windows下UEFI环境的搭建

Windows下UEFI环境的搭建 一.环境准备 1. 安装2012及以上VS https://visualstudio.microsoft.com/ 2.下载NASM 2.13.03  http://www.nasm.us/,默认安装目录为C:\nasm,同时添加到PATH环境变量中 3. 安装Python2.7.x  https://www.python.org/,默认安装目录为C:\Python27,添加到新建的PYTHON_HOME环境变量中 4. 安装openssl http://wi

windows平台bugfree3.0.3搭建心得(nginx+php+mysql+bugfree+RunHiddenConsole)

之前没做过windows服务器管理,我的认识还停在个人用户操作系统的认知上,这次搭建bugfree环境,挺多麻烦的: 在安装之前,我百度的bugfree搭建大多是使用xampp集成环境的安装方法,然后我就照做: 下载xampp,然后安装到系统c盘下,基本傻瓜式安装,然后打开control-panel,安装apache.mysql(php在apache里包含了),因为这个系统里已经有mysql服务和apache服务在运行,我也不清楚是谁在用的服务,所以我这里改了apache的端口为81,mysql

scikit-learn 和pandas 基于windows单机机器学习环境的搭建

很多朋友想学习机器学习,却苦于环境的搭建,这里给出windows上scikit-learn研究开发环境的搭建步骤. Step 1. Python的安装 python有2.x和3.x的版本之分,但是很多好的机器学习python库都不支持3.x,因此,推荐安装2.7版本的python.当前最新的python是2.7.12.链接如下: https://www.python.org/downloads/release/python-2712/ 里面可以看到有32位版和64位版的.如果你的机器是64位版的

Windows下Python环境的搭建

我刚开始接触Python没多久,当然这也是为初学者来更好的去入门Python,我电脑上既跑着Windows也跑着Red Hat的Linux,相比较而言,开发我还是更青睐于Linux系统,很多开发工具红帽公司都给提供了. 那么这里我们先说一下Linux下的Python,Linux下Red Hat在光盘里集成了很多套的开发工具,当我们在安装Linux之前选择安装系统类型的时候我们选择GUI,然后把相应的开发工具勾选上就好啦,我当时勾选上了开发工具,现在电脑上既有JDK,也由于GCC,也有Python

Kafka 环境部署搭建

一.基本概念 介绍 Kafka是一个分布式的.可分区的.可复制的消息系统.它提供了普通消息系统的功能,但具有自己独特的设计. 这个独特的设计是什么样的呢? 首先让我们看几个基本的消息系统术语:Kafka将消息以topic为单位进行归纳.将向Kafka topic发布消息的程序成为producers.将预订topics并消费消息的程序成为consumer.Kafka以集群的方式运行,可以由一个或多个服务组成,每个服务叫做一个broker.producers通过网络将消息发送到Kafka集群,集群向

windows配置kafka环境 (依赖zookeeper,kafka内置)

说明: kafka依赖java环境,需要先安装jdk并在cmd中运行java -version 能够正常显示java版本号 1.下载kafka (版本:kafka_2.12-2.3.0): http://kafka.apache.org/downloads.html 2.解压后修改zookeeper配置文件: kafka_2.12-2.3.0\config\zookeeper.properties dataDir=D:\Env\kafka_2.12-2.3.0\data 3.启动zookeepe

Lua学习之【1】:Mac平台下环境的搭建及Hello Lua的输出与编译

1.下载Lua安装包 下载地址:http://www.lua.org/download.html,目前最新的Lua是5.2.3.解压得到doc.src.Makefile.README共4个文件. 2.编译Lua环境 1)控制台下cd  Lua解压路径.2)执行make  平台,我是Mac,所以执行make macosx:3)在src中生成lua和luac两个可执行 文件,这两个文件可以单独拿出来,比如我们在Lua解压路径下创建bin目录,将生成的可执行文件放进去. 3.Hello Lua 1)控

Python与机器学习:windows下机器学习环境的搭建

我的电脑系统是win7 64 位 安装了python-2.7.12.msi 和python-3.4.2.amd64.msi, ========注意:========= 同时都配置好了环境变量path  配置哪个版本的环境就选择相应的配置 (两者不能同时存在,否则用不了pip或easy_install) ....;C:\Python27\Scripts;C:\Python27; 或C:\Python34\Scripts;C:\Python34;....... |------------------