【kafka】简单安装kafka单机版

1.安装kafka

下载地址 : https://www.apache.org/dyn/closer.cgi?path=/kafka/0.9.0.0/kafka_2.11-0.9.0.0.tgz

rz
tar zxf kafka_2.11-0.9.0.0.tgz
mv kafka_2.11-0.9.0.0 /usr/local/kafka

2.启停

/usr/local/kafka/bin/kafka-server-stop.sh  /usr/local/kafka/config/server.properties
/usr/local/kafka/bin/kafka-server-start.sh /usr/local/kafka/config/server.properties &
jps
2695 QuorumPeerMain   # ZooKeeper 守护进程
6268 Kafka            # Kafka     守护进程
6553 Jps

3.以上是"单节点 & 单代理"配置

4.简单修改配置

cd /usr/local/kafka
vim config/server.properties
-------------
advertised.host.name=10.1.44.187
-------------

5.创建和删除topic

# 创建topic
bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic HelloWorld

# 删除
bin/kafka-topics.sh --delete --zookeeper localhost:2181 --topic HelloWorld

# 查看已有topic
bin/kafka-topics.sh --list  --zookeeper localhost:2181

6.开启2个窗口进行生产和消费测试

# 生产
/usr/local/kafka/bin/kafka-console-producer.sh --broker-list   10.1.44.187:9092 --topic HelloWorld
# 消费
/usr/local/kafka/bin/kafka-console-consumer.sh --zookeeper   10.1.44.187:2181 --topic HelloWorld --from-beginning

原文地址：http://blog.51cto.com/13634837/2087482

时间： 2024-10-14 05:55:11

【kafka】简单安装kafka单机版的相关文章

Hadoop学习笔记-011-CentOS_6.5_64_HA高可用-Zookeeper3.4.5安装Kafka+消息监控KafkaOffsetMonitor

参考: http://www.cnblogs.com/smartloli/p/4538173.html http://blog.csdn.net/lsshlsw/article/details/47342821 虚拟机中共五个centos系统,每个系统有两个用户root和hadoop:cdh1,cdh2,cdh3,cdh4,cdh5 集群规划安装kafka(cdh3机器) 第一步,解压已下载好的kafka安装包 #tar -zxvf kafka_2.9.2-0.8.2.2.tgz 解压后删除k

新版flume+kafka+storm安装部署

安装步骤: 1.版本介绍: zookeeper3.4.6 flume-ng1.6 kafka2.10-0.8.2 storm0.9.5 2.安装zookeeper 1.下载最新release版zookeeper http://zookeeper.apache.org/releases.html#download 2.修改zookeeper配置文件 $zookeeper_home/conf $ cp zoo_sample.cfg zoo_sample.cfg.bak $ mv zoo_sample

windows安装kafka过程【本地测试】外赋快速启动小脚本

winsows 上装kafka也蛮简单方便下载:wget https://www.apache.org/dyn/closer.cgi?path=/kafka/2.1.0/kafka_2.12-2.1.0.tgz 解压到某文件下 ${kafka-path} 在 ${kafka-path}/bin 下修改server.properties 中 : log.dirs=D:\\ant_JAR\\kafka_2.12-0.10.2.1\\kafka_log #${kafka-path}下建立k

Kafka Manager安装部署及使用

为了简化开发者和服务工程师维护Kafka集群的工作,yahoo构建了一个叫做Kafka管理器的基于Web工具,叫做 Kafka Manager.本文对其进行部署配置,并安装配置kafkatool对kafka进行监控.查询一.kafka-manager 简介为了简化开发者和服务工程师维护Kafka集群的工作,yahoo构建了一个叫做Kafka管理器的基于Web工具,叫做 Kafka Manager.这个管理工具可以很容易地发现分布在集群中的哪些topic分布不均匀,或者是分区在整个集群分布不

Kafka Eagle安装详情及问题解答

1.概述最近有很多同学给笔者留言,说在安装Kafka Eagle的时候,会遇到一些问题,请教如何解决?今天笔者就在这里总结一下安装步骤,和一些安装的注意事项,以及解决方式. 2.内容在安装Kafka Eagle之前,可能新接触的同学对Kafka Eagle不太了解,那我们现在简要介绍一下Kafka Eagle. 源代码地址:https://github.com/smartloli/kafka-eagle (感兴趣的同学可以关注一波) 2.1 Kafka Eagle是什么? Kafka Eag

kafka的安装和使用

简单说kafka是一个高吞吐的分部式消息系统,并且提供了持久化. kafka的架构 • producer:消息生存者• consumer:消息消费者• broker:kafka集群的server,负责处理消息读.写请求,存储消息• topic:消息队列/分类• Queue里面有生产者消费者模型• broker就是代理,在kafka cluster这一层这里,其实里面是有很多个broker• topic就相当于queue• 图里没有画其实还有zookeeper,这个架构里面有些元信息是存在zook

Centos6.5下kafka部署安装

一)安装JDK 步骤1:新建路径/usr/Java, 并在其下解压 jdk-7u71-linux-x64.tar.gz # mkdir -p /usr/java # tar -zxvf jdk-7u71-linux-x64.tar.gz 步骤2:添加JDK到系统环境变量 # vi /etc/profile 新增以下内容: export JAVA_HOME=/usr/java/jdk1.7.0_71 export PATH=$JAVA_HOME/bin:$PATH export CLASSPATH

Windows 安装Kafka

Windows 7 安装Apache kafka_2.11-0.9.0.1 下载所需文件 Zookeeper: http://www.apache.org/dyn/closer.cgi/zookeeper/ Kafka :http://kafka.apache.org/downloads.html 安装Zookeeper 进入zookeeper设置目录,E:\soft\elk\zookeeper-3.4.8\conf 将"zoo_sample.cfg" 复制一份,重命名为"z

附录E 安装Kafka

E.1 安装Kafka E.1.1 下载Kafka Kafka是由LinkedIn设计的一个高吞吐量.分布式.基于发布订阅模式的消息系统,使用Scala编写,它以可水平扩展.可靠性.异步通信和高吞吐率等特性而被广泛使用.目前越来越多的开源分布式处理系统都支持与Kafka集成,其中Spark Streaming作为后端流引擎配合Kafka作为前端消息系统正成为当前流处理系统的主流架构之一. Kafka安装包可以在其官网下载页面下载,下载地址如下,为加快下载速度可以选择中国境内的镜像,选择