go-nsq使用简述

一 环境依赖:

  golang 开发环境(version >= 1.2)          下源码,配置环境变量,执行安装脚本

  gpm     依赖包管理器                            ubantu: sudo  apt-get intall gpm

二  NSQ安装:

  1. git获取源码: mkdir -p $GOPATH/src/github.com/nsqio;cd $GOPATH/src/github.com/nsqio;git clone https://github.com/nsqio/nsq.git;cd nsq
  2. 安装依赖包: gpm install
  3. 安装NSQ: go install ./...

三  开启NSQ:

  1. nsqd节点维护进程:nsqlookupd &
  2. nsqd节点进程:nsqd --lookupd-tcp-address=127.0.0.1:4160 &
  3. 消息产看进程:nsqadmin --lookupd-http-address=127.0.0.1:4161 &

ps:nsqlookupd与nsqadmin为辅助进程,可不使用直接用nsqd也可正常工作.

这里开启的进程均用默认的端口

四  工具测试:

  • curl -d ‘hello world 1‘ ‘http://127.0.0.1:4151/put?topic=test‘                                        // 产生一个topic为“test” 消息内容为“hello world”的消息
  • nsq_to_file --topic=test --output-dir=./tmp --lookupd-http-address=127.0.0.1:4161    // 将topic为“test”的消息写到./tmp目录下的一个文件中

五 代码测试:

 1 package main
 2
 3 import (
 4     "fmt"
 5     "time"
 6
 7     "github.com/nsqio/go-nsq"
 8 )
 9
10 // nsq发布消息
11 func Producer() {
12     p, err := nsq.NewProducer("127.0.0.1:4150", nsq.NewConfig())                // 新建生产者
13     if err != nil {
14         panic(err)
15     }
16   
17     if err := p.Publish("test", []byte("hello NSQ!!!")); err != nil {           // 发布消息
18         panic(err)
19     }
20 }
21
22 // nsq订阅消息
23 type ConsumerT struct{}
24
25 func (*ConsumerT) HandleMessage(msg *nsq.Message) error {
26     fmt.Println(string(msg.Body))
27     return nil
28 }
29
30 func Consumer() {
31     c, err := nsq.NewConsumer("test", "test-channel", nsq.NewConfig())   // 新建一个消费者
32     if err != nil {
33         panic(err)
34     }
35     c.AddHandler(&ConsumerT{})                                           // 添加消息处理
36     if err := c.ConnectToNSQD("127.0.0.1:4150"); err != nil {            // 建立连接
37         panic(err)
38     }
39 }
40 // 主函数
41 func main() {
42     Producer()
43     Consumer()
44     time.Sleep(time.Second * 3)
45 }
46 // 运行将会打印: hello NSQ!!!

六 使用总结:

  单机使用条件,同步发布消息速度也非常快(10w/s),发布消息端基本无需再做缓存封装。接收端的消息处理应耗时尽量的短,避免消息积累,当消息积累到NSQ的缓存的数量会将多余的消息写到文件,此时也会减缓发送端的发送速度,

  因此,对接收端可使用channel和go routine做简单封装处理。若某topic消息产生太快太多也可将其单独使用一个nsqd处理,避免消息积累影响其它消息投递与接收。

NSQ官方使用介绍

NSQ源码地址

NSQ客户端代码地址

时间: 2024-10-12 17:51:56

go-nsq使用简述的相关文章

Hibernate简述及入门实例

一.Hibernate简述 总的概括,Hibernate是一个ORM的轻量级持久层框架,解决了对象和关系数据库中表的不匹配问题(阻抗不匹配)以及拥有开发代码不用去继承hibernate类或接口的优势(无侵入性).hibernate框架实现使得开发人员可以避免反复地编写javajdbc部分代码,应用面向对象的思维操作关系型数据库. 二.使用myeclipse创建hibernate实例两种方法(以hibernate3.5.2及mysql为例) a)手动编写hibernate.cfg.xml及*.hb

Struts2基本使用(二)--配置文件简述

配置文件简述 引入Struts2框架之后项目中多了一个struts.xml,以及web.xml也多了一些代码 web.xml只要的功能就是拦截用户的请求其多出的代码如下: <filter> <filter-name>struts2</filter-name> <filter-class>org.apache.struts2.dispatcher.ng.filter.StrutsPrepareAndExecuteFilter</filter-class&

nsq 学习(一)源码安装nsq

1.源码安装nsq go get github.com/tools/godep go get github.com/bmizerany/assert godep get github.com/bitly/nsq/... godep执行之后,如果报错: godep: outdated Godeps missing source code This dependency list was created with an old version of godep. To work around thi

简述23种软件设计模式

简述23种软件设计模式 一.设计模式分类 总体来说设计模式分为三大类: 五种创建型模式:工厂方法模式.抽象工厂模式.单例模式.建造者模式.原型模式. 七种结构型模式:适配器模式.装饰器模式.代理模式.外观模式.桥接模式.组合模式.享元模式. 十一种行为型模式:策略模式.模板方法模式.观察者模式.迭代子模式.责任链模式.命令模式.备忘录模式.状态模式.访问者模式.中介者模式.解释器模式. 二.设计模式概述 创建型模式 1.工厂方法模式 工厂方法模式的创建是因为简单工厂模式有一个问题,在简单工厂模式

Spark 学习: spark 原理简述与 shuffle 过程介绍

Spark学习: 简述总结 Spark 是使用 scala 实现的基于内存计算的大数据开源集群计算环境.提供了 java,scala, python,R 等语言的调用接口. Spark学习 简述总结 引言 1 Hadoop 和 Spark 的关系 Spark 系统架构 1 spark 运行原理 RDD 初识 shuffle 和 stage 性能优化 1 缓存机制和 cache 的意义 2 shuffle 的优化 3 资源参数调优 4 小结 本地搭建 Spark 开发环境 1 Spark-Scal

JavaScript事件简述

事件简述 技术一般水平有限,有什么错的地方,望大家指正. 事件是我们平时经常使用,这次就来了解一下事件.首先我们要明确几个概念,JavaScript是单线程,浏览器是多线程的,并不是所有的事件处理函数都是异步的. 前两个我们都知道,这里我们主要介绍第三个.事件处理函数可以在将来执行,只要满足触发条件就会执行事件处理函数.我们经常看到的一个场景,在循环中为一组元素绑定事件,弹出它在这组元素中的索引: <button>button1</button><button>butt

简述Python中&quot;_&quot;的使用常识

0. 背景 Python里面的下划线"_"使用频率明显比其他主流语言要多的多,而且在Python中,它也有自己独到的用处.本文主要简述:下划线在python中的使用常识. 1. 单下划线-将名称封装到类中 如果想将类中的"私有"数据封装到类的实例上,但是又需要考虑到Python缺乏对属性的访问控制问题.与其依赖语言特性来封装数据,Python程序员们更期望通过特定的命名规则来表达出对数据和方法的用途. 第一个规则是任何以单下划线(_)开头的名字应该总是被认为只属于内

TCP/IP协议工作原理简述

TCP/IP协议工作原理简述 Table of Contents 1 概要 2 应用层 3 传输层 4 网络层 5 链路层 1 概要 协议是什么?协议是一组为完成特定需求或功能而定义的标准通讯格式.协议是服务于具体需求或功能的,它不能独立存在. 制定TCP/IP协议的目的是为了解决主机互联以及互联的主机上的应用通讯的问题.TCP/IP协议共有四层:应用层.传输层.网络层.链路层.应用层实际就是我们的应用程序,对于非具体应用而言这一层的协议是未定义的,需要我们自己根据我们具体的业务模型来制定.传输

nsq 学习(三)nsqlookupd

一,整体概况 大概读了下代码,对整份代码结构有了基本思路.但是对代码具体完成的功能和在系统中扮演的角色还不能完全理解.. 整个nsqlookupd分为几部分 1.main,做了初始化之后,就在等待系统信号进行退出等处理 2.RegistrationDB,记录db 3.tcpServr,处理tcp连接,根据tcp发过来的指令完成对应操作 4.httpServer,处理http连接,根据http参数获得的指令完成对应的操作 ps:去官网看了下文档,感觉这里其实大概讲了这个作用:http://nsq.

操作系统概念学习笔记 5 操作系统管理简述

操作系统概念学习笔记 5 操作系统管理简述 进程管理 处于执行中的程序被称作进程. 进程需要一定的资源(包括cpu时间.内存.文件.I/O设备)来完成任务.这些资源可以在进程创建时分配给进程,也可以在执行时分配给进程.除了在创建时得到各种物理和逻辑资源外,进程还可以接受传输过来的各种初始化数据. 程序本身并不是进程,程序是被动的实体.而进程是活动的实体.进程是系统工作的单元. 单线程进程具有一个程序计数器来明确下一个执行的指令,直到进程终止. 在任何时候,最多只有一个指令代表进程被执行.因此,尽