rabbitmq简介
rabbitmq是一个开源的,基于amqp(advanced message queuing protocol)协议的完整的可复用的企业级消息队,rabbitmq可以实现点对点,发布订阅等消息处理模式。
rabbitmq是一个开源的amqp实现,服务器端用erlang语言编写,支持linux,windows,macos,freebsd等操作系统,同时也支持很多语言,如:python,java,ruby,php,c#,javascript,go,elixir,objective-c,swift等。
rabbitmq安装
我使用的环境是ubuntu18.04,
- rabbitmq需要erlang语言的支持,在安装rabbitmq之前需要安装erlang
sudo apt-get install erlang-nox
- 更新源
sudo apt-get update
- 安装rabbitmq
sudo apt-get install rabbitmq-server
- 添加users用户,密码设置为admin
sudo rabbitmqctl add_user users admin
- 给添加的用户赋予权限
sudo rabbitmqctl set_user_tags users administrator
- 赋予virtual host中所有资源的配置、写、读权限以便管理其中的资源
rabbitmqctl set_permissions -p users '.*' '.*' '.*'
- 官方提供的一个web管理工具(rabbitmq_management),定位到rabbitmq安装目录然后启动web控制台
sudo rabbitmq-plugins enable rabbitmq_management
- 成功后可以在浏览器输入
http://localhost:15672/
查看rabbitmq信息
rabbitmq常用命令
- 启动
sudo rabbitmq-server start
- 停止
sudo rabbitmq-server stop
- 重启
sudo rabbitmq-server restart
- 查看状态
sudo rabbitmqctl status
- 查看所有用户
rabbitmqctl list_users
- 查看用户权限
rabbitmqctl list_user_permissions users
- 删除用户权限
rabbitmqctl clear_permissions [-p vhostpath] users
- 删除用户
rabbitmqctl delete_user users
- 修改用户密码
rabbitmqctl change_password users newpassword
.net core 使用rabbitmq
- 通过
install-package rabbitmq.client
命令或nuget安装rabbitmq.client
包
生产者实现
using system; using system.text; using rabbitmq.client; namespace rabbitmq { class mainclass { static void main(string[] args) { console.writeline("生产者"); iconnectionfactory factory = new connectionfactory//创建连接工厂对象 { hostname = "106.12.90.208",//ip地址 port = 5672,//端口号 username = "admin",//用户账号 password = "admin"//用户密码 }; iconnection con = factory.createconnection();//创建连接对象 imodel channel = con.createmodel();//创建连接会话对象 string name = "demo"; //声明一个队列 channel.queuedeclare( queue: name,//消息队列名称 durable: false,//是否持久化,true持久化,队列会保存磁盘,服务器重启时可以保证不丢失相关信息。 exclusive: false,//是否排他,true排他的,如果一个队列声明为排他队列,该队列仅对首次声明它的连接可见,并在连接断开时自动删除. autodelete: false,//是否自动删除。true是自动删除。自动删除的前提是:致少有一个消费者连接到这个队列,之后所有与这个队列连接的消费者都断开时,才会自动删除. arguments: null //设置队列的一些其它参数 ); string str = string.empty; do { console.writeline("发送内容:"); str = console.readline(); //消息内容 byte[] body = encoding.utf8.getbytes(str); //发送消息 channel.basicpublish("", name, null, body); console.writeline("成功发送消息:" + str); }while(str.trim().tolower() != "exit"); con.close(); channel.close(); } } }
消费者实现
using system; using system.text; using rabbitmq.client; using rabbitmq.client.events; namespace rabbitmq { class mainclass { static void main(string[] args) { console.writeline("消费者"); iconnectionfactory factory = new connectionfactory//创建连接工厂对象 { hostname = "106.12.90.208",//ip地址 port = 5672,//端口号 username = "admin",//用户账号 password = "admin"//用户密码 }; iconnection conn = factory.createconnection(); imodel channel = conn.createmodel(); string name = "demo"; //声明一个队列 channel.queuedeclare( queue: name,//消息队列名称 durable: false,//是否持久化,true持久化,队列会保存磁盘,服务器重启时可以保证不丢失相关信息。 exclusive: false,//是否排他,true排他的,如果一个队列声明为排他队列,该队列仅对首次声明它的连接可见,并在连接断开时自动删除. autodelete: false,//是否自动删除。true是自动删除。自动删除的前提是:致少有一个消费者连接到这个队列,之后所有与这个队列连接的消费者都断开时,才会自动删除. arguments: null ////设置队列的一些其它参数 ); //创建消费者对象 var consumer = new eventingbasicconsumer(channel); consumer.received += (model, ea) => { byte[] message = ea.body;//接收到的消息 console.writeline("接收到消息为:" + encoding.utf8.getstring(message)); }; //消费者开启监听 channel.basicconsume(name, true, consumer); console.readkey(); channel.dispose(); conn.close(); } } }
同时运行两个项目看效果
rabbitmq的worker模式
worker模式其实就是一对多模式,我们定义两个消费者来看看效果
默认情况下,rabbitmq会顺序的将message发给下一个消费者。每个消费者会得到平均数量的message。这种方式称之为round-robin(轮询).
但是很多情况下并不希望消息平均分配,而是要消费快的多消费,消费少的少消费.还有很多情况下一旦其中一个宕机,那么另外接收者的无法接收原本这个接收者所要接收的数据。
我们修改其中一个消费者代码,让其等待3秒。在等待中停止运行 看看效果
consumer.received += (model, ea) => { thread.sleep(3000); byte[] message = ea.body; console.writeline("接收到消息为:" + encoding.utf8.getstring(message)); };
当消费者宕机后消费者1并没有接受宕机后的数据。所以我们需要消息确认来解决这个问题。
rabbitmq消息确认
rabbit中存在两种消息确认模式
- 自动模式 – 只要消息从队列获取,无论消费者获取到消息后是否成功消费,都认为是消息成功消费.
- 手动模式 – 消费从队列中获取消息后,服务器会将该消息处于不可用状态,等待消费者反馈。如果消费者在消费过程中出现异常,断开连接切没有发送应答,那么rabbitmq会将这个消息重新投递。
修改两个消费者代码,并在其中一个中延迟确认。
consumer.received += (model, ea) => { byte[] message = ea.body; console.writeline("接收到消息为:" + encoding.utf8.getstring(message)); thread.sleep(3000); //等待三秒手动确认 channel.basicack(ea.deliverytag, true);//返回消息确认 }; ////将autoack设置false 关闭自动确认. channel.basicconsume(name, false, consumer);
如果在延迟中消费者断开连接,那么rabbitmq会重新投递未确认的消息
‘能者多劳’模式
能者多劳是给消费速度快的消费更多的消息.少的责消费少的消息.能者多劳是建立在手动确认基础上实现。
在延迟确认的消费中添加basicqos
channel.queuedeclare( queue: name,//消息队列名称 durable: false,//是否持久化,true持久化,队列会保存磁盘,服务器重启时可以保证不丢失相关信息。 exclusive: false,//是否排他,true排他的,如果一个队列声明为排他队列,该队列仅对首次声明它的连接可见,并在连接断开时自动删除. autodelete: false,//是否自动删除。true是自动删除。自动删除的前提是:致少有一个消费者连接到这个队列,之后所有与这个队列连接的消费者都断开时,才会自动删除. arguments: null ////设置队列的一些其它参数 ); //每次只能向消费者发送一条信息,再消费者未确认之前,不再向他发送信息 channel.basicqos(0,1,false);
可以看出消费快的消费者接受了更多的消息,这就是能者多劳模式的体现
exchange模式
在rabbitmq的exchange模式中生产者并不会直接把消息发送到queue中,而是将消息发送到exchange(交换机),消费者创建各自的队列绑定到交换机.
发布订阅模式(fanout)
生产者实现, 把队列替换成了交换机, 发布消息时把交换机名称告诉rabbitmq,把交换机设置成fanout发布订阅模式
using system; using system.text; using rabbitmq.client; namespace rabbitmq { class mainclass { static void main(string[] args) { console.writeline("生产者"); iconnectionfactory factory = new connectionfactory//创建连接工厂对象 { hostname = "106.12.90.208",//ip地址 port = 5672,//端口号 username = "admin",//用户账号 password = "admin"//用户密码 }; iconnection con = factory.createconnection();//创建连接对象 imodel channel = con.createmodel();//创建连接会话对象 sstring exchangename = "exchange1";//交换机名称 //把交换机设置成fanout发布订阅模式 channel.exchangedeclare(name, type: "fanout"); string str; do { str = console.readline(); //消息内容 byte[] body = encoding.utf8.getbytes(str); //发布消息, channel.basicpublish(exchangename, "", null, body); }while(str.trim().tolower() != "exit"); con.close(); channel.close(); } } }
消费者实现
using system; using system.text; using system.threading; using rabbitmq.client; using rabbitmq.client.events; namespace mq { class mainclass { static void main(string[] args) { iconnectionfactory factory = new connectionfactory//创建连接工厂对象 { hostname = "106.12.90.208",//ip地址 port = 5672,//端口号 username = "admin",//用户账号 password = "admin"//用户密码 }; iconnection conn = factory.createconnection(); imodel channel = conn.createmodel(); //交换机名称 string exchangename = "exchange1"; //声明交换机 channel.exchangedeclare(exchangename, exchangetype.fanout); //消息队列名称 string queuename = datetime.now.second.tostring(); //声明队列 channel.queuedeclare(queuename, false, false, false, null); //将队列与交换机进行绑定 channel.queuebind(queuename, exchangename, "", null); //定义消费者 var consumer = new eventingbasicconsumer(channel); console.writeline($"队列名称:{queuename}"); //接收事件 consumer.received += (model, ea) => { byte[] message = ea.body;//接收到的消息 console.writeline($"接收到信息为:{encoding.utf8.getstring(message)}"); //返回消息确认 channel.basicack(ea.deliverytag, true); }; //开启监听 channel.basicconsume(queuename, false, consumer); console.readkey(); } } }
当消费者绑定同样的交换机,可以看到两个不同的消费者都能接受到生产者发送的所有消息。
路由模式(direct exchange)
路由模式下,在发布消息时指定不同的routekey,交换机会根据不同的routekey分发消息到不同的队列中
生产者实现
using system; using system.text; using rabbitmq.client; namespace rabbitmq { class mainclass { static void main(string[] args) { console.writeline("生产者"); iconnectionfactory factory = new connectionfactory//创建连接工厂对象 { hostname = "106.12.90.208",//ip地址 port = 5672,//端口号 username = "admin",//用户账号 password = "admin"//用户密码 }; iconnection con = factory.createconnection();//创建连接对象 imodel channel = con.createmodel();//创建连接会话对象 string exchangename = "exchange1"; //交换机名称 string routekey = "key1"; //匹配的key, //把交换机设置成direct模式 channel.exchangedeclare(exchangename, exchangetype.direct); string str; do { str = console.readline(); //消息内容 byte[] body = encoding.utf8.getbytes(str); //发送消息 channel.basicpublish(exchangename, routekey, null, body); }while(str.trim().tolower() != "exit"); con.close(); channel.close(); } } }
申明一个routekey值为key1,并在发布消息的时候告诉了rabbitmq,消息传递时routekey必须匹配,才会被队列接收否则消息会被抛弃。
消费者实现
using system; using system.text; using rabbitmq.client; using rabbitmq.client.events; namespace mq { class mainclass { static void main(string[] args) { console.writeline($"输入接受key名称:"); string routekey = console.readline(); iconnectionfactory factory = new connectionfactory//创建连接工厂对象 { hostname = "106.12.90.208",//ip地址 port = 5672,//端口号 username = "admin",//用户账号 password = "admin"//用户密码 }; iconnection conn = factory.createconnection(); imodel channel = conn.createmodel(); //交换机名称 string exchangename = "exchange11"; //声明交换机 channel.exchangedeclare(exchangename, exchangetype.direct); //消息队列名称 string queuename = datetime.now.second.tostring(); //声明队列 channel.queuedeclare(queuename, false, false, false, null); //将队列,key与交换机进行绑定 channel.queuebind(queuename, exchangename, routekey, null); //定义消费者 var consumer = new eventingbasicconsumer(channel); console.writeline($"队列名称:{queuename}"); //接收事件 consumer.received += (model, ea) => { byte[] message = ea.body;//接收到的消息 console.writeline($"接收到信息为:{encoding.utf8.getstring(message)}"); //返回消息确认 channel.basicack(ea.deliverytag, true); }; //开启监听 channel.basicconsume(queuename, false, consumer); console.readkey(); } } }
在routekey匹配的时候才会接收消息,接收者消息队列可以声明多个routekey与交换机进行绑定
routekey不匹配则不接收消息。
通配符模式(topic exchange)
通配符模式和路由模式其实差不多,不同于配符模式中的路由可以声明为模糊查询.
符号“#”匹配一个或多个词.
符号“*”匹配一个词。
rabbitmq中通配符的通配符是用”.”来分割字符串的.比如a.*只能匹配到a.b,a.c,而a.#可以匹配到a.a.c,a.a.b.
生成者实现
using system; using system.text; using rabbitmq.client; namespace rabbitmq { class mainclass { static void main(string[] args) { console.writeline("生产者"); iconnectionfactory factory = new connectionfactory//创建连接工厂对象 { hostname = "106.12.90.208",//ip地址 port = 5672,//端口号 username = "admin",//用户账号 password = "admin"//用户密码 }; iconnection con = factory.createconnection();//创建连接对象 imodel channel = con.createmodel();//创建连接会话对象 string exchangename = "exchange114"; //交换机名称 string routekey = "key.a"; //匹配的key, //把交换机设置成topic模式 channel.exchangedeclare(exchangename, exchangetype.topic); string str; do { str = console.readline(); //消息内容 byte[] body = encoding.utf8.getbytes(str); //发送消息 channel.basicpublish(exchangename, routekey, null, body); }while(str.trim().tolower() != "exit"); con.close(); channel.close(); } } }
消费者实现
using system; using system.text; using rabbitmq.client; using rabbitmq.client.events; namespace mq { class mainclass { static void main(string[] args) { console.writeline($"输入接受key名称:"); string routekey = "key.*"; //使用通配符来匹配key iconnectionfactory factory = new connectionfactory//创建连接工厂对象 { hostname = "106.12.90.208",//ip地址 port = 5672,//端口号 username = "admin",//用户账号 password = "admin"//用户密码 }; iconnection conn = factory.createconnection(); imodel channel = conn.createmodel(); //交换机名称 string exchangename = "exchange114"; //声明交换机 channel.exchangedeclare(exchangename, exchangetype.topic); //消息队列名称 string queuename = datetime.now.second.tostring(); //声明队列 channel.queuedeclare(queuename, false, false, false, null); //将队列与交换机进行绑定 channel.queuebind(queuename, exchangename, routekey, null); //定义消费者 var consumer = new eventingbasicconsumer(channel); console.writeline($"队列名称:{queuename}"); //接收事件 consumer.received += (model, ea) => { byte[] message = ea.body;//接收到的消息 console.writeline($"接收到信息为:{encoding.utf8.getstring(message)}"); //返回消息确认 channel.basicack(ea.deliverytag, true); }; //开启监听 channel.basicconsume(queuename, false, consumer); console.readkey(); } } }
只有在通配符匹配通过的情况下才会接收消息,