(转)pika详解(二) BlockingConnection

原文:https://blog.csdn.net/comprel/article/details/94592348

BlockingConnection
BlockingConnection提供了最通用的连接方式

提供两个类: BlockingConnection 和 BlockingChannel

class BlockingConnection(object):
def __init__(self, parameters=None, _impl_class=None):
...
1
2
3
BlockingConnection是在pika异步的基础上提供的阻塞方法, 调用的是 AMQP协议的 Basic.Deliver and Basic.Return

在使用basic_consume接收消息, 使用basic_publish发送消息的时候仍然可以实现异步

为防止递归调用或者阻塞, blocking连接/channel 在上下文切换中实现 队列的asynchronously-delivered事件(异步通知事件), 比如在等待BlockingConnection.channel或 BlockingChannel.queue_declare时, 一旦实现嵌套的上下文, 将会同步(synchronously)调用它们, 这涉及到所有的回调函数:

1.lockingConnection.add_on_connection_blocked_callback,

2.BlockingConnection.add_on_connection_unblocked_callback, 3.BlockingChannel.basic_consume 等

避免死锁, 一直夯住: 但rabbitmq资源不足的时候, 当去连接rabbitmq的时候, rabbitmq会告诉客户端Connection.Blocked, 然后rabbitmq会暂停处理连接,直到有资源分配进行处理, 这会影响BlockingConnection和BlockingChannel

比如用户在basic_publish 使用非发布确认机制下, 遇上rabbitmq暂停处理连接,将会一直阻塞住,用户回调也不会被执行, 可能引起系统宕机, 解决办法是:

在BlockingConnection初始化时配置blocked_connection_timeout连接参数

类主要的函数方法及说明:

class BlockingConnection(object):
def __init__(self, parameters=None, _impl_class=None):
"""Create a new instance of the Connection object.
:param None | pika.connection.Parameters | sequence parameters:
Connection parameters instance or non-empty sequence of them. If
None, a `pika.connection.Parameters` instance will be created with
default settings. See `pika.AMQPConnectionWorkflow` for more
details about multiple parameter configurations and retries.
:param _impl_class: for tests/debugging only; implementation class;
None=default
:raises RuntimeError:

"""

def add_on_connection_blocked_callback(self, callback):
回调以便在连接被阻塞(从RabbitMQ接收到Connection.Blocked)时收到通知,
在这种状态下,RabbitMQ暂停处理传入数据,直到连接被解除阻塞,
因此接收此通知的发布者暂停发布直到连接被解除阻塞, 可以调用
ConnectionParameters.blocked_connection_timeout 添加超时

def add_on_connection_unblocked_callback(self, callback):
回调,以便在连接被解除阻塞时收到通知

def call_later(self, delay, callback):
pass

def add_callback_threadsafe(self, callback):
"""
connection.add_callback_threadsafe(
functools.partial(channel.basic_ack, delivery_tag=...))
"""
回调

def remove_timeout(self, timeout_id):
移除超时

def close(self, reply_code=200, reply_text='Normal shutdown'):
reply_code(int) - 关闭的代码
reply_text(str) - 关闭的文本原因


def process_data_events(self, time_limit=0):
pass

def sleep(self, duration):
延迟

def channel(self, channel_number=None):
建立channel通道 channel_number 整数 要使用的通道编号,默认为下一个可用通道编号

@property
def is_closed(self):
返回bool值

@property
def is_open(self):
返回bool值

@property
def basic_nack_supported(self):
返回bool值 , 指定服务器是否支持活动连接上的basic.nack

@property
def consumer_cancel_notify_supported(self):
返回bool值 服务器是否支持活动连接上的使用者取消通知

@property
def exchange_exchange_bindings_supported(self):
返回bool值 活动连接是否支持交换以交换绑定

@property
def publisher_confirms_supported(self):
返回bool值 活动连接是否可以使用发布者确认

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
BlockingChannel 通道

创建示例

import pika

# Create our connection object
connection = pika.BlockingConnection()

# The returned object will be a synchronous channel
channel = connection.channel()
1
2
3
4
5
6
7
参数:

class BlockingChannel(object):
def __init__(self, channel_impl, connection):
pass
1
2
3
@property
def channel_number(self):
"""Channel number"""
频道号码
1
2
3
4
@property
def connection(self):
"""The channel's BlockingConnection instance"""
1
2
3
@property
def is_closed(self):
是否关闭, 返回bool
1
2
3
@property
def is_open(self):
通道是否开启, 返回bool
1
2
3
def close(self, reply_code=0, reply_text="Normal shutdown"):
关闭
1
2
def flow(self, active):
关闭和打开通道流量控制。 active(bool) - 打开流程(True)或关闭(False)
1
2
def add_on_cancel_callback(self, callback):
一个回调函数,该函数将在代理发送Basic.Cancel时调用
callback -:callback(method_frame)其中method_frame类型
是pika.frame.Method类型的方法spec.Basic.Cancel
1
2
3
4
def add_on_return_callback(self, callback):
回调函数,该函数将在发布的消息被拒绝并由服务器通过Basic.Return返回时调用
callback(callable) - 使用callback(channel,method,properties,body),
其中channel:pika.Channel方法:
pika.spec.Basic.Return属性:pika.spec.BasicProperties body:bytes

1
2
3
4
5
6
def basic_consume(self,queue, on_message_callback, auto_ack=False,
exclusive=False, consumer_tag=None, arguments=None):

queue(str) - 要使用的队列
on_message_callback(可调用) -用于将消息分派给用户的必需函数,定义:
on_message_callback(channel, method,properties,body)

channel:BlockingChannel方法:spec.Basic.Deliver属性:
spec.BasicProperties body:bytes
auto_ack(bool) - 如果设置为True,将使用自动确认模式。
exclusive(bool) - 不允许队列中的其他消费者
consumer_tag(str) - 您可以指定自己的消费者标签; 如果留空,将自动生成消费者标签
arguments(dict) - 消费者的自定义键/值对参数
1
2
3
4
5
6
7
8
9
10
11
12
13

def basic_cancel(self, consumer_tag):
取消消费者
1
2
3
def start_consuming(self):
处理I / O事件并调度计时器和basic_consume 回调,直到取消所有使用者
1
2
def stop_consuming(self, consumer_tag=None):
取消所有使用者
1
2
def consume(self,queue,auto_ack=False,exclusive=False, arguments=None,
inactivity_timeout=None):
阻止队列消耗而不是通过回调。此方法是一个生成器,
它将每条消息都生成为方法,属性和正文的元组。当客户通过BlockingChannel.cancel()
或代理取消使用者时,活动生成器迭代器终止。


参数:
queue(str) - 要使用的队列名称
auto_ack(bool) - 告诉代理不要期待ack / nack响应
exclusive(bool) - 不允许队列中的其他消费者
arguments(dict) - 消费者的自定义键/值对参数
inactivity_timeout(float) - 如果给出一个数字(以秒为单位),将导致该方法在给定的
不活动时间后产生(None,None,None); 这允许用户在等待消息到达时执行伪常规维护活动。
如果给出 None(默认),则该方法将阻塞,直到下一个事件到达

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
def get_waiting_message_count(self):
返回可以通过BlockingChannel.consume从当前队列使用者生成器检索而不阻塞的消息数
1
2
def cancel(self):
1
def basic_ack(self, delivery_tag=0, multiple=False):

确认一条或多条消息。当客户端发送时,此方法确认通过Deliver或Get-Ok方法传递的一条或多条消息。
当由服务器发送时,此方法确认在确认模式下在通道上使用“发布”方法发布的一条或多条消息。
确认可以是针对单个消息或一组消息,包括特定消息。

参数:
delivery-tag(int) - 服务器分配的传递标记
multiple(bool) - 如果设置为True,则将传递标记视为“最多并包含”,
以便可以使用单个方法确认多个消息。
如果设置为False,则传递标记引用单个邮件。如果多个字段为1,并且传递标记为零,
则表示确认所有未完成的消息。
1
2
3
4
5
6
7
8
9
10
11
12
def basic_nack(self, delivery_tag=None, multiple=False, requeue=True):
方法允许客户端拒绝一个或多个传入消息。它可用于中断和取消大量传入消息,
或将无法处理的消息返回到其原始队列。

参数:
delivery-tag(int) - 服务器分配的传递标记
multiple(bool) - 如果设置为True,则将传递标记视为“最多并包含”,
以便可以使用单个方法确认多个消息。
如果设置为False,则传递标记引用单个邮件。如果多个字段为1,并且传递标记为零,
则表示确认所有未完成的消息。
requeue(bool) - 如果requeue为true,服务器将尝试重新排队该消息。
如果requeue为false或重新排队尝试失败,则丢弃或删除消息。

1
2
3
4
5
6
7
8
9
10
11
12
13
def basic_get(self, queue, auto_ack=False):
从AMQP代理获取单个消息

参数:
queue(str) - 从中​​获取消息的队列名称
auto_ack(bool) - 告诉经纪人不要期待回复
1
2
3
4
5
6
def basic_publish(self,exchange, routing_key, body, properties=None, mandatory=False):
参数:
exchange(str) - 要发布的交流
routing_key(str) - 要绑定的路由键
body(字节) - 消息体; 如果没有身体,空字符串
properties(pika.spec.BasicProperties) - 消息属性
mandatory(bool) - 强制性标志
1
2
3
4
5
6
7
def basic_qos(self, prefetch_size=0, prefetch_count=0, global_qos=False):
指定服务质量
参数:
prefetch_size(int) - 该字段指定预取窗口大小。如果服务器的大小等于或小于可用的
预取大小(并且也属于其他预取限制),则它将提前发送消息。
可以设置为零,意味着“没有特定限制”,
尽管其他预取限制可能仍然适用。如果在使用者中设置了no-ack选项,则忽略prefetch-size。
prefetch_count(int) - 根据整个消息指定预取窗口。该字段可以与预取大小字段结合使用;
如果预取窗口(以及通道和连接级别的窗口)都允许,则只会提前发送消息。
如果在使用者中设置了no-ack选项,则忽略prefetch-count。
global_qos(bool) - QoS是否适用于频道上的所有消费者

1
2
3
4
5
6
7
8
9
10
11
12

def basic_recover(self, requeue=False):
此方法要求服务器重新传送指定通道上的所有未确认消息。可以重新传递零个或多个消息。
此方法替换异步Recover

1
2
3
4
5
def basic_reject(self, delivery_tag=None, requeue=True):
拒绝传入的消息。此方法允许客户端拒绝邮件。它可用于中断和取消大量传入消息,
或将无法处理的消息返回到其原始队列。

参数:
delivery-tag(int) - 服务器分配的传递标记
requeue(bool) - 如果requeue为true,服务器将尝试重新排队该消息。
如果requeue为false或重新排队尝试失败,则丢弃或删除消息。
1
2
3
4
5
6
7
8
def confirm_delivery(self):
启用RabbitMQ专有的确认模式
1
2
def exchange_declare(self,exchange,exchange_type='direct',passive=False,
durable=False,auto_delete=False,internal=False,arguments=None):

声明交换机
exchange(str) - 交换名称由这些字符的非空序列组成:
字母,数字,连字符,下划线,句点或冒号。
exchange_type(str) - 要使用的交换类型
passive(bool) - 执行声明或只是检查它是否存在
durable(bool) - 重启RabbitMQ
auto_delete(bool) - 当不再绑定队列时删除
internal(布尔) - 只能由其他交易所发布
arguments(dict) - 交换的自定义键/值对参数
1
2
3
4
5
6
7
8
9
10
11
12
def exchange_delete(self, exchange=None, if_unused=False):
交换机删除
1
2
def exchange_bind(self, destination, source, routing_key='',arguments=None):
交换机绑定

destination(str) - 要绑定的目标交换
source(str) - 要绑定的源交换
routing_key(str) - 要绑定的路由键
arguments(dict) - 绑定的自定义键/值对参数
1
2
3
4
5
6
7

def exchange_unbind(self,destination=None,source=None,routing_key='',
arguments=None):
取消绑定

1
2
3
4
5
def queue_declare(self,queue, passive=False, durable=False, exclusive=False,
auto_delete=False, arguments=None):
声明队列,
queue(str) - 队列名称; 如果为空字符串,则代理将创建唯一的队列名称
passive(bool) - 只检查队列是否存在,如果不存在则引发 ChannelClosed
durable(bool) - 经纪人重新开始
exclusive(bool) - 仅允许当前连接访问
auto_delete(bool) - 消费者取消或断开连接后删除
arguments(dict) - 队列的自定义键/值参数
1
2
3
4
5
6
7
8
9
def queue_delete(self, queue, if_unused=False, if_empty=False):
删除队列
1
2
def queue_purge(self, queue):
清除指定队列中的所有消息 queue清除的队列的名称

1
2
3
def queue_bind(self, queue, exchange, routing_key=None, arguments=None):
将队列绑定到指定的交换

参数:
queue(str) - 绑定到交换的队列
exchange(str) - 要绑定的源交换
routing_key(str) - 要绑定的路由键
arguments(dict) - 绑定的自定义键/值对参数
1
2
3
4
5
6
7
8
def queue_unbind(self,queue,exchange=None,routing_key=None,arguments=None):
从交换中取消绑定队列
queue(str) - 从交换中取消绑定的队列
exchange(str) - 要绑定的源交换
routing_key(str) - 解除绑定的路由键
arguments(dict) - 绑定的自定义键/值对参数
1
2
3
4
5
6
def tx_select(self):
选择标准交易模式
def tx_commit(self):
事务提交
def tx_rollback(self):
事务回滚

 
上一篇:Pika是否是线程安全的


下一篇:Python的rabbitMQ