feat(bll, all): обновлена библиотека RabbitMq.Client до версии 7.1.2. Обновлен MqServiceV2. В IMqSettings добавлен параметр PrefetchCount - макс кол-во одновременных обработок очередей. Обновлены связанные проекты под новый MqService. В проектах Aihit, SyncTemplate, SyncSchedule установлен параметр в конфиг PrefetchCount =100
This commit is contained in:
Mikhail Trubnikov
@@ -4,18 +4,19 @@ using PARR.BLL.Domain.Mq;
|
||||
using PARR.BLL.Services.Interfaces;
|
||||
using RabbitMQ.Client;
|
||||
using RabbitMQ.Client.Events;
|
||||
using System.Runtime;
|
||||
using System.Text;
|
||||
|
||||
namespace PARR.BLL.Services.Implementations
|
||||
{
|
||||
|
||||
internal class MqService : IMqService
|
||||
// RabbitMqClient 6.5.0
|
||||
|
||||
internal class MqService// : IMqService
|
||||
{
|
||||
private readonly ILogger<MqService> logger;
|
||||
|
||||
private IConnection? connection;
|
||||
private IModel? channel;
|
||||
//private IModel? channel;
|
||||
|
||||
public MqService(ILogger<MqService> logger)
|
||||
{
|
||||
@@ -24,144 +25,148 @@ namespace PARR.BLL.Services.Implementations
|
||||
|
||||
public MqSendResult Send(IMqSettings mqSettings, string[] msgList)
|
||||
{
|
||||
var factory = new ConnectionFactory
|
||||
{
|
||||
HostName = mqSettings.HostName,
|
||||
UserName = mqSettings.User,
|
||||
Password = mqSettings.Password
|
||||
};
|
||||
return new MqSendResult { IsSuccess = false, NotSendMessages = new string[0] };
|
||||
|
||||
// индекс текущей отправки в очередь из массива msgList
|
||||
// нужен для формирования списка неотправленных сообщений
|
||||
var sendIdx = 0;
|
||||
//var factory = new ConnectionFactory
|
||||
//{
|
||||
// HostName = mqSettings.HostName,
|
||||
// UserName = mqSettings.User,
|
||||
// Password = mqSettings.Password
|
||||
//};
|
||||
|
||||
try
|
||||
{
|
||||
using (var connection = factory.CreateConnection())
|
||||
using (var channel = connection.CreateModel())
|
||||
{
|
||||
//https://www.rabbitmq.com/lazy-queues.html
|
||||
//Рекомендовано при работе порциями использовать ленивые очереди. сообщения не используют память
|
||||
//Формируем соответствующий аргумент
|
||||
var args = new Dictionary<string, object> { { "x-queue-mode", "lazy" } };
|
||||
//// индекс текущей отправки в очередь из массива msgList
|
||||
//// нужен для формирования списка неотправленных сообщений
|
||||
//var sendIdx = 0;
|
||||
|
||||
//Объявляем очередь с которой будем работать.
|
||||
//Если такой очереди ещё нет, то создатся.
|
||||
//Если нет, нужно параметры типа durable должны совпадать иначе будет ошибка.
|
||||
//В целом эти параметры можно посмотреть в админке RabbitMQ
|
||||
//try
|
||||
//{
|
||||
// using (var connection = factory.CreateConnection())
|
||||
// using (var channel = connection.CreateModel())
|
||||
// {
|
||||
// //https://www.rabbitmq.com/lazy-queues.html
|
||||
// //Рекомендовано при работе порциями использовать ленивые очереди. сообщения не используют память
|
||||
// //Формируем соответствующий аргумент
|
||||
// var args = new Dictionary<string, object> { { "x-queue-mode", "lazy" } };
|
||||
|
||||
channel.QueueDeclare(
|
||||
queue: mqSettings.QueueName,
|
||||
durable: true,
|
||||
exclusive: false,
|
||||
autoDelete: false,
|
||||
arguments: args
|
||||
);
|
||||
// //Объявляем очередь с которой будем работать.
|
||||
// //Если такой очереди ещё нет, то создатся.
|
||||
// //Если нет, нужно параметры типа durable должны совпадать иначе будет ошибка.
|
||||
// //В целом эти параметры можно посмотреть в админке RabbitMQ
|
||||
|
||||
var props = channel.CreateBasicProperties();
|
||||
//храним на диске
|
||||
props.DeliveryMode = 2;
|
||||
//время жизни, мс
|
||||
//props.Expiration = "60000";
|
||||
// channel.QueueDeclare(
|
||||
// queue: mqSettings.QueueName,
|
||||
// durable: true,
|
||||
// exclusive: false,
|
||||
// autoDelete: false,
|
||||
// arguments: args
|
||||
// );
|
||||
|
||||
foreach (var msg in msgList)
|
||||
{
|
||||
var body = Encoding.UTF8.GetBytes(msg);
|
||||
channel.BasicPublish(exchange: "", routingKey: mqSettings.QueueName, basicProperties: props, body: body);
|
||||
// var props = channel.CreateBasicProperties();
|
||||
// //храним на диске
|
||||
// props.DeliveryMode = 2;
|
||||
// //время жизни, мс
|
||||
// //props.Expiration = "60000";
|
||||
|
||||
sendIdx++;
|
||||
logger.LogDebug($"Отправлено сообщение в очередь: {mqSettings.HostName} {mqSettings.QueueName}, {msg}");
|
||||
}
|
||||
}
|
||||
// foreach (var msg in msgList)
|
||||
// {
|
||||
// var body = Encoding.UTF8.GetBytes(msg);
|
||||
// channel.BasicPublish(exchange: "", routingKey: mqSettings.QueueName, basicProperties: props, body: body);
|
||||
|
||||
return new MqSendResult { IsSuccess = true };
|
||||
}
|
||||
catch (Exception ex)
|
||||
{
|
||||
var notSendMsg = new List<string>();
|
||||
// sendIdx++;
|
||||
// logger.LogDebug($"Отправлено сообщение в очередь: {mqSettings.HostName} {mqSettings.QueueName}, {msg}");
|
||||
// }
|
||||
// }
|
||||
|
||||
// формируем список неотправленных элементов
|
||||
for (int i = sendIdx; i < msgList.Length; i++)
|
||||
notSendMsg.Add(msgList[i]);
|
||||
// return new MqSendResult { IsSuccess = true };
|
||||
//}
|
||||
//catch (Exception ex)
|
||||
//{
|
||||
// var notSendMsg = new List<string>();
|
||||
|
||||
logger.LogError(ex, $"Ошибка при отправке сообщения в очередь {mqSettings.HostName} {mqSettings.QueueName}, {string.Join(',', notSendMsg)}");
|
||||
// // формируем список неотправленных элементов
|
||||
// for (int i = sendIdx; i < msgList.Length; i++)
|
||||
// notSendMsg.Add(msgList[i]);
|
||||
|
||||
return new MqSendResult { IsSuccess = false, NotSendMessages = notSendMsg.ToArray() };
|
||||
}
|
||||
// logger.LogError(ex, $"Ошибка при отправке сообщения в очередь {mqSettings.HostName} {mqSettings.QueueName}, {string.Join(',', notSendMsg)}");
|
||||
|
||||
// return new MqSendResult { IsSuccess = false, NotSendMessages = notSendMsg.ToArray() };
|
||||
//}
|
||||
}
|
||||
|
||||
public bool InitConsumer(IMqSettings mqSettings, MqMessageHandlerDelegate messageHandler)
|
||||
{
|
||||
logger.LogInformation($"Устанавливаю соединение с RabbitMQ: {mqSettings.HostName}, {mqSettings.QueueName}");
|
||||
|
||||
var facory = new ConnectionFactory
|
||||
{
|
||||
HostName = mqSettings.HostName,
|
||||
UserName = mqSettings.User,
|
||||
Password = mqSettings.Password,
|
||||
AutomaticRecoveryEnabled = true,
|
||||
DispatchConsumersAsync = true
|
||||
};
|
||||
return false;
|
||||
|
||||
try
|
||||
{
|
||||
//using var connection = facory.CreateConnection();
|
||||
//using var channel = connection.CreateModel();
|
||||
//var facory = new ConnectionFactory
|
||||
//{
|
||||
// HostName = mqSettings.HostName,
|
||||
// UserName = mqSettings.User,
|
||||
// Password = mqSettings.Password,
|
||||
// AutomaticRecoveryEnabled = true,
|
||||
// DispatchConsumersAsync = true
|
||||
//};
|
||||
|
||||
connection = facory.CreateConnection();
|
||||
channel = connection.CreateModel();
|
||||
//try
|
||||
//{
|
||||
// //using var connection = facory.CreateConnection();
|
||||
// //using var channel = connection.CreateModel();
|
||||
|
||||
var args = new Dictionary<string, object> { { "x-queue-mode", "lazy" } };
|
||||
// connection = facory.CreateConnection();
|
||||
// channel = connection.CreateModel();
|
||||
|
||||
channel.QueueDeclare(
|
||||
queue: mqSettings.QueueName,
|
||||
durable: true,
|
||||
exclusive: false,
|
||||
autoDelete: false,
|
||||
arguments: args
|
||||
);
|
||||
// var args = new Dictionary<string, object> { { "x-queue-mode", "lazy" } };
|
||||
|
||||
logger.LogInformation($"Соединение с RabbitMQ установлено: {mqSettings.HostName}, {mqSettings.QueueName}");
|
||||
// channel.QueueDeclare(
|
||||
// queue: mqSettings.QueueName,
|
||||
// durable: true,
|
||||
// exclusive: false,
|
||||
// autoDelete: false,
|
||||
// arguments: args
|
||||
// );
|
||||
|
||||
channel.CallbackException += (ch, ea) =>
|
||||
{
|
||||
var _channel = (IModel?)ch;
|
||||
// может тут если канал упал переоткрывать его
|
||||
logger.LogError(ea.Exception, $"Ошибка при обработке очереди MqService сообщений из очереди. Канал открыт: {_channel?.IsOpen}");
|
||||
};
|
||||
// logger.LogInformation($"Соединение с RabbitMQ установлено: {mqSettings.HostName}, {mqSettings.QueueName}");
|
||||
|
||||
var consumer = new AsyncEventingBasicConsumer(channel);
|
||||
consumer.Received += async (ch, ea) =>
|
||||
{
|
||||
var content = Encoding.UTF8.GetString(ea.Body.ToArray());
|
||||
logger.LogDebug($"Получено сообщение: {content}");
|
||||
// channel.CallbackException += (ch, ea) =>
|
||||
// {
|
||||
// var _channel = (IModel?)ch;
|
||||
// // может тут если канал упал переоткрывать его
|
||||
// logger.LogError(ea.Exception, $"Ошибка при обработке очереди MqService сообщений из очереди. Канал открыт: {_channel?.IsOpen}");
|
||||
// };
|
||||
|
||||
await messageHandler.Invoke(content);
|
||||
// var consumer = new AsyncEventingBasicConsumer(channel);
|
||||
// consumer.Received += async (ch, ea) =>
|
||||
// {
|
||||
// var content = Encoding.UTF8.GetString(ea.Body.ToArray());
|
||||
// logger.LogDebug($"Получено сообщение: {content}");
|
||||
|
||||
channel.BasicAck(ea.DeliveryTag, false);
|
||||
await Task.Yield();
|
||||
};
|
||||
// await messageHandler.Invoke(content);
|
||||
|
||||
string consumerTag = channel.BasicConsume(mqSettings.QueueName, false, consumer);
|
||||
// channel.BasicAck(ea.DeliveryTag, false);
|
||||
// await Task.Yield();
|
||||
// };
|
||||
|
||||
return true;
|
||||
// string consumerTag = channel.BasicConsume(mqSettings.QueueName, false, consumer);
|
||||
|
||||
}
|
||||
catch (Exception ex)
|
||||
{
|
||||
logger.LogError(ex, $"Ошибка при получении сообщений из очереди: {mqSettings.HostName}, {mqSettings.QueueName}");
|
||||
// return true;
|
||||
|
||||
return false;
|
||||
}
|
||||
//}
|
||||
//catch (Exception ex)
|
||||
//{
|
||||
// logger.LogError(ex, $"Ошибка при получении сообщений из очереди: {mqSettings.HostName}, {mqSettings.QueueName}");
|
||||
|
||||
// return false;
|
||||
//}
|
||||
}
|
||||
|
||||
public void Dispose()
|
||||
{
|
||||
channel?.Close();
|
||||
connection?.Close();
|
||||
//channel?.Close();
|
||||
//connection?.Close();
|
||||
|
||||
channel?.Dispose();
|
||||
connection?.Dispose();
|
||||
//channel?.Dispose();
|
||||
//connection?.Dispose();
|
||||
}
|
||||
}
|
||||
}
|
||||
|
||||
Reference in New Issue
Block a user