Files d’attente Azure et files d’attente Service Bus : comparaison et différences

Cet article analyse les différences et les similitudes entre les deux types de files d’attente proposés par Microsoft Azure : Files d’attente de stockage et files d’attente Service Bus. À l’aide de ces informations, vous pouvez prendre une décision plus éclairée sur la solution qui répond le mieux à vos besoins.

Introduction

Azure prend en charge deux types de mécanismes de file d’attente : Files d'attente de stockage et files d'attente Service Bus.

Les files d’attente Stockage font partie de l’infrastructure Stockage Azure. Elles vous permettent de stocker un grand nombre de messages. Vous accédez aux messages depuis n’importe où dans le monde par le biais d’appels authentifiés à l’aide du protocole HTTP ou HTTPS. La taille maximale d’un message de file d’attente est de 64 Ko. Une file d’attente peut contenir des millions de messages, dans la limite de la capacité totale d’un compte de stockage. Les files d’attente sont couramment utilisées pour créer un backlog de travail à traiter de façon asynchrone. Pour plus d’informations, consultez Que sont les files d’attente Stockage Azure ?

Les files d’attente Service Bus font partie d’une infrastructure de messagerie Azure plus large qui prend en charge la mise en file d’attente, la publication/l’abonnement et des modèles d’intégration plus avancés. Ces éléments sont conçus pour intégrer des applications ou des composants d’applications qui peuvent s’étendre sur plusieurs protocoles de communication, contrats de données, domaines de confiance ou environnements réseau. Pour plus d’informations sur les files d’attente/rubriques/abonnements Service Bus, consultez Files d’attente, rubriques et abonnements Service Bus.

Considérations relatives à la sélection de la technologie

Les files d’attente Stockage et les files d’attente Service Bus ont un ensemble de fonctionnalités légèrement différent. Vous pouvez choisir l’une ou l’autre, selon les besoins de votre solution spécifique.

Pour déterminer quelle technologie de mise en file d’attente est adaptée à une solution donnée, les développeurs et les architectes de solutions doivent prendre en compte ces recommandations.

Envisager d’utiliser des files d’attente Stockage

En tant que développeur/architecte de solutions, vous devez envisager d’utiliser les files d’attente Azure dans les cas de figure suivants :

• Votre application doit stocker plus de 80 Go de messages dans une file d’attente.
• Votre application veut suivre la progression du traitement d’un message dans la file d’attente. Cela est utile si le Worker qui traite un message ne répond plus. Un autre Worker peut alors utiliser ces informations pour continuer là où le Worker précédent s’était arrêté.
• Vous avez besoin de journaux d’activité côté serveur de toutes les transactions exécutées sur les files d’attente.

Envisager d’utiliser des files d’attente Service Bus

En tant que développeur/architecte de solutions, vous devez envisager d’utiliser les files d’attente Service Bus lorsque :

• Votre solution doit recevoir des messages sans avoir à interroger la file d’attente. Avec Service Bus, vous pouvez y parvenir en utilisant une opération de réception à interrogation longue à l’aide des protocoles TCP pris en charge par Service Bus.
• Votre solution nécessite la file d'attente pour fournir une livraison organisée selon la méthode Premier entré, premier sortie.
• Votre solution doit prendre en charge la détection automatique des doublons.
• Vous voulez que votre application traite les messages sous forme de flux durables parallèles (les messages sont associés à un flux à l’aide de la propriété d’ID de session du message). Dans ce modèle, chaque nœud de l'application consommatrice entre en concurrence pour les flux, contrairement aux messages. Lorsqu'un flux est donné à un nœud consommateur, le nœud peut examiner l'état du flux de l'application à l'aide de transactions.
• Votre solution nécessite un comportement transactionnel et l'atomicité lors de l'envoi ou de la réception de plusieurs messages à partir d'une file d'attente.
• Votre application traite les messages pouvant dépasser 64 Ko, mais n’atteignant probablement pas la limite de 256 Ko ou 1 Mo, en fonction du niveau de service choisi (bien que les files d’attente Service Bus puissent traiter des messages de 100 Mo max.).
• Vous êtes confronté à l'exigence de fournir un modèle d'accès basé sur les rôles aux files d'attente et des droits/autorisations différents pour les expéditeurs et les destinataires. Pour plus d’informations, consultez les articles suivants :
  • Authentifier avec des identités managées
  • Authentifier à partir d’une application
• La taille de la file d’attente ne sera pas supérieure à 80 Go.
• Vous souhaitez utiliser le protocole de messagerie basé sur les normes AMQP 1.0. Pour plus d’informations sur AMQP, consultez Présentation d’AMQP Service Bus.
• Vous envisagez une migration finale de la communication point à point basée sur une file d’attente vers un modèle de messagerie de type publication-abonnement. Ce modèle permet l’intégration de destinataires supplémentaires (abonnés). Chaque destinataire reçoit des copies indépendantes de certains ou de tous les messages envoyés à la file d’attente.
• Votre solution de messagerie doit prendre en charge la garantie de remise « Une fois au maximum » et « Au moins une fois » sans que vous ayez à générer les composants supplémentaires de l’infrastructure.
• Votre solution doit publier et consommer des lots de messages.

Comparer les files d’attente Stockage et les files d’attente Service Bus

Les tableaux des sections suivantes fournissent un regroupement logique des fonctionnalités de file d’attente. Ils vous permettent de comparer, en un coup d’œil, les capacités disponibles dans les files d’attente Stockage Azure et les files d’attente Service Bus.

Fonctions de base

Cette section compare certaines des fonctionnalités de base fournies par les files d’attente Azure et les files d’attente Service Bus.

Informations supplémentaires

• Les messages dans les files d’attente Stockage sont généralement traités selon le principe du premier entré/premier sorti, mais il arrive qu’ils ne soient pas dans l’ordre correct. Par exemple, lorsque la durée du délai de visibilité d’un message expire parce qu’une application cliente s’est bloquée lors du traitement d’un message. Lorsque le délai de visibilité expire, le message est de nouveau visible dans la file d'attente et un autre processus peut le retirer de la file d'attente. À ce stade, le message nouvellement visible peut être placé dans la file d’attente pour en être de nouveau retiré.
• Le modèle Premier entré, premier sorti garanti dans les files d'attente Service Bus requiert l'utilisation de sessions de messagerie. Si l’application se bloque pendant qu’elle traite un message reçu en mode Aperçu et verrouillage, la prochaine fois qu’un destinataire de la file d’attente acceptera une session de messagerie, celle-ci va démarrer avec le message qui a échoué après l’expiration de la période de verrouillage de la session.
• Les files d’attente Stockage sont conçues pour prendre en charge les scénarios de mise en file d’attente standard, tels que les suivants :
  • Découplage des composants d’application pour augmenter la scalabilité et la tolérance aux défaillances.
  • Niveau de charge
  • Génération de workflows de processus.
• Des incohérences concernant le traitement des messages dans le contexte des sessions Service Bus peuvent être évitées en utilisant l’état de la session pour stocker l’état de l’application relatif à la progression du traitement de la séquence de messages de la session et en utilisant des transactions pour régler les messages reçus et mettre à jour l’état de la session. Ce type de fonctionnalité de cohérence est parfois étiqueté Traitement une seule fois dans les produits d’autres fournisseurs. Tout échec de transaction entraîne évidemment la nouvelle remise des messages, et c’est pourquoi le terme n’est pas tout à fait adéquat.
• Les files d’attente de stockage fournissent un modèle de programmation uniforme et cohérent entre les files d’attente, les tables et les objets blob, pour les développeurs et les équipes d’exploitation.
• Les files d'attente Service Bus prennent en charge les transactions locales dans le contexte d'une file d'attente unique.
• Le mode Réception et suppression pris en charge par Service Bus offre la possibilité de réduire le nombre d’opérations de messagerie (et le coût associé) en échange d’une garantie de livraison réduite.
• Les files d’attente de stockage fournissent des attributions avec la possibilité de les étendre aux messages. Cette fonctionnalité permet aux processus Worker de conserver des baux courts sur les messages. Ainsi, si un Worker se bloque, le message peut être rapidement traité à nouveau par un autre Worker. En outre, un Worker peut étendre le bail d’un message s’il doit le traiter pendant une période plus longue que la durée du bail.
• Les files d’attente de stockage offrent un délai de visibilité que vous pouvez définir au moment de la mise en file d’attente ou du retrait de la file d’attente d’un message. En outre, vous pouvez mettre à jour un message avec des valeurs de bail différentes à l’exécution et mettre à jour des valeurs différentes entre des messages dans la même file d’attente. Les dépassement de délai d’attente de verrou Service Bus sont définis dans les métadonnées de file d’attente. Toutefois, vous pouvez renouveler manuellement le verrouillage du message pour la durée prédéfinie ou utiliser la fonction de renouvellement automatique du verrouillage, dans laquelle le client gère le renouvellement du verrouillage pour vous.
• Le délai d'attente maximal pour une opération de réception de blocage dans les files d'attente Service Bus est de 24 jours. Toutefois, les délais d'attente basés sur REST ont une valeur maximale de 55 secondes.
• Le traitement par lots côté client fourni par Service Bus permet à un client de file d'attente de traiter par lots plusieurs messages dans une seule opération d'envoi. Le traitement par lots n'est disponible que pour les opérations d'envoi asynchrones.
• Des fonctionnalités telles que le plafond de 200 To pour les files d’attente Stockage (davantage lorsque vous virtualisez des comptes) et un nombre illimité de files d’attente en font une plateforme idéale pour les fournisseurs SaaS.
• Les files d’attente de stockage fournissent un mécanisme performant et flexible de contrôle d’accès délégué.

Fonctionnalités avancées

Cette section compare les fonctionnalités avancées des files d’attente Azure et des files d’attente Service Bus.

Informations supplémentaires

• Les deux technologies de mise en file d'attente permettent de planifier la remise d'un message à une date ultérieure.
• Le transfert automatique de files d’attente permet à des milliers de files d’attente de transférer automatiquement leurs messages à une seule file d’attente, à partir de laquelle l’application réceptrice consomme le message. Vous pouvez utiliser ce mécanisme pour garantir la sécurité, contrôler le flux et isoler le stockage entre chaque serveur de publication de message.
• Les files d’attente de stockage prennent en charge la mise à jour du contenu des messages. Vous pouvez utiliser cette fonctionnalité pour les informations d'état persistantes et les mises à jour incrémentielles de progression dans le message, afin que celui-ci puisse être traité à partir du dernier point de contrôle connu, au lieu de recommencer depuis le début. Avec les files d’attente Service Bus, vous pouvez activer le même scénario en utilisant des sessions de messagerie. Pour plus d’informations, consultez État d’une session de messagerie.
• Les files d’attente Service Bus prennent en charge la mise en file d’attente de lettres mortes. Cela peut être utile pour isoler les messages qui répondent aux critères suivants :
  • Les messages ne peuvent pas être traités correctement par l’application réceptrice.
  • Les messages ne peuvent pas atteindre leur destination en raison d’une propriété de durée de vie (TTL) expirée. La valeur de durée de vie spécifie la durée pendant laquelle un message reste dans la file d'attente. Avec Service Bus, le message est déplacé vers une file d'attente spéciale appelée $DeadLetterQueue lorsque la durée de vie expire.
• Pour trouver les messages « incohérents » dans les files d’attente Azure, lors du retrait d’un message de la file d’attente, l’application examine la propriété DequeueCount du message. Si la propriété DequeueCount dépasse un seuil donné, l’application déplace le message vers une file d’attente de type « lettre morte » définie par l’application.
• Les files d’attente Stockage vous permettent d’obtenir un journal détaillé de toutes les transactions exécutées sur la file d’attente et des métriques agrégées. Ces deux options sont utiles pour déboguer et comprendre comment votre application utilise les files d’attente de stockage. Elles sont également utiles pour régler les performances de votre application et réduire les coûts d’utilisation des files d’attente.
• Les sessions de messagerie prises en charge par Service Bus permettent d’associer les messages appartenant à un groupe logique à un destinataire. Cela crée une affinité de type session entre les messages et leurs destinataires respectifs. Vous pouvez activer cette fonctionnalité avancée dans Service Bus en définissant la propriété d’ID de session d’un message. Les récepteurs peuvent ensuite écouter par le biais d'un ID de session spécifique et recevoir les messages qui partagent l'identificateur de session spécifié.
• La fonctionnalité de détection des doublons des files d’attente Service Bus supprime automatiquement les messages en double envoyés à une file d’attente ou à une rubrique, selon la valeur de la propriété d’ID du message.

Capacité et quotas

Cette section compare les files d’attente de stockage et les files d’attente Service Bus de la perspective de la capacité et des quotas qui pourraient s’appliquer.

Informations supplémentaires

• Service Bus applique les limites en termes de taille de file d'attente. La taille maximale de file d’attente est spécifiée lors de la création d’une file d’attente. Elle peut être comprise entre 1 Go et 80 Go. Si la taille de la file d’attente atteint cette limite, les messages entrants supplémentaires sont rejetés et l’appelant reçoit une exception. Pour plus d’informations sur les quotas dans Service Bus, consultez Quotas Service Bus.
• Dans le niveau de messagerie Standard, vous pouvez créer des files d’attente et des rubriques Service Bus avec des tailles de 1 (valeur par défaut), 2, 3, 4 ou 5 Go. Lorsque vous activez le partitionnement au niveau Standard, Service Bus crée 16 copies (16 partitions) de l’entité, chacune ayant la même taille que celle spécifiée. Par conséquent, si vous créez une file d’attente de 5 Go, avec 16 partitions, la taille maximale de la file d’attente est (5 * 16) = 80 Go. Vous pouvez voir la taille maximale de votre file d’attente ou rubrique partitionnée sur le portail Azure.
• Avec les files d’attente Stockage, si le contenu du message n’est pas sécurisé pour XML, il doit être encodé au format Base64. Si vous encodez le message au format Base64, la charge utilisateur peut atteindre 48 Ko, au lieu de 64 Ko.
• Avec les files d’attente Service Bus, chaque message stocké dans une file d’attente est composé de deux parties : un en-tête et un corps. La taille totale du message ne peut pas dépasser la taille maximale de message prise en charge par le niveau de service.
• Lorsque des clients communiquent avec des files d'attente Service Bus au moyen du protocole TCP, le nombre maximal de connexions simultanées à une file d'attente Service Bus unique est limité à 100. Ce nombre est partagé entre les expéditeurs et les destinataires. Si ce quota est atteint, les requêtes pour des connexions supplémentaires sont rejetées et une exception sera reçue par le code appelant. Cette limite n’est pas imposée aux clients qui se connectent aux files d’attente à l’aide d’une API REST.
• Si vous avez besoin de plus de 10 000 files d'attente dans un seul espace de noms Service Bus, vous pouvez contacter l'équipe de support Azure et demander l'augmentation du nombre de files d'attente. Pour aller au-delà de 10 000 files d’attente avec Service Bus, vous pouvez également créer des espaces de noms supplémentaires à l’aide du portail Azure.

Gestion et opérations

Cette section compare les fonctionnalités de gestion fournies par les files d’attente de stockage et les files d’attente Service Bus.

Informations supplémentaires

• Les files d’attente de stockage prennent en charge les attributs arbitraires qui peuvent s’appliquer à la description de la file d’attente, sous la forme de paires nom/valeur.
• Les deux technologies de file d'attente offrent la possibilité d'obtenir un aperçu d'un message sans avoir à le verrouiller, ce qui peut être utile lors de la mise en œuvre d'un outil de type explorateur/navigateur de file d'attente.
• Les API de messagerie répartie .NET de Service Bus utilisent les connexions TCP en duplex intégral pour améliorer les performances par rapport au protocole REST sur HTTP, et elles prennent en charge le protocole standard AMQP 1.0.
• Les noms des files d’attente de stockage peuvent compter entre 3 et 63 caractères, et contenir des lettres minuscules, des nombres et des traits d’union. Pour plus d’informations, consultez Affectation de noms pour les files d’attente et les métadonnées.
• Les noms des files d'attente Service Bus peuvent compter jusqu'à 260 caractères. Les règles d'affectation de noms sont moins restrictives. Les noms des files d’attente Service Bus peuvent contenir des lettres, des nombres, des points (.), des traits d’union (-) et des traits de soulignement (_).

Authentification et autorisation

Cette section décrit les fonctionnalités d’authentification et d’autorisation prises en charge par les files d’attente Service Bus et les files d’attente de stockage.

Informations supplémentaires

• Chaque requête à l'une des technologies de file d'attente doit être authentifiée. Les files d’attente publiques avec accès anonyme ne sont pas prises en charge.
• Grâce à l’authentification par signature d’accès partagé (SAS), vous pouvez créer une règle d’autorisation d’accès partagé sur une file d’attente qui peut fournir aux utilisateurs un accès complet, en écriture seule ou en lecture seule. Pour plus d’informations, consultez Stockage Azure - Authentification SAS et Azure Service Bus - Authentification SAS.
• Les deux files d’attente prennent en charge l’autorisation d’accès à l’aide de Microsoft Entra ID. Autoriser les utilisateurs ou les applications avec un jeton OAuth 2.0 retourné par Microsoft Entra ID garantit une meilleure sécurité et une plus grande simplicité d’utilisation que les signatures d’accès partagé (SAP). Microsoft Entra ID vous évite d’avoir à stocker les jetons dans votre code et d’être ainsi exposé au risque de vulnérabilités de sécurité. Pour plus d’informations, consultez Stockage Azure - Authentification Microsoft Entra et Azure Service Bus - Authentification Microsoft Entra.

Conclusion

En ayant une meilleure compréhension des deux technologies, vous pouvez prendre une décision plus informée sur les technologies de file d’attente à utiliser et à quel moment les utiliser. La décision d’utiliser des files d’attente Stockage ou des files d’attente Service Bus dépend de nombreux facteurs. Ces facteurs reposent largement sur les besoins spécifiques de votre application et de son architecture.

Vous préférerez peut-être choisir des files d’attente Stockage pour des raisons semblables aux suivantes :

• Si votre application utilise déjà les capacités de base de Microsoft Azure
• Si vous avez besoin d’une communication et d’une messagerie de base entre les services
• Si vous avez besoin de files d’attente dont la taille peut être supérieure à 80 Go

Les files d’attente Service Bus fournissent de nombreuses fonctionnalités avancées, telles que les suivantes. Il pourrait donc s’agir d’un choix privilégié si vous créez une application hybride ou si votre application a besoin de ces fonctionnalités.

• Sessions
• Transactions
• Détection des doublons
• Mise automatique en file d’attente de lettres mortes
• Capacités de publication et d’abonnement durables

Étapes suivantes

Les articles suivants fournissent des conseils et des informations sur l’utilisation des files d’attente de stockage ou Service Bus.

• Prise en main des files d’attente Service Bus
• Utilisation du service de stockage de files d’attente
• Meilleures pratiques relatives aux améliorations de performances à l’aide de la messagerie répartie Service Bus