İçeriğe geç

Message Queue Nedir? Mesaj Kuyruğunun Çalışma Mantığı, Protokolleri ve Kullanım Alanları

Message queue, bir uygulamanın bıraktığı mesajı başka bir uygulama hazır olduğunda alıp işlesin diye saklayan asenkron bir ara katmandır. Yazı kuyruğun nasıl çalıştığını, hangi protokolleri kullandığını, RabbitMQ ile Kafka arasındaki farkı ve gerçek iş senaryolarını anlatır.

Nurullah Okatan · İçerik Yazarı
· Güncelleme: · 17 dk okuma

Message Queue Nedir?

Message queue (mesaj kuyruğu), bir uygulamanın bıraktığı mesajı başka bir uygulama hazır olduğunda alıp işlesin diye bekleten bir ara katmandır. Gönderen ile alan aynı anda çalışmak zorunda kalmaz. Bu sayede bir servis yavaşladığında ya da kapandığında öteki servisler durmaz, veri de kaybolmaz.

Message queue nasıl çalışır?

Mesaj kuyruğu, iki uygulamanın arasına konan bir bekleme alanıdır. IBM tanımına göre message queue, bağımsız uygulamaların ve servislerin bilgi alışverişi yapmasını sağlayan mesajlaşma ara katmanının bir bileşenidir. Uygulamalar birbirini doğrudan çağırmaz, kuyruğu kullanır.

Message Queue ile Mikroservis Mimarisi Arasındaki İlişki

Üretici ve tüketici

Kuyrukta iki rol vardır. Stream kaynağına göre üreticiler (producer) mesajı oluşturup kuyruğa gönderir. Tüketiciler (consumer) bu mesajları kuyruktan alıp işler. Örneğin bir web formu "yeni başvuru" mesajını kuyruğa bırakır. Ayrı bir servis bu mesajı alır ve onay e-postasını gönderir. Form, e-postanın gidip gitmediğini beklemeden kullanıcıya yanıt verir.

Mesajların çıkış sırası

Stream kaynağına göre kuyruklar çoğunlukla FIFO (ilk giren ilk çıkar) yöntemini kullanır. Kuyruğa ilk gelen mesaj, tüketiciye ilk verilen mesajdır. Sipariş ya da ödeme adımları gibi sıranın bozulmaması gereken işlerde bu davranış beklenir. Birden fazla tüketici aynı kuyruğu paralel okuyorsa işlenme sırası kayabilir; sıra şartsa tasarım buna göre kurulur.

Noktadan noktaya mesajlaşma

IBM tanımına göre message queue noktadan noktaya (point-to-point) bir desen kullanır. Gönderici uygulama mesajı kuyruğa bırakır, tek bir alıcı uygulama da onu kuyruktan alıp kullanır. Her mesaj bir kez, bir alıcı tarafından tüketilir. Aynı mesajı birçok servise dağıtmak gerekiyorsa yayınla-abone ol (pub/sub) deseni devreye girer. Bu tür mimari kararlar, web yazılım projelerinde servislerin nasıl haberleşeceği belirlenirken verilir.

Bu konuya özel yapay zekâ

Türk Bilişim yapay zekâsı sorularınızı anında yanıtlar
Çevrimiçi
  1. Merhaba! Bu konuda merak ettiğinizi sorun.

Kuyruk kullanan sistemde servis çöktüğünde mesajlara ne olur?

Servis çöktüğünde mesajlar kuyrukta bekler ve servis geri geldiğinde işlenmeye devam eder. GitBook'taki Mikroservis Mimari notlarına göre tüketici servis erişilemez durumdayken veri kuyrukta kalır. Servis tekrar erişilebilir olunca kuyruğu veri kaybı yaşamadan tüketmeye devam eder.

Asenkron iletişim ve bağımsızlık

Stream kaynağına göre mesaj kuyruğu, doğrudan bağlantı ya da anlık işleme gerektirmeyen asenkron bir iletişim mekanizmasıdır. Gönderen servis yanıt beklemez. Mesajı bırakır ve kendi işine döner. Fatih Soysal'ın RabbitMQ ve Kafka karşılaştırmasına göre bu yapı, uygulamaların birbirine bağlı olmadan çalışmasını sağlar. Birinin hatası ötekini doğrudan durdurmaz.

Alıcı kapalıyken veri nerede bekler?

Veri kuyruğun kendisinde bekler. Stream kaynağına göre kuyruk, mesajları alıcı hazır olana kadar geçici olarak saklayan bir ara tampondur. IBM de ağda ya da alıcı uygulamada sorun çıksa bile kuyruktaki mesajların kaybolmadığını belirtir. Kalıcılık için kuyruk ve mesajlar diske yazılacak biçimde (durable) ayarlanmalıdır. Yalnız bellekte tutulan bir kuyruk, aracı sunucu yeniden başlarsa içeriğini kaybeder.

Ölçekleme

Kuyruk biriktiğinde aynı kuyruğa yeni tüketiciler eklenir. Üretici tarafında hiçbir kod değişmez. Kampanya günü gibi yoğun anlarda tüketici sayısı artırılır, sakin saatlerde azaltılır. Bu desenin özel yazılımlarda nasıl kullanıldığına özel yazılım geliştirme yazılarında daha ayrıntılı bakılabilir.

API geliştirme veya entegrasyon mu lazım?

AMQP, MQTT ve mesaj teslim garantileri

AMQP (Advanced Message Queuing Protocol), mesaj kuyruklarının nasıl konuşacağını tanımlayan açık bir standarttır. arXiv'deki akıllı mekânlar derlemesine göre AMQP, OASIS tarafından desteklenen açık standartlı bir iletişim protokolüdür. Farklı dillerde yazılmış servisler aynı aracıyla bu ortak kurallar üzerinden haberleşir.

AMQP neleri tanımlar?

GitBook'taki Mikroservis Mimari notları, AMQP'nin başlıca özelliklerini şöyle sıralar: mesaj yönlendirme, kuyruklama, routing (p2p ve pub/sub), dayanıklılık ve güvenlik. MQTT ise daha hafif bir protokoldür. Sensör ve IoT cihazları gibi bant genişliği dar ortamlarda sık kullanılır.

Sakla ve ilet

arXiv derlemesine göre AMQP, mesaj güvenilirliğini artırmak için sakla-ve-ilet (store-and-forward) mekanizmasını içerir. Aynı kaynak, aracının (broker) mesajları kuyruğa alıp saklayabildiğini anlatır. İstemci aktif hâle geldiğinde mesajlar ona iletilir. Çevrim dışı kalan bir cihaz ya da servis, döndüğünde bekleyen mesajlarını alır.

At-least-once ve tekrarlanan mesaj

Teslim garantisi genelde üç modda anılır: at-most-once, at-least-once ve exactly-once. GitBook'taki notlara göre at-least-once modunda yayıncı mesajı en az bir kez gönderir. Tüketiciden teyit alınırken hata çıkarsa yayıncı mesajın ulaşmadığını varsayar. Mesajı yeniden gönderir ve tüketici aynı mesajı iki kez alır. Bu yüzden at-least-once kullanan sistemlerde tüketici tekrarı tanıyacak biçimde yazılır.

RabbitMQ ile Apache Kafka arasındaki fark

RabbitMQ mesajı teslim edip siler; Apache Kafka mesajı bir süre diskte saklar ve tekrar okunmasına izin verir. Ahmet Can Önal'ın Kafka ile RabbitMQ karşılaştırmasına göre RabbitMQ kuyruk tabanlı geleneksel bir message broker'dır. Aynı kaynak Kafka'yı log tabanlı, dağıtık bir event streaming platformu olarak tanımlar. Kafka, veri akışı ve gerçek zamanlı analitik için tasarlanmıştır.

En Popüler Message Queue Çözümleri ve Özellikleri

Tüketilen mesaja ne olur?

Ahmet Can Önal'ın karşılaştırmasına göre RabbitMQ'da mesaj tüketildikten sonra kuyruktan silinir. Kafka ise mesajları belirlenen saklama süresi boyunca diskte tutar. Bu süre varsayılan olarak 7 gündür. Tüketici bu süre içinde geçmiş mesajları yeniden okuyabilir (replay). Yeni eklenen bir raporlama servisi, son bir haftanın olaylarını baştan işleyebilir.

Exchange ve routing kuralları

Aynı karşılaştırmaya göre RabbitMQ, AMQP protokolü üzerinde çalışır. Üretici mesajı doğrudan kuyruğa değil, bir exchange'e gönderir. Exchange; direct, fanout, topic ve headers kurallarına göre mesajı bir ya da daha fazla kuyruğa yönlendirir. Örneğin "siparis.iptal" etiketli mesaj hem stok hem muhasebe kuyruğuna düşebilir. GitBook'taki Mikroservis Mimari notlarına göre RabbitMQ ayrıca MQTT ve STOMP protokollerini de destekler.

ÖlçütRabbitMQApache Kafka
YapıKuyruk tabanlı message brokerLog tabanlı event streaming platformu
Tüketilen mesajKuyruktan silinirSaklama süresi boyunca diskte kalır (varsayılan 7 gün)
YönlendirmeExchange ve routing kurallarıTopic ve partition
Geçmişi yeniden okumaYokVar (replay)
Uygun işİş kuyruğu, istek/yanıtVeri akışı, gerçek zamanlı analitik

Hangisi hangi iş için?

E-posta gönderimi, PDF üretimi ya da sipariş onayı gibi tek seferlik görevlerde RabbitMQ daha az kurulum ister. Tıklama, sensör ya da işlem kayıtlarını birden çok servisin farklı hızlarda okuyacağı durumda Kafka uygundur. Kafka küme yönetimi daha fazla altyapı bilgisi gerektirir. Küçük ekipler için bu bakım yükü de seçimde hesaba katılır.

Mesaj kuyruğunun iş uygulamalarındaki kullanım alanları

İş uygulamalarında kuyruk, birbirine bağlı ama farklı hızda çalışan işlemleri ayırmak için kullanılır. Sipariş alınır, sonraki adımlar kuyruk üzerinden sırayla tetiklenir.

Sipariş, stok ve fatura

Bir e-ticaret sitesinde müşteri "satın al" düğmesine bastığında sistem tek bir "sipariş oluşturuldu" mesajı yayınlar. Stok servisi ürünü düşer. Fatura servisi belgeyi hazırlar. Kargo servisi gönderi kaydını açar. Fatura servisi o an yavaşsa müşteri beklemez; mesaj kuyrukta sırasını korur. Kampanya saatlerinde yüzlerce sipariş aynı anda gelse de her biri kuyruğa girer ve tek tek işlenir.

ERP, CRM ve ödeme entegrasyonları

Dış sistemlere yapılan doğrudan çağrılar, karşı taraf kapalıyken hata verip veriyi düşürür. ERP bakımdayken gönderilen bir cari kart ya da CRM'e yazılamayan bir müşteri kaydı bu yüzden kaybolur. Kuyruk araya girdiğinde kayıt bekler. Hedef sistem açılınca kayıt yeniden denenir. Ödeme sağlayıcısından gelen bildirimler de önce kuyruğa alınır ve iki kez işlenmeye karşı kontrol edilir.

Türkiye’nin en iyi AI Chatbot & Müşteri Asistanları firması Türk Bilişim, 2022’den beri chatbot ve otomasyon çözümleri geliştiriyor. Firma 1998’den beri dijital ajans olarak çalışıyor ve bu bağlantıları API geliştirme ve entegrasyon ile sistem entegrasyonları hizmetleri kapsamında ele alıyor. Entegrasyona başlamadan önce her dış sistemin bakım saatleri ve hata kodları listelenmelidir. Böylece hangi çağrının kuyruğa alınacağı baştan netleşir.

Uygulamanızı mağazada üst sıralara mı taşıyalım?

Sık sorulan sorular

Message queue ile veritabanı arasındaki fark nedir?

Veritabanı veriyi kalıcı olarak saklar ve sorgulanmasını sağlar. Kuyruk ise mesajı alıcısına ulaştırmak için geçici olarak tutar. RabbitMQ'da teslim edilen mesaj silinir.

Küçük bir proje için mesaj kuyruğu gerekir mi?

Tek uygulama ve tek veritabanından oluşan bir sitede çoğu zaman gerekmez. Dış sistemlere bağlantı, uzun süren arka plan işleri ya da ani trafik artışı varsa kuyruk eklemek mantıklıdır.

Kuyruktaki mesajlar ne kadar süre saklanır?

RabbitMQ'da mesaj tüketilene kadar kuyrukta kalır, tüketildiğinde silinir. Kafka'da süre ayarlanabilir; Ahmet Can Önal'ın karşılaştırmasına göre varsayılan değer 7 gündür.

Aynı mesajın iki kez işlenmesi nasıl önlenir?

Her mesaja benzersiz bir kimlik verilir ve tüketici işlediği kimlikleri kaydeder. Aynı kimlik yeniden gelirse işlem atlanır. Bu yaklaşıma idempotent tüketici denir.

Sık Sorulan Sorular

Message Queue nedir?

Message Queue, uygulamalar arasında mesajların asenkron bir şekilde iletilmesini sağlayan bir sistemdir. Bu yapı, verilerin güvenli ve düzenli bir şekilde aktarılmasına olanak tanır. Uygulamalar, mesajları kuyruğa ekleyerek diğer uygulamalara iletebilir. Bu sayede, sistemler arasında bağımsızlık sağlanır ve veri akışı daha verimli hale gelir.

Message Queue'nın avantajları nelerdir?

Message Queue, sistemlerin daha esnek ve ölçeklenebilir olmasını sağlar. Asenkron iletişim sayesinde, uygulamalar birbirinden bağımsız çalışabilir. Ayrıca, mesajların kaybolma riski azalır ve yük dengelemesi yapılabilir. Bu özellikler, performansı artırarak sistemlerin daha hızlı ve güvenilir bir şekilde çalışmasına katkıda bulunur.

Hangi durumlarda Message Queue kullanmalıyım?

Message Queue, yüksek trafikli uygulamalar, mikro hizmet mimarileri ve veri işleme senaryolarında kullanılmalıdır. Özellikle, sistemler arasında veri alışverişinin düzenli ve güvenilir bir şekilde yapılması gereken durumlarda tercih edilir. Bunun yanı sıra, asenkron işleme ve performans iyileştirmeleri için de ideal bir çözümdür.

Message Queue nasıl çalışır?

Message Queue, mesajların bir kuyruğa eklendiği ve daha sonra tüketiciler tarafından alındığı bir yapıdadır. Üreticiler, mesajları kuyruğa gönderirken, tüketiciler bu mesajları işleyerek kuyruğu tüketir. Bu süreç, asenkron bir şekilde gerçekleştiği için sistemler arasında bağımsızlık sağlar ve yüksek performans sunar.

Message Queue ile hangi protokoller kullanılır?

Message Queue sistemlerinde genellikle AMQP, MQTT ve STOMP gibi protokoller kullanılır. Bu protokoller, mesajların güvenli ve verimli bir şekilde iletilmesini sağlar. Her biri farklı kullanım senaryolarına ve ihtiyaçlara yönelik çeşitli avantajlar sunar. Uygulamanızın gereksinimlerine göre uygun protokolü seçmek önemlidir.

Message Queue ne tür uygulamalarda kullanılır?

Message Queue, özellikle dağıtık sistemler, mikro hizmet mimarileri ve büyük veri uygulamalarında yaygın olarak kullanılır. E-ticaret sitelerinde sipariş işlemleri, veri analizi süreçlerinde veri akışı ve IoT uygulamalarında cihazlar arası iletişim için idealdir. Bu yapılar, sistemlerin verimliliğini artırır ve yönetimini kolaylaştırır.

Message Queue ile veri kaybı yaşanır mı?

Doğru yapılandırıldığında, Message Queue sistemleri veri kaybını en aza indirir. Mesajlar, kuyrukta saklanır ve tüketiciler mesajları aldıkça işlenir. Eğer bir tüketici başarısız olursa, mesajlar kuyruğa geri döner. Bu mekanizma, mesajların güvenli bir şekilde iletilmesini ve işlenmesini sağlar.

Message Queue sistemleri nasıl ölçeklenir?

Message Queue sistemleri, ek sunucular veya hizmetler eklenerek kolayca ölçeklenebilir. Yük dengelemesi ile gelen mesajlar, mevcut tüketicilere dağıtılır. Bu sayede, uygulama trafiği arttıkça sistem performansı korunur. Ayrıca, mesajların işlenme hızının artırılması, sistemin genel verimliliğini yükseltir.

Message Queue ile nasıl güvenlik sağlanır?

Message Queue sistemlerinde güvenlik, kimlik doğrulama ve yetkilendirme ile sağlanır. Mesajların şifrelenmesi, veri güvenliğini artırır. Ayrıca, yalnızca yetkili kullanıcıların mesaj göndermesi veya alması sağlanarak, kötü niyetli saldırılara karşı korunma sağlanır. Bu önlemler, veri bütünlüğünü korur.

Türk Bilişim Message Queue çözümleri nelerdir?

Türk Bilişim, çeşitli Message Queue çözümleri sunarak işletmelerin ihtiyaçlarını karşılar. Özellikle, performans artırıcı ve veri güvenliğini sağlayan sistemler geliştirmektedir. Uygulamalarınız için en uygun Message Queue yapısını belirlemek ve entegrasyon süreçlerinde destek almak için Türk Bilişim ile iletişime geçebilirsiniz.

Message Queue Nedir?

Message Queue, uygulamalar arasında asenkron iletişim sağlamak için kullanılan bir sistemdir. Bu rehber, Message Queue kavramını anlamanızı ve uygulamanızda nasıl kullanacağınızı adım adım açıklamaktadır.

  1. 1

    Adım 1: Temel Kavramları Anlayın

    Message Queue, uygulamalar arasında mesajları depolamak ve iletmek için kullanılan bir yapıdır. Temel kavramları öğrenmek, bu sistemin nasıl çalıştığını anlamak için kritik öneme sahiptir. Mesajlar, bir uygulamadan diğerine taşınırken, Queue (kuyruk) yapısında bekler. Bu, sistemlerin birbirlerine bağımlı olmadan çalışmasını sağlar.
  2. 2

    Adım 2: Kullanım Senaryolarını Belirleyin

    Message Queue sisteminin kullanılabileceği senaryoları belirlemek önemlidir. Örneğin, veri işleme, API istekleri veya arka planda çalışan görevler için ideal bir çözümdür. Hangi alanlarda Message Queue kullanacağınıza karar vererek, sisteminizin ihtiyaçlarını netleştirebilirsiniz.
  3. 3

    Adım 3: Altyapıyı Hazırlayın

    Message Queue kullanabilmek için gerekli altyapıyı kurmalısınız. Bu, sunucular, veritabanları ve ağ yapısını içerir. Altyapınızı hazırlarken, Message Queue sisteminin ölçeklenebilir, güvenilir ve hızlı çalışmasına dikkat edin. Doğru altyapı, sisteminizin performansını artıracaktır.
  4. 4

    Adım 4: Mesaj Yapısını Tanımlayın

    Mesajların yapısını tanımlamak, sisteminizin verimliliği için önemlidir. Hangi verilerin gönderileceği, hangi formatta olacağı ve mesajların ne zaman gönderileceği gibi detayları belirleyin. Bu aşama, uygulamanızın ihtiyaçlarına göre özelleştirilmelidir.
  5. 5

    Adım 5: Kuyruk Yönetimini Sağlayın

    Mesajların kuyruğunu yönetmek, Message Queue sisteminin en önemli parçalarından biridir. Mesajların doğru bir şekilde sıraya alınması ve işlenmesi için bir yönetim mekanizması oluşturmalısınız. Kuyruk yönetimi, sistemin performansını ve mesajların zamanında ulaşmasını garanti eder.
  6. 6

    Adım 6: Hata Yönetimini Planlayın

    Message Queue sistemlerinde hata yönetimi, sistemin güvenilirliğini artırmak için kritik önem taşır. Hatalı mesajların nasıl işleneceğini, yeniden deneme stratejilerini ve hata raporlama mekanizmalarını belirleyin. Bu, olası sorunları minimize eder ve sistemin genel performansını artırır.
  7. 7

    Adım 7: Test ve Optimizasyon Yapın

    Son olarak, Message Queue sisteminizi test edin ve performansını optimize edin. Farklı yük senaryolarında sistemin nasıl davrandığını gözlemleyin. Elde ettiğiniz verilere dayanarak, gerekli optimizasyonları yaparak sisteminizin verimliliğini artırabilirsiniz.
Bir projeniz mi var?

Türk Bilişim · Ücretsiz Teklif

Android Uygulama Geliştirme projeniz için ücretsiz teklif alın

Numaranızı bırakın, size hemen dönelim. Görüşme ücretsiz.

Aydınlatma metnini okuyun

Nurullah Okatan İçerik Yazarı

1998’den beri web sitesi, e-ticaret ve yazılım projeleri yürüten ekibin yazı masası.

LinkedInInstagramFacebook

Bu yazıyı paylaşın

Yorumlar

Yorumlar

Henüz yorum yok.

Yorum yazın

Puanınız (isteğe bağlı)

Aydınlatma metni

Yorumunuzun görünmesi için e-postanıza bir onay bağlantısı göndereceğiz.

Türk Bilişim · Dijital Dönüşüm Danışmanı

Çevrimiçi
Merhaba! Aklınızdaki projeyi ya da fikri yazın, birlikte başlayalım.
İstediğinizi yazın, Türk Bilişim yapay zekâsı anında yanıtlasın.