Kinesis Data Firehose

Kinesis Data Firehose Diyagramı

Tam Yönetilen Hizmet (Fully Managed Service)

• Amazon Redshift, Amazon S3, Amazon OpenSearch Service gibi hedeflere veri akışı yapılabilir.

• Ayrıca üçüncü parti hizmetler desteklenir: Splunk, MongoDB, Datadog, NewRelic, vb.

• Özel HTTP Uç Noktaları (Custom HTTP Endpoint) ile entegrasyon sağlanabilir.

---

Otomatik Ölçeklenebilirlik

• Otomatik ölçekleme, sunucusuz (serverless) yapı

• Kullandığın kadar öde (pay-per-use) modeliyle çalışır.

---

Gerçek Zamana Yakın Veri İşleme (Near Real-Time)

• Veri, boyut veya zaman bazlı tamponlama (buffering) ile aktarılır.

• Gerçek zamanlıya çok yakın bir gecikmeyle veri işlenir.

---

Desteklenen Formatlar

• CSV, JSON, Parquet, Avro, Raw Text, Binary Data

---

Dönüştürme & Sıkıştırma Özellikleri

• Parquet / ORC formatına dönüşüm yapılabilir.

• Gzip ve Snappy ile veri sıkıştırma desteklenir.

---

Özel Veri Dönüşümleri (Lambda ile)

• AWS Lambda fonksiyonları ile veriler dönüşebilir. Örnek: CSV → JSON