data-infra
Sözlük ↗Veri Göl-Evi (Lakehouse)
Lakehouse, veri ambarı özelliklerini — ACID işlemleri, şema dayatma, hızlı SQL — tescilli bir ambar yerine doğrudan S3 gibi ucuz nesne depolamanın üzerine koyan bir mimaridir. Bir veri gölünün düşük maliyet ve esnekliğini bir ambarın güvenilirlik ve performansıyla birleştirmeyi hedefler; böylece iki ayrı sistem bakmazsınız. Bunu mümkün kılan teknoloji açık tablo formatlarıdır — Apache Iceberg, Delta Lake ve Apache Hudi — bunlar sütun tabanlı Parquet dosyalarının üstüne bir işlem günlüğü ve meta veri katmanı ekler. Bu katman; atomik yazmalar, zamanda yolculuk ve şema evrimini, aksi halde dağınık bir "veri bataklığı" olacak dosyalara getirir. SaaS geliştiricileri için lakehouse'un vaadi, kilitlenmeden ve depolama tekrarından kaçınmaktır: Ham veriniz ve analize hazır tablolarınız aynı açık dosyalarda yaşar, birçok motorca (Spark, Trino, DuckDB, Snowflake, Databricks) sorgulanabilir. Pratik not: Vaat gerçek ama araçlar klasik ambarlardan daha gençtir. Veriniz mütevazıysa yönetilen bir ambar çoğu zaman daha sadedir; ölçek, maliyet ya da çok motorlu erişim ek karmaşayı haklı çıkardığında lakehouse'a yönelin.
İlgili terimler