Taşımacılık konusuna yeni bir bakış açısı getiren Uber, milyonlarca kullanıcısının verilerini doğru bir şekilde analiz etmeli. Bunu yapabilmek için birbirinden farklı kaynaklardan alınan farklı formatlardaki verileri alıp kendi formatına dönüştürmek için yüzlerce analist ve veri uzmanıyla çalışıyor.
Webrazzi’de yer alan habere göre 3 yıl önce alınan bir karar sonrası Uber, açık kaynak kodlu bir framework olan Apache Hadoop frameworküne geçiş yaptı. Bu sayede petabaytlarca verinin yönetilmesi daha mümkün hale getirildi. Her ne kadar Apache Hadopp ile bir problem çözülmüş olsa da farklı ekipler ve farklı araçlar göz önünde bulundurulunca farklı kaynaklardan dataların alınması ve sisteme dağıtılması işlemi ciddi bir iş yükü olmaya devam etmiş.
- Uber’in Hadoop platformu ekibi bu probleme çözüm olabilmesi açısında açık kaynak kodlu Marmaray projesini hayata geçirdi. Tahmin edebileceğiniz gibi adını Asya’yı Avrupa’ya bağlayan Marmaray projesinden alan bu açık kaynak kodlu kütüphane, temel olarak farklı Hadoop platformuna farklı kaynaklardan gelen farklı formatlardaki veriyi aktarma sürecini kolaylaştırıyor.
Apache Hadopp frameworkünü kullanan tüm firmaların kullanımına sunulan açık kayank kodlu Marmaray kütüphanesine dair detayları Uber’in Github sayfasından takip edebilirsiniz.
