Elementlpopülerliğe dayalı bir veri platformu oluşturan bir girişim Dagster orkestratörü, bugün Georgian liderliğinde 33 milyon dolarlık B Serisi raund topladığını duyurdu. Bu tur aynı zamanda yeni yatırımcılar 8vc, Human Capital ve Hannover’in yanı sıra mevcut yatırımcılar Sequoia, Index, Amplify ve Slow’un katılımını gördü ve şirketin toplam fonunu 48,8 milyon dolar.
Çoğu zaman olduğu gibi, Dagster’ın kurucusu Nick Schrock, GraphQL’in ortak yaratıcısı olduğu Facebook’ta uzun yıllar geçirdikten sonra Elementl’i de kurdu. Schrock şu anda şirketin CTO’su ve başkanı ve eski Facebook meslektaşı Pete Hunt şimdi şirketin CEO’su. Hunt’ın bana söylediği gibi, Elementl’e 2017 tohum turunun bir parçası olarak – çoğunlukla Schrock üzerine bir bahis olarak – yatırım yapmıştı. Hunt, o noktada Dagster’ın değer teklifini gerçekten anlamadığını, ancak Facebook’ta ve daha sonra kurucu ortağı olduğu ve daha sonra Twitter’a sattığı kötüye kullanım önleme hizmeti Smyte’de daha fazla veri sorunu üzerinde çalıştığı için itiraf etti. daha iyi veri orkestrasyonuna olan ihtiyaç onun için kısa sürede netleşti.
“Çok ciddi kararlar veren bu büyük karmaşık veri hatları olduğunu fark ettim – sadece sosyal medya gönderilerini kaldırmakla kalmıyor, aynı zamanda kimin ipotek alacağına da karar veriyor, tüm bu şeyler. Belirli bir büyüklüğe ulaştığınızda, her şirket bir veri şirketidir ve her şirketin bir veri platformu vardır” dedi Hunt. Bu aynı zamanda veri boru hatlarını yönetmenin birçok şirket için en büyük zorluklardan biri olduğu anlamına gelir.
Apache Hava Akışı bu ardışık düzenleri oluşturmak için en popüler araçlardan biri olmaya devam ediyor (ve buna güvenen çok sayıda yeni şirket var), ancak Schrock bulut, DevOps ve kapsayıcılar dünyası için optimize edilmiş daha modern bir sistem oluşturmak istiyordu. Ancak ekip aynı zamanda veri ardışık düzenlerini üst düzey bir bakış açısıyla yeniden düşündü. “İnsanların tarihsel olarak veri boru hatları oluşturma biçimleri, görevler açısından düşünmeleridir. Yani A adımından B adımına – ve sonra C adımına geçin. Bu adımlarda, her şeyi yapabilirler ve siz gerçekten bilemezsiniz – bazı veri tabanlarına beklemediğiniz bir şekilde yazabilirler ve hiçbir yolunuz yoktur. bunu kontrol etmek veya bu adımda gözlemlenebilirliğe sahip olmak, ”diye açıkladı Hunt.
Elementl bunu, özünde veri varlığı (veri ambarındaki bir tablo veya veri gölünde duran bir dosya olabilir) olarak adlandırdığı şeyle yeniden düşündü. Bu nedenle, görevleri temel soyutlama olarak düşünmek yerine, Elementl (ve Dagster) veri varlıklarına odaklanır. “Bu varlık kavramını sistemimizin merkezine yerleştirerek, kuruluştaki her veri varlığının ve içinden geçtiği her durum geçişinin ve onunla ilişkili tüm meta verilerin bir defterini alıyoruz. Bu, geliştiricilerin sevdiği bir zihinsel model,” dedi Hunt.
Apache Airflow gibi iyi test edilmiş araçlarla rekabet ettiği göz önüne alındığında, Dagster’ın büyük kuruluşlar için de iyi çalışması ve meşru bir açık kaynak projesi olması gerekir. Çoğu açık kaynak girişimi gibi, şirket de ticari teklifini oluştururken açık kaynak projesinin üzerine çoklu oturum açma, rol tabanlı erişim ve ekipler için destek gibi kurumsal özellikleri katmanlıyor. Ve Airflow çok popüler olduğu için ekip son zamanlarda bir araç başlattı bu, mevcut Airflow kullanıcılarının Dagster’da Airflow için yazılmış veri boru hatlarını çalıştırmasına olanak tanır.
Şirket, geçen yıl boyunca Dagster kullanan aktif projelerin sayısının üç katına çıktığını ve etrafındaki genel açık kaynak topluluğunun da öyle olduğunu söylüyor. Şu anda Doordash, Flexport ve Aritzia gibi şirketler üretimde Dagster kullanıyor.
“Dagster, sıfırdan dönüştürücü bir geliştirici deneyimi sağlamak için oluşturuldu.
veri mühendisliğinde en zorlu kullanım durumlarını desteklemek. Eşsiz soyutlamalarımız ve
Önce varlık yaklaşımı, veri uygulayıcıları arasında gerçekten yankı uyandırıyor ve bunun etkisini görüyoruz.
temel büyüme ölçütlerimizde,” dedi Schrock.
Şirket, pazara açılma organizasyonunu oluşturmak için yeni fonların çoğunu kullanmayı planlıyor.
“Ar-Ge ekibimiz, bir yıldan uzun bir süre önce veri düzenleme için Dagster’ı benimsedi.
Çözümlerin uzayda değerlendirilmesi. Dagster’ın nasıl olduğundan etkilendik
mühendislik ekibimizin üretkenliğini ve üretim derecesini verimli bir şekilde sevk etme becerisini hızlandırdı
veri hatları.” Georgian’ın baş yatırımcısı Emily Walsh dedi.
kim kimdir ne zaman nasıl nelerdir nedir ne işe yarar tüm bilgiler
dünyadan ilginç ve değişik haberler en garip haberler burada


