Samenvloeiende, de verkoper met een commerciële versie en diensten voor de open source Apache Kafka-platform, zojuist ontvangen van $125 miljoen in de financiering. Dit heeft geresulteerd in Samenvloeiende in de eenhoorn grondgebied met een waardering van $2,5 miljard. U weet waarschijnlijk door nu, en als u hebt gevolgd, weet je ook waarom en hoe Samenvloeiende kreeg op dit punt.
ZDNet heeft het bijhouden van Kafka en de Samenvloeiing van de evolutie, en het nieuws waren een goede gelegenheid om bij te praten met Jay Kreps, Samenvloeiende CEO. Hier is het alles over hoe Kafka zal evolueren vanaf nu zijn de nieuwste updates op de data streaming landschap, en last but not least, wat dit allemaal betekent voor de cloud en open-source software.
Het verhaal tot nu toe
Het krijgen van een financiering van deze omvang, en van dit soort beleggers, gaat over meer dan geld alleen. Is het vooral een bevestiging van de waardepropositie en het business model. Samenvloeiende moet iets goed doen met Kafka. Niet slecht voor een bedrijf waarvoor het gemeenschappelijk mantra is dat het niet mainstream genoeg. Blijkbaar zijn de vooruitzichten voor de inschrijving op basis biedt zag er goed uit aan de beleggers.
Ook: De AI-chip eenhoorn dat is ongeveer om de wijze alles heeft computational Grafiek in de Kern
Wat Kafka doet is dat het werkt als de gateway voor het continu, real-time verwerking van gegevens. Het ondersteunt de verwerking van gegevens als een stroom van gebeurtenissen, niet zozeer als discrete data punten. Dit is een verandering van paradigma en maakt het gebouw real-time toepassingen. Terwijl het concept is niet geheel nieuw, zo bericht de bussen bijvoorbeeld zijn rond voor een tijdje, een paar dingen hebben gemaakt Kafka opvallen.
Samenvloeiende de groei is gebaseerd op een abonnement business model
De eerste is de schaal waarop Kafka dit kunt doen. Het verschil, volgens Kreps, is dat oudere systemen niet kunnen omgaan met de schaal die Kafka: “We kunnen de schaal van miljarden berichten. Nieuwe stijl, data in de cloud systemen zijn gewoon beter in dit, zijn dergelijke technieken nog niet bestond. We profiteerden als we rond kwam een beetje later.”
Het tweede ding is dat Kafka meer doet dan direct verkeer, of berichten naar de juiste ontvanger met snelheid en betrouwbaarheid. Het kan ook van toepassing zijn transformaties en business logica bericht achter. Dit is cruciaal, als het voegt een real-time verwerking laag. Het betekent in feite dat Kafka kan fungeren als host voor microservices-gebaseerde toepassingen, en dit is iets Kreps heeft genoemd als strategische doelstelling in het verleden.
Ook: Gegevens, kristallen bollen, op zoek glazen, met een kooktraject kikkers: het beoordelen van 2018, het voorspellen van 2019
Kreps bevestigd dat Kafka is zeer succesvol geweest met microservices use cases. Hij noemde een enquête op microservices vaststelling dat toont meer dan 50 procent van de bedrijven overweegt microservice tot vaststelling van Kafka, en een paar voorbeelden van Kafka adoptie als een Microservices platform, zoals de Capital One en Yelp. Kreps toegevoegd dat ze ook gericht op het winnen in de stream processing ruimte, wat betekent dat de vorderingen van dingen zoals KSQL.
Real-time verwerking van gegevens: Een paradigma shift, en een nieuw ecosysteem
KSQL is een van Kafka ‘ s laatste toevoegingen en grootste prestaties. Het is de mogelijkheid om SQL-syntaxis gebruikt voor het real-time verwerken, dat maakt de dingen een stuk gemakkelijker. Interessant, dit is een deel waar sprake is van concurrentie met andere platformen. Architecturen voor real-time verwerking hebben vaak Kafka als startpunt, met andere platformen oppakken van evenementen downstream en de toepassing van de verdere verwerking.
Een van deze platforms is Apache Samza, ook afkomstig van LinkedIn, zoals Kafka. Samza onlangs vrijgegeven versie 1.0, ook de invoering van SQL, alsook een update van de API, gebaseerd op Apache Bundel. Apache-Beam is een open-source project dat voorziet in een uniforme API, waardoor leidingen worden overgezet in uitvoering inclusief motoren Samza, Vonk, of Flink. Kafka niet draagbalk, en we vroegen ons af of deze veranderingen de dingen op een of andere manier. Niet echt.
Kreps ziet Samza meer als een voorloper van de stream processing functies nu in Kafka: “Het werd gebouwd en open source door mijn team toen ik op LinkedIn. Het bestaat nog steeds, als deze open source-projecten altijd doen, maar Kafka ‘ s stream processing mogelijkheden hebben genomen die naar het volgende niveau, zowel in termen van de reikwijdte van de goedkeuring, de transactionele mogelijkheden, de flexibiliteit, of de mogelijkheden van de API biedt.”
Het andere ding dat net gebeurd is, is dat de gegevens Ambachtslieden, de leverancier van het rijden Apache Flink, een van de andere platforms in de real-time verwerking van gegevens de ruimte, net overgenomen door Alibaba voor €90 miljoen. Kreps zei dat hij was echt blij voor de mensen van gegevens Ambachtslieden te hebben gevonden wat lijkt te zijn een goede afslag en wensen hen succes bij Alibaba:
“We zien niet de stream processing ruimte als zero-sum. De overgrote meerderheid van de gebruikers van Flink gebruik met Kafka als de bron van hun stream. Dus of mensen doen hun stream processing met Kafka ‘ s eigen stream processing mogelijkheden of met een externe verwerking lagen, zoals Flink op de top van Kafka, we zijn verheugd om te zien dat mensen aannemen en bouwen van dit soort gebeurtenissen streaming platform,” Kreps zei.
Op cloud 9
Inderdaad, dit is geen zero-sum game, en elk platform heeft zijn eigen plaats in de technische architecturen. Maar wat misschien wel het meest interessante aspect van deze is de tegenstelling tussen open source platform kunnen providers en cloud-leveranciers. gegevens Ambachtslieden is verkregen door een cloud leverancier, en we hebben gezien waarom dit zinvol voor beide zijden. Maar als Samenvloeiende wil om te blijven groeien in de cloud, het bevindt zich in het midden van dit conflict.
Ook: Alibaba Knippert: het Bouwen van een open source, op gegevens gebaseerde cloud rijk in real-time
Kreps opgemerkt dat hybride op-prem-en cloud-implementaties zijn een onderneming werkelijkheid, zodat ze blijven voldoen aan klanten waar ze zijn:
“We zijn continu bezig om onze cloud-strategie en voor klanten in de productie, wat betekent dat toevoegingen als management-en monitoring tools.
We willen zorgen voor een streaming data service ondersteuning voor alle klanten op hun reis naar een event-driven enterprise. Het leveren van een product zowel op-prem en in de cloud is het van essentieel belang te dienen van een modern bedrijf dat actief is in hybride en wereldwijd gedistribueerde omgevingen.”
Hybride cloud en multi-cloud-strategieën zijn de nieuwe normale en database workloads zijn die naar hen toe. Afbeelding: Tom ‘ s IT Pro
Dit is een realiteit voor elke data platform-leverancier, niet alleen voor Samenvloeiende. Kubernetes belooft om het de facto het besturingssysteem voor de multi-en hybride cloud, en Kafka heeft stappen ondernomen om het te ondersteunen. We vroegen Kreps wat hij ziet, en of we het kunnen verwachten, bijvoorbeeld Samenvloeiende te sluiten bij de Cloud Native Stichting. Kreps zei dat Kafka in combinatie met Kubernetes kunnen maken van streaming data alomtegenwoordig.
Maar, onlangs, AWS aangekondigd een beheerde versie van Kafka, en Samenvloeiende toegetreden tot de gelederen van open-source leveranciers die wijzigingen aan in hun licenties te zorgen dat dit niet gebeurt. We vroegen Kreps in welke mate dit was een deel van hun eigen strategie, en in welke mate is het impliciet “gedicteerd” door de noodzaak om een levensvatbaar business model aan de beleggers. Hoe heeft de gemeenschap gereageerd? Wat over cloud leveranciers?
Open source in de echte wereld
Kreps opgemerkt dat Kafka ‘ s licentie-eigenlijk nog niet veranderd. Wat is er veranderd, zei hij, is de licentie voor de onderdelen die zij produceren zo ‘ n Kafka. In de blog post die dit zelf heeft gedaan publiek, Kreps verdedigde dit besluit tegen twee mogelijke beschuldigingen, diametraal tegenover elkaar: die Samenvloeiende doet dit om het opslaan van de wankelende bedrijf, of om te zorgen voor meer winst. Kreps eens beweerd zaken gaan erg goed.
Ook: Buiten experts: Taken, taken en vaardigheden voor een data driven Toekomst van Werk
Echter, ging hij toe, zij denken dat de juiste manier om de fundamentele infrastructuur lagen met open code:
“Als workloads verplaatsen naar de cloud moeten we een mechanisme voor het behoud van die vrijheid, terwijl ook het inschakelen van een cyclus van de investeringen, en dit is onze motivatie om de licentie te wijzigen.
Er is geen gestandaardiseerd, ‘doel’ licentie nog niet. We gingen met een oplossing die subsidies de meeste van dezelfde rechten als Apache 2.0. We definiëren ons uitgesloten doel zo nauw als mogelijk te bereiken van ons doel. Als een standaard oplossing in de ruimte ontstaat, we ‘ re open te gaan.”
Dus, is dit een legit en verantwoord bewegen? Is dit nog steeds open source? Kreps betoogd dat er sprake is van open-source software, dat heeft deze niet nodig, als losse bijdragen en organisatorische structuur is genoeg. Maar de aard van de software Samenvloeiende is gebouw is echt moeilijk en vereist een organisatie te ondersteunen en de organisatie vraagt om een levensvatbaar business model. Dit maakt het naar ons zin. De Open Source-Stichting niet lijken in te stemmen, maar dit kan een bekrompen bekijken.
Jaron Lanier heeft de zaak dat de “alles gratis” lijn van denken die is overwegend onder de mensen achter de oprichting van het begin van internet heeft geleid tot de soort verdraaide ad-based business modellen en oligopolies in de bocht achter veel van de problemen die we hebben te maken met nu. Het maken van dezelfde fout weer met de cloud niet verstandig zou zijn.
Aangezien er niet zoiets als een gratis lunch, de meer rationele, eerlijke en duidelijke business modellen zijn, is het voor iedereen beter op de lange termijn. De botsing van belangen tussen open source commerciële platforms en cloud providers lijkt een geval van (vooral) de intellectuele eigendomsrechten ten opzichte van (vooral) de materiële middelen en kapitaal.
Ook: het Begin van de reskilling revolutie zonder mij: de Toekomst van Werk trends en zachte gegevens op zachte vaardigheden
Open source leveranciers zoals Samenvloeiende hebben aangetoond dat niet alleen het is mogelijk om te bouwen aan een beter product gebruik te maken van open source model, maar u kunt ook het bouwen van een levensvatbaar bedrijf. Cloud providers die niets bijdragen aan open source, en toch proberen te profiteren van het door het herverpakken van it als een service die direct concurreert met diensten die worden aangeboden door de makers moeten niet worden toegestaan om dit te doen.
Het falen om dit te realiseren ten koste van de belangen van iedereen die bijdraagt aan open source. Het hebben van levensvatbare open source business modellen is essentieel voor de verspreiding van open source. De Open Source-Stichting moet krijgen over de dogma ‘ s, en werken met open source leveranciers en medewerkers om te komen met een werkbare oplossing.
Vorige en aanverwante dekking:
Vrij laag niveau, pretty big deal: Apache Kafka en Samenvloeiende Open Source gaan mainstream
Apache Kafka is geweldig, maar het is een early adopter ding, gaat de conventionele wijsheid. Jay Kreps, Kafka co-creator en Samenvloeiende CEO, digresses. Reguliere adoptie is gebeurt, en het gebeurt nu, zegt hij, terwijl ook het commentaar op de nieuwste trends in de sector.
Samenvloeiende release voegt de enterprise, developer, IoT savvy om Apache Kafka
Samenvloeiende, het bedrijf dat is opgericht door de makers van streaming data platform Apache Kafka, is de aankondiging van een nieuwe release van vandaag. Samenvloeiende Platform 5.0, op basis van gisteren, de release van het open source Kafka 2.0, voegt enterprise security, nieuwe ramp recovery-mogelijkheden, veel functies voor ontwikkelaars, en belangrijk IoT ondersteuning.
Verwante Onderwerpen:
Data Management
Enterprise Software
Linux
Ontwikkelaar
Veiligheid