Noll
Apache Kafka, öppen källkod distribueras messaging system, har stadigt ristade ett fotfäste som de facto realtid standard för förmedling av meddelanden i skala miljöer. Sammanflytande, det företag vars grundare skapade Kafka, har precis släppt sin tredje årliga rapport om genomförandet. Rapporten som nådde en mycket större prov, antyder tillväxt, samtidigt som man visar några små förändringar i hur Kafka används.
Gartners analytiker Merv Adrian punkt som i Silicon Valley, om en idé på en whiteboard, det måste vara vardagsmat som skulle kunna tillämpas på Kafka. Det finns andra alternativ: MapR Strömmar kan du mäklare meddelanden utan kräver en separat Kafka kluster, medan streaming-tjänster som Amazon, Kinesis Firehose erbjuder liknande möjligheter. Ändå, Kafka har blivit de facto-standard för distribuerad, hög volym, realtid message queuing med brett säljaren support. Men när vi granskade Kafka för ett år sedan, fann vi att formen fortfarande var primitiva.
Så det borde inte vara förvånande att ta upp är fortfarande till stor del den domän av early adopters. Undersökningen prov, som fördubblats i år till 600 svarande, tydligt skev mot organisationer som är före i kurvan. Fallet i punkt? 78% av dem är redan med microservices arkitekturer, och 63 procent av dem är med hjälp av Kafka för att hantera tillståndet med de microservices. I den allmänna befolkningen, kommer du inte hitta en majoritet av företagen att redesigna deras ansökan stackar för att exponera funktionalitet som microservices.
Så det borde inte vara förvånande att de mest representerade sektorer i provet var de vanliga misstänkta för early adopters: datorsystem, finansiella tjänster, media och underhållning.
Ändå, data ger en bra inblick på där första generationens Kafka genomförandet är på väg. Medan 30% av provet i den lägsta volymen nivå (nedan miljoner meddelanden varje dag), kraftigt, en nästan lika stor andel rapporterade hantera upp till 99 miljoner meddelanden. Bland early adopters kommer en betydande del är att sätta Kafka till stress test.
Över 60% med hjälp av Kafka för att ersätta äldre meddelanden och PubSub-system, medan knappt hälften använder den för att förvandla ETL från ett parti till ett realtids-processen.
Sedan förra året har det skett en del förändringar i hur Kafka används. Medan data rörledningarna visade sig vara mest populär att använda i år, förra året var det allt om streaming. Microservices vid behandling gjorde ett nytt utseende i år, men var inte på förra årets undersökning, så skulle det vara ett freak för provtagning. Men det fanns vissa likheter mellan detta år och förra: både i år, hälften rapporterade att de använt Kafka för meddelanden, med streaming och data integration tätt bakom.
När det gäller att ta tillvara på Kafkas anlagen genom streaming API, asynkron program och ETL var toppen använder, men som i realtid processen, var det förvånande att knappt över 10% av urvalet var med hjälp av strömmar med sakernas internet.
Som en ram för integration, strax under hälften av de tillfrågade som används Kafka Anslut att integrera med Elasticsearch; bakom det, ungefär 25% – 30% av de svarande rapporterade att ansluta till PostgreSQL, HDFS, Amazon S3, och Cassandra.
Så vilka typer av användningsfall som var mest populära? Inte överraskande, att de skilde sig från industrin. För e-handel, media och underhållning sektorer, rekommendation motorer var den vanligaste användningen av Kafka, medan hårdvara och mjukvara för företag var mer benägna att använda den till säkerhet och spårning av bedrägerier. En överraskning var också att i finansiella tjänster, en annan tidig grogrund för Kafka användning, säkerhet och bedrägerier inte sticka ut, utan istället den vanligaste användningen var med “ekonomiska data” använd fall för vilka den mest uppenbara skulle vara real-time ticker flöden.
Att stärka den punkt som denna är fortfarande bara i början, mer än tre fjärdedelar av de svarande svarade att Kafka färdigheter är svåra att hitta. Trots Kafka njuta av ett brett stöd av industrin, det kvar hinder för att få Kafka av whiteboard och i produktion.
Relaterade Ämnen:
Digital Omvandling
Robotteknik
Sakernas Internet
Innovation
Affärssystem
CXO
0