Met Hortonworks’ DataWorks Summit (voorheen Hadoop Summit) kick-off op dinsdag, het bedrijf is afkomstig uit de poort een dag te vroeg, met twee aparte product aankondigingen. Specifiek, Hortonworks is de aankondiging van de general availability (GA) van v3.0 van Hortonworks DataFlow (HDF), van haar product voor de streaming van data management. Het is ook de lancering van een nieuwe “Flex Support” abonnement voor de Hortonworks Data Platform (HDP) Hadoop distributie, dat ondersteunt de klanten die werken met HDP op locatie, in de public cloud of een combinatie van de twee.
Streaming succes
De HDF-3.0 nieuws is interessant. Het product is gebaseerd op Apache NiFi, die zelf uitgegeven zijn 0.7.4 release vorige week. Hortonworks verworven Onyara, het bedrijf achter Apache NiFi, in 2015, kort na NiFi voor het eerst werd aangekondigd. Hortonworks deed de deal te krijgen in de streaming data spel en te verbreden en haar product portfolio. Ondertussen zijn veel van de dynamiek achter streaming schommelt rond de Apache Storm en Kafka-die beide Hortonworks ondersteunt al in HDP.
Lees ook: Hortonworks introduceert DataFlow, verwerft Apache NiFi-backer Onyara
Lees ook: IBM, Cloudera, Amazon aankondigingen: Big Data news roundup
Dus de druk op voor HDF om waarde toe te voegen aan de bestaande streaming platforms, en niet gewoon proberen om te standaardiseren op een nieuwe. HDF kan dit doen, maar toch, als het voegt twee componenten, Streaming Analytics Manager (SAM) en Schema Register, die beide werken over de Storm, Kafka en NiFi. SAM voegt een grafische user interface (GUI) omgeving voor het bouwen van streaming data stromen zonder code; het Schema Register voegt een catalogus van soorten voor data-stromen, zodat ze vindbaar zijn binnen de organisatie, en kan worden hergebruikt, in plaats gedupliceerd, wanneer andere teams wilt u toegang tot dezelfde gegevens.
Streaming Analytics Manager (SAM) in HDF 3.0
Credit: Hortonworks
Vrijheid van beweging
Het toevoegen van een GUI over streaming data is de moeite waard, vooral als het voegt een laag van abstractie op de top van meerdere streaming-motoren. Dit elimineert de noodzaak voor code, waarmee gegevens ingenieurs om zich te concentreren op logica en zakelijke problemen. Het maakt ook dat logica meer draagbare over de verschillende streaming-technologieën, met inbegrip van degenen die nog niet zijn ingevoerd nog. Voor de record, Hortonworks is niet de eerste om dit spel is. StreamAnalytix is in de markt voor een aantal jaren, met een vergelijkbaar product dat werkt op Apache Storm, Kafka en Vonk Streaming.
Lees ook: StreamAnalytix 2.0 ondersteuning voor bougies
Het Schema Register wordt toegevoegd aan de draagbaarheid, waardoor de logica om te worden gebruikt door de business units van andere dan de set-up van de stroom in de eerste plaats. Maar ja, dit is echt een facet van data governance, het roept de vraag op of deze functionaliteit moet onderdeel zijn van een bredere governance-instrument, bijvoorbeeld Apache Atlas, een project gedreven door Hortonworks. Atlas echt richt zich op de data-lijn en audit, maar dan data catalog functionaliteit. En terwijl zowel SAM en Schema Register open source-projecten, noch het een, is een Apache Software Foundation-project, tenminste nog niet.
Ambidextrie
Het steken met het concept van de overdraagbaarheid, de Hortonworks’ Flex Support idee is gewoon logisch; het is 2017, en het hebben van een aparte abonnementen voor op-prem-en cloud-klanten begint te maken over net zo veel zin als het hebben van verschillende contracten voor klanten die gebruik maken van een hardware leverancier over een ander. Wat is mooi over de Flex-Ondersteuning, hoewel, is dat het ook draagbare over klanten’ eigen Infrastructuur als een Service (IaaS) clouddiensten opstellingen evenals die met behulp van Platform-as-a-Service (PaaS) – implementaties op Hortonworks Gegevens Cloud voor AWS.
Dus, voor Hortonworks, het is allemaal over de draagbaarheid, over streaming platforms, over customer business units, en over lokale, IaaS en PaaS-clusters. In een tijd van overgang, dat is wat de klanten nodig hebben. Nu Hortonworks gewoon behoefte heeft aan een door-de-baan product ook voor klanten die niet willen om te gaan met afzonderlijke clusters.
Ik denk het niet lang.