Et linjekart for Confluent Stream Governance som sporer kilden til Kafka -emneinnhold fra en datakontakt, et Kafka -emne og flere ksqlDB -forespørsler.
Kreditt: Confluent
På den virtuelle konferansen Kafka Summit i dag kunngjør arrangementets sponsor og selskap grunnlagt av Apache Kafkas skapere, Confluent, sin nye Stream Governance-pakke for styring av sanntidsstrømningsdata. Den administrerte skytjenesten er ifølge selskapet den første slike løsningen på markedet, og har som mål å bringe styring og beskyttelse til data-in-motion som kan sammenlignes med det som har blitt standard for data-at-rest.
< h3> Mål og søyler
ZDNet snakket med Confluents medstifter og administrerende direktør, Jay Kreps, som forklarte at Stream Governance retter seg mot moderne organisasjoners to største bekymringer når det gjelder data: hvordan du låser opp alt og likevel gjør det på en måte som er trygg, sikker og i samsvar. med industrielle og regulatoriske databeskyttelsesrammer som fortsetter å øke i antall.
Stream Governance konsentrerer seg om tre søyler: oppdagbarhet, sporbarhet og kvalitet på data. Suiten gjør det gjennom henholdsvis sin strømkatalog, strømlinje (bildet på skjermbildet øverst i dette innlegget) og strømkvalitetskomponenter. Confluent's Kreps gjorde poenget med at på grunn av måten datastrømming fungerer, kan styringen av det i stor grad gjøres automatisk. Med datavolumene som er utbredt i dag, er det et kjærkomment faktum.
Etter populær etterspørsel
Kreps uttalte til ZDNet at et stort antall styringsbehov kommer fra når data beveger seg, men de fleste vanlige datastyring og datakatalogløsninger fokuserer på data-at-rest. Confluents mål er å bygge bro over dette gapet og gjøre det på en måte som integreres med de helt vanlige plattformene. Med andre ord er Stream Governance fokusert på å etablere tillit til sanntidsdata som beveger seg gjennom en virksomhet, og prøver ikke å fortrengte eksisterende kommersielle og åpen kildekode datastyringsplattformer, rammer og standarder.
Kreps sier Stream Governances funksjonssett er 100% drevet av kundenes etterspørsel, selv katalysert av EUs General Data Protection Regulation (GDPR), California's Consumer Protection Act (CCPA) og andre sertifiseringer og forskrifter, både eksisterende og nye. Den generelle veksten i datavolum og økende brukstilfeller for digital virksomhetstransformasjon er også en vekst i kundenes etterspørsel.
Videre horisont?
Selv om Confluent har til hensikt å holde Stream Governance fokusert på streaming av data, er det mulig at det i visse organisasjoner ikke er noe smalt. Confluent har tidligere kunngjort teknologier som “Infinite Storage” i sin Confluent Cloud -plattform, som lar Kafka -emner fungere som vedvarende datalagre, i stedet for bare veier for dataoverføring. Med dette i bakhodet kan Stream Governances omfang av innflytelse faktisk være stort, og det samme kan forestillingen om at alle datasett kan sees på som spesielle forekomster av datastrømmer.
Les også: Confluent kunngjør uendelig lagring for Apache Kafka
Uansett hva, å la datastrømmer være uregulerte, i ettertid, er litt som å forlate en spesiell formålsmaskin ubeskyttet av en brannmur. Det er uforsiktig, usikkert og uhygienisk. Styring av strømningsdata er en velkommen støtte for ideen om at alle data må spores og beskyttes samtidig som de er kuraterte, åpne og tilgjengelige i en administrert kontekst.
Relaterte emner:
Big Data Analytics Innovation CXO Artificial Intelligence Enterprise Software Storage