Hortonworks DPS reikt uit naar de virtuele data meer

0
209

Nul

hortonworks-logo.png

Hortonworks vandaag is de invoering van Dataplane Service (DPS), een nieuwe cloud-gebaseerde service voor het bestuur van de virtuele data-meren. DPS is wat Hortonworks voorwaarden een data “stof.” Als we vinden dat de term een beetje onnauwkeurig, we karakteriseren DPS als een service die verbinding maakt en implementeert beveiliging – en governance-gerelateerde diensten, en presenteert ze aan de gegevens lake beheerder als een catalogus van catalogi. DPS niet vervangen van derden catalogi gebruikt voor data discovery, maar werk samen met hen. Het zal gaan zitten in de cloud, die een plaats om zich te “registreren” data-bronnen, het bouwen van een catalogus van metadata voor het beheer van data diensten. Het bouwt voort op bestaande open source projecten zoals Apache Ranger, waar security beleid worden gemaakt en worden nageleefd, en Atlas, die het beheer van de metadata.

Terwijl DPS zal worden gebruikt voor het beheren van clusters en het beheren van bestuur en veiligheid, het is niet een cluster management, security, of governance-instrument per se. In plaats daarvan, het is ontworpen om de stekker van de externe diensten met de gepubliceerde Api ‘ s. Hortonworks’ doel is het krijgen van derde partijen gin-up van dergelijke diensten. Met de uitrol, Hortonworks is inclusief een Data Lifecycle Manager die zorgt voor information lifecycle management (ILM) mogelijkheden omvat replicatie en disaster recovery, back-up en restore, en geautomatiseerde tiering van warme en koude gegevens naar verschillende vormen van opslag. Op de roadmap, Hortonworks plannen extra services voor de beveiliging en de implementatie.

De noodzaak voor DPS komt voort uit het besef dat de gegevens meren virtuele. Met nieuwe mandaten van de EU Data Protection Regulation (GDPR) het plaatsen van sterke eisen aan de privacy van gegevens, in veel gevallen, bedrijven zullen moeten blijven data van de consument in het land van herkomst. Vertaling: als je een multi-nationale onderneming, de privacy wetten zal vereisen dat u te onderhouden met meerdere fysieke gegevens meren.

Hetzelfde geldt voor de cloud-strategie. We verwachten dat enkele grote organisaties zetten al hun gegevens in de cloud of in een enkel wolkje. Intern beleid of publieke regelgeving kan dwingen organisaties anders gebogen over cloud-implementatie te behouden een aantal gegevens op het terrein. Zand voor organisaties op zoek te gaan een kritische massa van hun data en applicaties naar de cloud, we verwachten dat ze zal eisen dat minimaal tweede bronnen. Nogmaals, dat zal vertalen naar meerdere gegevens meren.

Dan is er het feit van het leven dat Hadoop niet zitten op een eiland, maar het zal samengaan met data warehouses, NoSQL operationele winkels, IoT platforms, en streaming-systemen. Dat is waar het leven wordt interessant omdat databases overlappen. SQL-databases worden met het toevoegen van JSON vermogens en vice versa, en ze samenwerken query Hadoop. Ondertussen, analytische tools doel van de eigenaar van de query, ongeacht waar het wordt uitgevoerd. Dan zijn er de Informatica en IBMs van de wereld met hun portefeuilles van data integration tools, plus de nieuwere generatie van de data preparatie, catalogiseren, en gegevens lake management tools.

DPS is een tijdige aanvulling op de Hortonworks portfolio omdat het erkent dat organisaties gebouw gegevens meren zijn waarschijnlijk het beheren van meerdere exemplaren en zal vereisen dat een maatregel van de samenhang tussen hen. DPS niet in de plaats van de governance-instrumenten die al deel uitmaken van de Hortonworks platform, met inbegrip van Ranger, waar veiligheid een beleid ingesteld; Knox, die fungeert als een gateway naar enterprise-mappen voor de authenticatie van gebruikers; Atlas, voor het taggen van data-entiteiten voor governance; en de Falcon, die wordt gebruikt voor het opgeven van gegevens workflows.

De duivel zit in de details, omdat cloud providers, database aanbieders, data integration tools en analyse tool aanbieders bekijk alle zich in het centrum van de wereld in planten hun inzet met governance. En dan is er het geval van cloud providers die uitzicht security, identity & access control als pijlers van hun service. Hortonworks’ uitdaging met DPS zal worden de mate waarin zij kunnen spelen goede buur aan elk van deze systemen met voornemens voor het bestuur.

0